JP4040941B2 - Demand data management system and management method thereof - Google Patents
Demand data management system and management method thereof Download PDFInfo
- Publication number
- JP4040941B2 JP4040941B2 JP2002270610A JP2002270610A JP4040941B2 JP 4040941 B2 JP4040941 B2 JP 4040941B2 JP 2002270610 A JP2002270610 A JP 2002270610A JP 2002270610 A JP2002270610 A JP 2002270610A JP 4040941 B2 JP4040941 B2 JP 4040941B2
- Authority
- JP
- Japan
- Prior art keywords
- demand data
- data
- demand
- data compression
- processing
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Landscapes
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Description
【0001】
【発明の属する技術分野】
本発明は、観測して得た時系列データを管理するシステムおよびその管理方法に係り、特に、需要家の電力や熱等のエネルギー日負荷需要を観測して得た需要データを管理する需要データ管理システムおよびその管理方法に関する。
【0002】
【従来の技術】
図11に従来需要予測をするにあたり、取得した需要データを管理する需要データ管理システム1およびその管理方法を説明した説明図を示す。
【0003】
需要データ管理システム1は、電力・熱等のエネルギー需要の日負荷を例えば、1時間等の所定単位時間毎に計測し、計測で得た計測値を一定時間積算してデータ(以下、需要データとする)を構成する需要データ観測手段2と、前日の需要から本日の需要の予測を行う需要予測処理手段3と、需要データ観測手段2で観測した需要データを保存する需要データ保存手段4とを具備する。そして、需要データ管理システム1が具備する需要データ観測手段2、需要予測処理手段3および需要データ保存手段4は、バス5および信号伝送手段6を介して電気的に接続され、ネットワーク7を形成している。
【0004】
図11に示される需要データ管理システム1による需要データ管理方法について説明する。
【0005】
電力・熱等のエネルギー需要の日負荷は、需要データ観測手段2で観測され、需要データが構成される。需要データ観測手段2で構成された需要データは、需要データ保存手段4に保存される。需要データ保存手段4に保存された需要データは、需要予測処理手段3で過去実績値を用いた需要予測を行う際に需要データ保存手段4から適宜呼び出されて利用される。
【0006】
一般的に、直近の需要データ、すなわち、需要データ観測手段2で観測し構成されたばかりの需要データは、観測時のサンプリング周期に相当する最大解像度のデータとして保存される。しかし、観測・構成されてから例えば、1週間等の一定期間が経過した需要データに対しては、補助記憶媒体(光ディスク、磁気テープ等)にバックアップしたり、オリジナルデータを月積算・季積算のデータという形でより粗い解像度のデータに変換して保存し直すことで、データのアクセスに有利な主記憶媒体である需要データ保存手段4の記憶領域をできるだけ確保するようにしていた。
【0007】
図11に示される需要データ管理システム1は、公開特許公報「特開平6−259408号」に記載される(例えば、特許文献1参照)。
【0008】
【特許文献1】
特開平6−259408号公報([0001]〜[0003]、[0010]および図1)
【0009】
【発明が解決しようとする課題】
従来の需要データ管理システムおよびその管理方法では、扱う顧客が数百から数千におよぶような大規模な小売事業者やエネルギーサービス事業者に対して適用した場合、毎日の観測して取得する需要データは、膨大な容量のデータとなり、記憶保存コストは非常に大きなものとなることが懸念される。
【0010】
また、主記憶媒体である需要データ保存手段の記憶領域を確保する観点から一定期間が経過した需要データに対しては、補助記憶媒体にバックアップしたり、粗い解像度データに変換して保存し直す等の処理を施している。従って、一定期間が経過した需要データに対しては、オンライン的にアクセスすることが不可能、あるいは困難となり、顧客の実績データの有効活用が十分に図られていない問題があった。
【0011】
本発明では、観測し構成された需要データに対してデータ圧縮処理を施して保存し、必要に応じて圧縮されたデータを解凍して利用を可能とすることで、需要データ保存手段が持つ主記憶媒体の記憶領域を有効に利用するとともに、より長期的な期間に亘る需要データ実績へのオンラインでの接続を可能とした需要データ管理システムおよび管理方法を提供することを目的とする。
【0012】
また、本発明の他の目的は、ウェーブレット変換を用いたデータ圧縮方法を需要データのデータ圧縮処理に応用して、システム利用者が需要データのデータ圧縮処理を行う際、データ圧縮率とデータの再現精度とを考慮した上で実行可能にし、需要データのよりフレキシブルかつ容易な保存および管理を可能とした需要データ管理システムおよび管理方法を提供することにある。
【0013】
さらに、本発明の他の目的は、需要データのデータ圧縮処理を行って構成される圧縮需要データの2次的利用を可能とした需要データ管理システムおよび管理方法を提供することにある。
【0014】
【課題を解決するための手段】
本発明に係る需要データ管理システムは、上述した課題を解決するために、請求項1に記載したように、需要家の電力・熱等のエネルギー需要の日負荷を所定単位時間毎に計測し、一定時間積算して需要データを得る需要データ観測手段と、前日までの需要データ実績から当日の需要データを予測する需要予測処理手段と、ウェーブレット変換を用いて前記需要データをデータ圧縮処理して圧縮コード化した圧縮需要データの出力および前記圧縮需要データをデータ解凍処理して需要データを再構成した再構成需要データの出力を実行する需要データ圧縮・解凍処理手段と、前記圧縮需要データを保存する圧縮需要データ保存手段と、前記圧縮需要データに含まれる特定レベルのウェーブレット成分を分類キー情報として用いて前記需要データの分類を行う需要データ分類手段とを具備し、前記需要データ分類手段は、前記圧縮需要データを所定のカテゴリーに分類して前記圧縮需要データ保存手段に保存するように構成されることを特徴とする。
【0015】
上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項2に記載したように、前記需要データ圧縮・解凍処理手段が、データ圧縮処理前の需要データに完全再構成を補償する損失なしデータ圧縮・解凍処理部およびある程度の劣化が伴う損失ありデータ圧縮・解凍処理部のいずれか一方を備えることを特徴とする。
【0016】
また、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項3に記載したように、前記需要データ圧縮・解凍処理手段が、データ圧縮処理前の需要データに完全再構成を補償する損失なしデータ圧縮・解凍処理部と、ある程度の劣化が伴う損失ありデータ圧縮・解凍処理部と、前記需要データをデータ圧縮処理する際に、前記損失なしデータ圧縮・解凍処理部および損失ありデータ圧縮・解凍処理部のうちデータ圧縮処理の実行を希望する一方をシステム利用者の操作により自在に切り替え可能な切替スイッチとを備え、前記損失なしデータ圧縮・解凍処理部および損失ありデータ圧縮・解凍処理部のうちシステム利用者の希望する一方でデータ圧縮処理を実行することを特徴とする。
【0017】
さらに、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項4に記載したように、前記需要データ圧縮・解凍処理手段が、ある程度の劣化が伴う損失ありデータ圧縮・解凍処理部と、このデータ圧縮・解凍処理部で実行するデータ圧縮処理のデータ圧縮率を設定する際に、システム利用者がデータ圧縮率を仮設定すると、前記データ圧縮・解凍処理設定部が前記需要データを仮設定されたデータ圧縮率で仮データ圧縮処理および再構成処理を行い、再構成需要データのプレビュー表示することを可能に構成したデータ圧縮・解凍処理設定部とを備えることを特徴とする。
【0018】
さらにまた、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項5に記載したように、前記需要データ圧縮・解凍処理手段が、ある程度の劣化が伴う損失ありデータ圧縮・解凍処理部を備え、前記損失あり圧縮・解凍処理部は、前記需要データを離散ウェーブレット変換するウェーブレット変換処理部と、このウェーブレット変換処理部から出力されるウェーブレット変換係数のうち、このウェーブレット変換係数の絶対値が所定のしきい値以上のものを抽出する変換係数抽出処理部と、この変換係数抽出処理部から抽出されたウェーブレット変換係数を符号化して前記需要データを圧縮需要データとして出力する符号化処理部と、前記圧縮需要データを復号してウェーブレット変換係数を出力する復号処理部と、この復号処理部から出力されたウェーブレット変換係数を逆ウェーブレット変換してウェーブレット変換係数から前記再構成需要データを出力する逆ウェーブレット変換処理部とを備えることを特徴とする。
【0019】
一方、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項6に記載したように、前記変換係数抽出処理部が、前記ウェーブレット変換処理部から出力されるウェーブレット変換係数をこのウェーブレット変換係数の絶対値が大きい順にソートする変換係数絶対値ソーティング処理部と、この変換係数絶対値ソーティング処理部から出力される変換係数数列をシステム利用者が指定した所定データ圧縮率で一義的に決定する分割比で分割し、分割した前後にある2つの変換係数の絶対値からしきい値を決定するしきい値決定処理部と、このしきい値決定処理部から出力されるしきい値に基づき前記ウェーブレット変換処理部から出力されたウェーブレット変換係数を抽出する抽出処理実行部とを備えることを特徴とする。
【0020】
また、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項7に記載したように、前記特定レベルのウェーブレット成分は、前記需要データの信号波形の主要な形状特徴を現すウェーブレット成分であることを特徴とする。
【0021】
さらに、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項8に記載したように、前記需要データ分類手段で分類された圧縮需要データと検索したい需要データとの圧縮需要データ内に含まれる分類キー情報に基づき、この分類キー情報のマッチング度を評価して、検索目的に合致した圧縮需要データを表示する需要データ検索手段をさらに具備することを特徴とする。
【0022】
さらにまた、上述した課題を解決するために、本発明に係る需要データ管理システムは、請求項9に記載したように、前記特定レベルのウェーブレット成分は、離散ウェーブレット変換の最終残存データとして得られる平滑化データであることを特徴とする。
【0023】
本発明に係る需要データ管理方法は、上述した課題を解決するために、請求項10に記載したように、需要家の電力・熱等のエネルギー需要の日負荷を所定単位時間毎に計測し、一定時間積算して得た需要データをウェーブレット変換を用いたデータ圧縮処理を行い圧縮コード化した圧縮需要データを出力する需要データ圧縮処理ステップと、前記圧縮需要データに含まれる特定レベルのウェーブレット成分を分類キー情報として用いて前記需要データの分類を行う圧縮需要データ分類ステップと、前記圧縮需要データ分類ステップの分類結果に基づいて前記圧縮需要データを分類して保存する圧縮需要データ保存ステップと、を具備することを特徴とする。
【0024】
上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項11に記載したように、需要データ圧縮処理ステップが、データ圧縮処理前の需要データに完全再構成を補償する損失なしデータ圧縮処理ステップおよびある程度の劣化が伴う損失ありデータ圧縮処理ステップのいずれか一方であることを特徴とする。
【0025】
また、上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項12に記載したように、需要データ圧縮処理ステップは、データ圧縮処理前の需要データに完全再構成を補償する損失なしデータ圧縮処理ステップおよびある程度の劣化が伴う損失ありデータ圧縮処理ステップの2つデータ圧縮処理ステップからいずれか一方を選択する需要データ圧縮処理手法選択ステップを備え、この需要データ圧縮処理手法選択ステップで選択した一方のデータ圧縮処理ステップを実行することを特徴とする。
【0026】
さらに、上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項13に記載したように、需要データ圧縮処理ステップは、ある程度の劣化が伴う損失ありデータ圧縮処理ステップであり、この損失ありデータ圧縮処理ステップは、データ圧縮処理の際のデータ圧縮率を設定するデータ圧縮処理設定ステップを備え、このデータ圧縮処理設定ステップは、データ圧縮率を仮設定するデータ圧縮率仮設定ステップと、このデータ圧縮率仮設定ステップで仮設定されたデータ圧縮率で、需要データを仮データ圧縮処理および再構成処理を行った場合における再構成需要データのプレビュー表示とデータ圧縮処理前の需要データである原需要データとを視覚的に比較確認する再構成需要データ概形確認ステップと、この再構成需要データ概形確認ステップで視覚的に比較確認した再構成需要データが問題ない場合に、データ圧縮率仮設定ステップで設定したデータ圧縮率を正式なデータ圧縮率として適用を許可するデータ圧縮率確定ステップとを備えることを特徴とする。
【0027】
本発明に係る需要データ管理方法は、上述した課題を解決するために、請求項14に記載したように、前記圧縮需要データ保存ステップで保存される前記圧縮需要データをデータ解凍処理して需要データを再構成した再構成需要データを出力する圧縮需要データ解凍処理ステップをさらに具備し、前記需要データ圧縮処理ステップは、ある程度の劣化が伴う損失ありデータ圧縮処理ステップであり、この損失ありデータ圧縮処理ステップは、前記需要データを離散ウェーブレット変換するウェーブレット変換処理ステップと、このウェーブレット変換処理ステップで出力されたウェーブレット変換係数のうち、このウェーブレット変換係数の絶対値が所定のしきい値以上のものを抽出する変換係数抽出処理ステップと、この変換係数抽出処理ステップで抽出されたウェーブレット変換係数を符号化して前記需要データを圧縮需要データとして出力する符号化処理ステップとを備え、前記圧縮需要データ解凍処理ステップは、前記圧縮需要データを復号してウェーブレット変換係数を出力する復号処理ステップと、この復号処理ステップで出力されたウェーブレット変換係数を逆ウェーブレット変換してデータ圧縮処理前の需要データを再構成した再構成需要データを出力する逆ウェーブレット変換処理ステップとを備えることを特徴とする。
【0028】
上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項15に記載したように、前記変換係数抽出処理ステップが、前記ウェーブレット変換処理ステップで出力されるウェーブレット変換係数をこのウェーブレット変換係数の絶対値が大きい順にソートする変換係数絶対値ソーティング処理ステップと、この変換係数絶対値ソーティング処理ステップで出力される変換係数数列をシステム利用者が指定した所定データ圧縮率で一義的に決定する分割比で分割し、分割した前後にある2つの変換係数の絶対値からしきい値を決定するしきい値決定処理ステップと、このしきい値決定処理ステップで出力されたしきい値に基づき前記ウェーブレット変換処理ステップで出力されたウェーブレット変換係数を抽出する抽出処理実行ステップとを備えることを特徴とする。
【0029】
また、上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項16に記載したように、前記特定レベルのウェーブレット成分は、前記需要データの信号波形の主要な形状特徴を現すウェーブレット成分であることを特徴とする。
【0030】
さらに、上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項17に記載したように、前記需要データ分類ステップで分類された圧縮需要データと検索したい需要データとの圧縮需要データ内に含まれる分類キー情報に基づき、この分類キー情報のマッチング度を評価して、検索目的に合致した圧縮需要データを表示する需要データ検索ステップをさらに具備することを特徴とする。
【0031】
さらにまた、上述した課題を解決するために、本発明に係る需要データ管理方法は、請求項18に記載したように、前記特定レベルのウェーブレット成分は、離散ウェーブレット変換の最終残存データとして得られる平滑化データであることを特徴とする。
【0032】
【発明の実施の形態】
以下、本発明に係る需要データ管理システムおよびその管理方法の実施の形態について添付の図面を参照して説明する。
【0033】
[第1の実施形態]
図1に本発明の第1の実施形態に係る需要データ管理システムおよびその管理方法の一実施例として用いる需要データ管理システム10の構成概略を示した構成概略図を示す。
【0034】
図1に示される需要データ管理システム10は、電力・熱等のエネルギー需要の日負荷を例えば、1時間等の所定単位時間毎に計測し、計測で得た計測値を一定時間積算して需要データを構成する需要データ観測手段11と、過去の需要から本日の需要の予測を行う需要予測処理手段12と、需要データ観測手段11で観測した需要データをデータ圧縮処理したり、データ圧縮処理された需要データ(以下、圧縮需要データとする)の解凍を行う需要データ圧縮・解凍処理手段13と、需要データ圧縮・解凍処理手段13でデータ圧縮した需要データを保存する圧縮需要データ保存手段14とを具備する。
【0035】
需要データ管理システム10が具備する需要データ観測手段11、需要予測処理手段12および需要データ圧縮・解凍処理手段13は、バス16および信号伝送手段17を介して電気的に接続され、ネットワーク18を形成している。また、圧縮需要データ保存手段14は、需要データ圧縮・解凍処理手段13と電気的に接続され、需要データ圧縮・解凍処理手段13を介してネットワーク18と接続される。
【0036】
図2に需要データ管理システム10が具備する需要データ圧縮・解凍処理手段13の一実施例を表した構成概略図を示す。
【0037】
需要データ圧縮・解凍処理手段13は、データ圧縮および解凍処理の設定を行うデータ圧縮・解凍処理設定部20と、データ圧縮および解凍処理を実行するデータ圧縮・解凍処理部21とを備える。需要データ圧縮・解凍処理手段13が備えるデータ圧縮・解凍処理設定部20は、データ圧縮および解凍処理の設定を入力する処理設定入力部23と、設定内容を確認する表示出力部24と、入力された処理設定を行うべく演算処理を実行する処理設定実行部25とを備える。
【0038】
図3にデータ圧縮・解凍処理部21の一実施例を表した構成概略図を示す。
【0039】
図3に示されるデータ圧縮・解凍処理部21は、データ損失を伴うデータ圧縮処理(以下、損失ありデータ圧縮処理とする)を行うデータ圧縮部28と、データ圧縮部28で行った圧縮需要データをデータ解凍処理するデータ解凍部29とを備えたハードウェアである。
【0040】
データ圧縮部28は、ウェーブレット変換を用いた損失ありデータ圧縮処理により需要データのデータ圧縮処理を行う。データ圧縮部28に入力された需要データは、ウェーブレット変換処理部31でウェーブレット変換処理が行われ、ウェーブレット変換係数が出力される。出力されたウェーブレット変換係数は、変換係数抽出処理部32に入力され、変換係数抽出処理部32である設定されたしきい値より高い値を持つウェーブレット変換係数が抽出される。そして、抽出されたウェーブレット変換係数は、符号化処理部33で符号化され、圧縮コード化された需要データ、すなわち、圧縮需要データが出力される。
【0041】
また、データ圧縮・解凍処理部21は、損失ありデータ圧縮処理のため、変換係数抽出処理部32で抽出するウェーブレット変換係数の割合、すなわち、データ損失割合を加減することによって、データ圧縮処理前の需要データ(以下、原需要データとする)の容量に対する圧縮需要データの容量(以下、データ圧縮率とする)を可変することが可能となる。
【0042】
図4にデータ圧縮部28が備える変換係数抽出処理部32の一実施例を表した構成概略図を示す。
【0043】
変換係数抽出処理部32では、入力されるウェーブレット変換係数を、例えば、絶対値の大きい順にソートする変換係数絶対値ソーティング処理部35と、入力設定されたデータ圧縮率に応じて適切なしきい値を決定するしきい値決定処理部36と、しきい値決定処理部36で決定されたしきい値に基づきウェーブレット変換係数を抽出する抽出処理実行部37とを備える。
【0044】
一方、データ解凍処理部29は、圧縮需要データのデータ解凍処理を行い、データ圧縮処理前の需要データ、すなわち、原需要データを再構成し、再構成した需要データ(以下、再構成需要データとする)を出力する。入力された圧縮需要データ、すなわち、圧縮コード化された需要データは、復号処理部39でウェーブレット変換係数に復号される。復号されたウェーブレット変換係数は、逆ウェーブレット変換処理部40で逆ウェーブレット変換処理がなされ、再構成需要データが出力される。
【0045】
尚、出力される再構成需要データと原需要データとは、圧縮時にデータ損失があるため、完全には一致しない。また、圧縮時のデータ損失量は、データ圧縮処理時のデータ圧縮率が高い程多くなるので、データ圧縮処理時のデータ圧縮率が高い程、原需要データに対する再構成需要データの劣化はより顕著なものとなる。
【0046】
本実施形態における需要データの管理方法について説明する。
【0047】
本実施形態における需要データ管理方法は、まず、需要データ圧縮ステップを行う。需要データ圧縮ステップは、需要データ観測手段11で観測し構成された需要データを需要データ圧縮・解凍処理手段13に伝送する。需要データが需要データ圧縮・解凍処理手段13に伝送される際は、データ圧縮処理の施されていない通常のデータ形式で伝送される。
【0048】
次に、需要データ圧縮・解凍処理手段13で入力された需要データを圧縮コード化する損失なしデータ圧縮処理ステップがなされる。すなわち、需要データ圧縮・解凍処理手段13で、データ容量が圧縮された圧縮需要データが構成され、出力される。損失なしデータ圧縮処理ステップが完了すると、圧縮需要データは、圧縮需要データ保存手段14へ伝送される。そして、圧縮需要データ保存手段14で圧縮需要データ保存ステップがなされ、圧縮需要データの保存および管理を行う。
【0049】
需要データ圧縮・解凍処理手段13で行われる損失なしデータ圧縮処理ステップは、データ圧縮・解凍処理設定部20に設定されたデータ圧縮処理設定条件に基づきデータ圧縮・解凍処理部21で実行される。データ圧縮処理の際の条件設定は、需要データ管理システム10を利用し操作する者(以下、システム利用者とする)がデータ圧縮処理前にデータ圧縮・解凍処理設定部20が備える処理設定入力部23から事前に入力設定するデータ圧縮処理設定ステップを行うことでなされる。
【0050】
図5にデータ圧縮・解凍処理設定部20のデータ圧縮処理設定条件を設定する際に表示出力部24に表示されるデータ圧縮処理設定画面43の一例を示す。
【0051】
図5に示されるデータ圧縮処理設定画面43は、圧縮する前の需要データの信号波形を表示する原需要データ表示部45と、データのデータ圧縮率を設定するデータ圧縮率設定部46と、データ圧縮率設定部46で仮設定されたデータ圧縮率で圧縮した圧縮需要データを再構成した需要データの信号波形を表示する再構成需要データ表示部47とを備える。
【0052】
データ圧縮率設定部46は、データ圧縮率を直接数値入力して設定を受け付け、設定されたデータ圧縮率を表示するデータ圧縮率表示部49と、データ圧縮率を準可変的に変化させて設定するスライダ50と、仮設定したデータ圧縮率をOKするOKボタン51と、仮設定したデータ圧縮率をキャンセルするCancelボタン52とを有する。
【0053】
データ圧縮処理設定ステップでは、まず、データ圧縮率仮設定ステップがなされる。データ圧縮率仮設定ステップは、システム利用者が処理設定入力部23から入力し、データ圧縮率設定部46の設定を行うことでデータ圧縮率の仮設定を行うステップである。データ圧縮率の仮設定は、データ圧縮率表示部49に直接数値入力、若しくは、スライダ50のスライド操作により行うことができる。
【0054】
データ圧縮率仮設定ステップがなされると、処理設定実行部25が仮設定されたデータ圧縮率でデータ圧縮処理した圧縮需要データを再構成した場合において出力される再構成需要データの信号波形を再構成需要データ表示部41に表示する。仮データ圧縮率を変化させると、処理設定実行部25は、再構成データを速やかに更新して再構成需要データの信号波形を再構成需要データ表示部47に表示する。
【0055】
次に、システム利用者は、再構成需要データ概形確認ステップを行い、原需要データ表示部39に表示される原需要データの信号波形と再構成需要データ表示部41に表示される再構成需要データの信号波形とを表示出力部24で、信号波形にどの程度の劣化が生じるかを視覚的に判定する。そして、システム利用者は、要求するデータデータ圧縮率と信号波形の劣化具合とを考慮した上で適切なデータ圧縮率を決定する。
【0056】
次に、現在の仮設定されたデータ圧縮率でデータ圧縮処理を行う場合は、システム利用者は、データ圧縮率確定ステップを行う。システム利用者は、現在の仮設定されたデータ圧縮率でデータ圧縮処理を行う場合には、データ圧縮率確定ステップとしてデータ圧縮処理設定画面43が有するOKボタン51を選択する。OKボタン51が選択されると、処理設定実行部25は、仮設定されたデータ圧縮率を確定し、データ圧縮部28にデータ圧縮処理をスタートさせる。
【0057】
データ圧縮処理がスタートすると、次に、データ圧縮部28が備えるウェーブレット変換処理部31でウェーブレット変換処理ステップがなされる。ウェーブレット変換処理ステップでは、入力された需要データをウェーブレット変換処理部31でウェーブレット変換処理し、ウェーブレット変換係数を出力する。出力されたウェーブレット変換係数は、変換係数抽出処理部32に入力され、変換係数抽出処理部32で変換係数抽出処理ステップがなされる。
【0058】
変換係数抽出処理部32でなされる変換係数抽出処理ステップは、変換係数絶対値ソーティング処理部35でなされる変換係数絶対値ソーティング処理ステップと、しきい値決定処理部36でなされるしきい値決定処理ステップと、抽出処理実行部37でなされる抽出処理実行ステップとがある。変換係数抽出処理部32に入力されたウェーブレット変換係数は、一方が変換係数絶対値ソーティング処理部35に、他方が抽出処理実行部37に入力され、変換係数絶対値ソーティング処理部35で変換係数絶対値ソーティング処理ステップがなされ、抽出処理実行部37で抽出処理実行ステップがなされる。
【0059】
変換係数絶対値ソーティング処理部35でなされる変換係数絶対値ソーティング処理ステップは、変換係数絶対値ソーティング処理部35が、例えば、ウェーブレット変換係数を絶対値が大きい順にソートした後、ソート後のウェーブレット変換係数を変換係数数列として出力される。尚、変換係数絶対値ソーティング処理部35では、ウェーブレット変換係数の絶対値を大きい順にソートしているが、小さい順でも差し支えない。
【0060】
変換係数絶対値ソーティング処理部35から出力された変換係数数列は、しきい値決定処理部36に入力され、しきい値決定処理部36でしきい値決定処理ステップがなされる。しきい値決定処理ステップでは、まず、変換係数絶対値ソーティング処理部35から出力された変換係数数列と同時に入力されるデータ圧縮率に基づき、入力された変換係数数列を2分割する。
【0061】
入力された変換係数数列を変換係数の絶対値が大きい側と変換係数の絶対値が小さい側とに分割する分割比(変換係数の絶対値が大きい側:変換係数の絶対値が小さい側)は、データ圧縮率から一義的に決定される。分割比がデータ圧縮率に応じて一義的に決定するのは、データ圧縮率に応じて抽出するデータの割合が一義的に決定するためである。
【0062】
例えば、設定したデータ圧縮率が10%の場合、符号化等の影響を小さいものとすれば、後段の抽出処理実行部37で抽出されるウェーブレット変換係数のうち、圧縮する需要データからより特徴的な部分を10%、換言すれば、ウェーブレット変換係数の絶対値の大きい方から10%抽出すれば良い。つまり、データ圧縮率がx%と定まれば、分割比は、x:100−xと一義的に定まることになる。
【0063】
しきい値決定処理部36は、2分割された変換係数数列のうち、絶対値が大きい側の変換係数数列が後段の抽出処理実行部37で抽出されるようにしきい値を決定する。しきい値の決定方法としては、一例として2つの変換係数の平均を算出し、算出した平均値をしきい値とする方法がある。例えば、分割位置の前後に位置する2つの変換係数絶対値が、12.3と8.5であった場合に、その平均値(12.3+8.5)/2=10.4をしきい値として決定する。決定したしきい値は抽出処理実行部37に入力される。
【0064】
他方、抽出処理実行部37には、決定したしきい値と共にウェーブレット変換係数が入力される。そして、抽出処理実行部37で決定したしきい値に基づきウェーブレット変換係数を抽出する抽出処理実行ステップがなされる。抽出処理実行ステップでは、抽出処理実行部37に入力されたウェーブレット変換係数の絶対値がしきい値よりも大きいウェーブレット変換係数が抽出される。
【0065】
抽出処理実行部37で抽出されたウェーブレット変換係数は、抽出処理実行部37から符号化処理部33に入力され、符号化処理部33で符号化処理ステップがなされる。符号化処理ステップでは、符号化処理部33に入力されたウェーブレット変換係数が符号化され、圧縮コード化された需要データ、すなわち、圧縮需要データが符号化処理部33から出力される。
【0066】
尚、再構成需要データ概形確認ステップを実行し、再度、データ圧縮率の仮設定をやり直したい場合は、データ圧縮率表示部49に直接数値入力、若しくは、スライダ50をスライド操作してデータ圧縮率を仮設定し直し、再構成需要データ概形確認ステップが完了したらOKボタン51を選択すれば良い。
【0067】
需要予測処理手段12で需要予測の基礎データとして保存した需要データを活用する等、保存した需要データを活用したい場合は、圧縮需要データ保存手段14で保存および管理された圧縮需要データを需要データ圧縮・解凍処理手段13でデータ解凍処理して、再構成需要データを活用する。
【0068】
需要予測処理手段12で需要予測の基礎データとして保存した需要データを活用する場合を想定して、需要データ圧縮・解凍処理手段13で行われるデータ解凍処理を説明する。
【0069】
需要データ圧縮・解凍処理手段13で行われるデータ解凍処理は、まず、需要予測処理手段12を操作するシステム利用者が、Man-Machineインターフェースとして需要予測処理手段12に備えられる入力手段(図に示されていない)からデータ解凍処理を入力操作する。すると、データ圧縮・解凍処理部21は、需要データ保存手段14から圧縮需要データを読み出してデータ解凍処理ステップを実行し、解凍した圧縮需要データ、すなわち、原需要データを需要予測処理手段12に伝送する。
【0070】
例えば、需要予測処理手段12で翌日の需要予測値を、現在より遡ること5日分にわたる過去の実績(過去5日分の需要データ)の算術平均によって算出するといった場合、圧縮需要データ保存手段14に保存される相当日の圧縮需要データを需要データ圧縮・解凍処理手段13でデータ解凍処理した後、相当日5日分の需要データを需要予測処理手段12で受け取ることになる。
【0071】
データ圧縮・解凍処理部21が実行する圧縮需要データ解凍処理ステップは、データ圧縮・解凍処理部21に備えられたデータ解凍処理部29で実行される。データ解凍処理部29で実行される圧縮需要データ解凍処理ステップは、まず、復号処理部39で復号処理ステップを行う。データ解凍処理部29に入力された圧縮需要データは、復号処理部39でウェーブレット変換係数に復号される。
【0072】
復号処理ステップがなされると次に、逆ウェーブレット変換処理部40で逆ウェーブレット変換処理ステップがなされる。復号されたウェーブレット変換係数は、逆ウェーブレット変換処理部40に入力され、逆ウェーブレット変換処理がなされた後、出力される。
【0073】
図1に示される需要データ管理システム10は、需要データ観測手段11で観測し構成された需要データに対して、需要データ圧縮・解凍処理手段13で、データ圧縮処理を施して、圧縮需要データ保存手段14で保存することができる。また、保存した圧縮需要データは、必要に応じて需要データ圧縮・解凍処理手段13で、データ解凍処理を施して、原需要データを再構成して利用することができる。
【0074】
従って、本実施形態に係る需要データ管理システム10およびその管理方法によれば、図11に示される従来例の需要データ管理システム1およびその管理方法と比較して、需要データ保存に使用される圧縮需要データ保存手段14の主記憶媒体の記憶領域が1/2〜1/10倍程度となり、圧縮需要データ保存手段14が持つ主記憶媒体の記憶領域を有効利用できる。また、需要データ保存に使用される圧縮需要データ保存手段14の主記憶媒体の記憶領域が節減されるので、需要データ管理システム10が需要実績、すなわち、過去の需要データ(以下、需要データ実績とする)にオンラインでアクセス可能な期間を延長することができる。
【0075】
例えば、従来、圧縮需要データ保存手段14が持つ主記憶媒体の記憶領域の空き容量の観点からオンラインアクセス可能な需要データの過去実績が観測時から1ヶ月分までとすれば、本実施形態に係る需要データ管理システム10およびその管理方法によれば、オンラインアクセス可能な需要データの過去実績が観測時から2〜10ヶ月経過程度までにすることが可能となる。つまり、従来例の需要データ管理システム1およびその管理方法と比較して、より長期間に亘り需要データ実績へのオンライン接続を可能とした需要データ管理システムおよび管理方法を提供することが可能となる。
【0076】
また、需要データ保存に使用される圧縮需要データ保存手段14の主記憶媒体の記憶領域が節減されるので、低容量回線で圧縮需要データを遠隔地へ送信したり、圧縮需要データをリモート閲覧および監視したりすることができる。
【0077】
さらに、需要データ管理システム10は、システム利用者がデータ圧縮処理前にデータ圧縮率を入力して仮設定すると、仮設定されたデータ圧縮率でデータ圧縮処理した際の圧縮需要データから原需要データを再構成した場合の再構成需要データのプレビューを表示出力部24に表示することができる。従って、本実施形態に係る需要データ管理システム10およびその管理方法によれば、システム利用者自身が画面上で視覚的に圧縮・再構成に伴う劣化の度合いを確認しながら、適切なデータ圧縮率を決定できる。
【0078】
一方、視覚的にデータ圧縮率を決めるだけではなく、記憶容量的な制約の観点からデータ圧縮率自身を指定したい場合においても、ウェーブレット変換係数の絶対値をソートし、そのソート列をデータ圧縮率に基づいた分割比で分割する位置(値)を決定することで、符号化等の影響を小さいものと考えれば、ほぼ所望のデータ圧縮率を実現することができる。
【0079】
また、データ圧縮・解凍手段13が備えるデータ圧縮・解凍処理部21において、データ圧縮部28でなされるデータ損失の伴うデータ圧縮処理に離散ウェーブレット変換ベースの圧縮方式を採用し、その時間における当該成分のエネルギーの大小を表すウェーブレット変換係数の絶対値を適正なしきい値で抽出してやることで、高周波ノイズは低減しつつ、需要データ波形に現れる局所的な形状特徴を保持したデータ圧縮処理を実現することができる。
【0080】
尚、図1に示される需要データ管理システム10において、圧縮需要データ保存手段14の主記憶媒体が圧縮需要データ保存に使用する記憶領域は、1/2〜1/10倍程度になるとしたが、データ圧縮率の設定および許容できるデータ劣化の程度によって変化する。極論すれば、圧縮需要データ保存手段14の主記憶媒体が圧縮需要データ保存に使用する記憶領域を1〜1/1000倍とすることも可能である。しかし、データ劣化の程度を実用的な範囲で考慮すると、好ましくは2/3〜1/20倍、より好ましくは1/2〜1/10倍となる。
【0081】
また、需要データ圧縮・解凍処理手段13において、データ圧縮・解凍処理部21で損失ありデータ圧縮処理を実行しているが、需要データ圧縮・解凍処理手段13は、データ圧縮処理をデータ損失のないデータ圧縮処理(以下、損失なしデータ圧縮処理とする)を実行する損失なしデータ圧縮・解凍処理部54をデータ圧縮・解凍処理部21の代わりに備える構成としても良い。但し、損失なしデータ圧縮処理では、データ圧縮処理の手法およびデータの特徴等からデータ圧縮率が決定してしまうので、データ圧縮率を可変させることができなくなる。
【0082】
さらに、データ圧縮・解凍処理部21は、ハードウェアかソフトウェアでの構成を仮定して説明しているが、データ圧縮・解凍処理部21をソフトウェアで構成してもハードウェアで構成した場合と同様にして需要データ圧縮および解凍処理を可能に構成することができる。つまり、本実施形態に係る需要データ管理システム10およびその管理方法においては、データ圧縮・解凍処理部21がハードウェアの場合に限定されることなくソフトウェアの場合も包含する。
【0083】
[第2の実施形態]
図6に本発明の第2の実施形態に係る需要データ管理システムおよびその管理方法の一実施例として用いる需要データ管理システム10Aの構成概略を示した構成概略図を示す。
【0084】
図6に示される需要データ管理システム10Aは、第1の実施形態に係る需要データ管理システム10に対して、需要データ圧縮・解凍処理手段13に代わり、需要データ圧縮・解凍処理手段13Aを具備する点以外は基本的に異ならない。従って、本実施形態に係る需要データ管理システム10Aおよびその管理方法の説明では、需要データ管理システム10と異ならない箇所に同じ符号を付して説明を省略する。
【0085】
図6に示される需要データ管理システム10Aは、需要データ観測手段11と、需要予測処理手段12と、需要データ観測手段11で観測した需要データをデータ圧縮する際に実行するデータ圧縮処理を損失なしデータ圧縮処理または損失ありデータ圧縮処理のいずれかでデータ圧縮処理が可能な需要データ圧縮・解凍処理手段13Aと、圧縮需要データ保存手段14とを具備する。
【0086】
また、需要データ管理システム10Aにおいて、需要データ観測手段11と、需要予測処理手段12と、需要データ圧縮・解凍処理手段13Aと、圧縮需要データ保存手段14とは、バス16および信号伝送手段17を介して電気的に接続され、ネットワーク18を形成している。
【0087】
需要データ管理システム10Aが具備する需要データ圧縮・解凍処理手段13Aは、データ圧縮および解凍処理の設定を行うデータ圧縮・解凍処理設定部20と、データ圧縮および解凍処理を実行するデータ圧縮・解凍処理部21Aとを備える。
【0088】
図7に需要データ圧縮・解凍処理手段13Aが備えるデータ圧縮・解凍処理部21Aの一実施例の構成概略図を示す。
【0089】
図7に示されるデータ圧縮・解凍処理部21Aは、第1の実施形態にて説明した損失ありデータ圧縮・解凍処理を行う圧縮・解凍処理部21に、データの損失のない圧縮・解凍処理を行う損失なしデータ圧縮・解凍処理部54を並列的に付加し、損失なしデータ圧縮・解凍処理部54と圧縮・解凍処理部21との電気的接続を切り替える切替スイッチ55a,55bを備える。
【0090】
この切替スイッチ55a,55bは、システム利用者の入力操作によって自在に切り替えることができるハードウェアである。データ圧縮・解凍処理部21Aは、切替スイッチ55a,55bにより、需要データ圧縮の際に行うデータ圧縮処理を損失なしデータ圧縮処理とするか、損失ありデータ圧縮処理にするかを切り替えてデータ圧縮および解凍処理することができる。
【0091】
本実施形態における需要データ管理方法は、第1の実施形態に対して、損失なしデータ圧縮処理を行う損失なしデータ圧縮処理ステップおよび損失の伴うデータ圧縮処理を行う損失ありデータ圧縮処理の2つのデータ圧縮処理ステップから一方を選択する需要データ圧縮処理手法選択ステップを備える。システム利用者は、需要データ圧縮処理手法選択ステップにより、損失なしまたは損失ありデータ圧縮処理を選択した後、選択したデータ圧縮ステップを実行する。
【0092】
本実施形態に係る需要データ管理システム10Aおよびその管理方法によれば、図1に示される需要データ管理システム10同様に、従来例の需要データ管理システム1およびその管理方法と比較して、需要データ保存に使用される圧縮需要データ保存手段14の主記憶媒体の記憶領域を1/2〜1/10倍程度に節減できる。
【0093】
従って、需要データ実績にオンラインでアクセス可能な期間が従来よりも2〜10倍程度延長したり、低容量回線で圧縮需要データを遠隔地へ送信したり、圧縮需要データをリモート閲覧および監視したりすることができる。
【0094】
また、需要データ管理システム10Aは、図1に示される需要データ管理システム10に対して需要データ圧縮・解凍処理手段13に代わり需要データ圧縮・解凍処理手段13Aを具備することで、システム利用者はニーズに合わせて需要データを保存、管理する際の需要データ圧縮処理時に損失なしデータ圧縮処理または損失ありデータ圧縮処理を選択することが可能となる。
【0095】
従って、需要データ管理システム10Aおよびその管理方法では、第1の実施形態に係る需要データ管理システム10およびその管理方法よりも、フレキシブルな運用が可能であり、需要データの保存、管理する際の自由度がより高まった需要データ管理システムおよびその管理方法を提供することができる。
【0096】
尚、データ圧縮・解凍処理部21Aにおいて、損失なしデータ圧縮・解凍処理部54、圧縮・解凍処理部21および切替スイッチ55a,55bは、ハードウェアと説明したが、データ圧縮・解凍処理部21Aは、損失なしデータ圧縮・解凍処理部54、圧縮・解凍処理部21および切替スイッチ55a,55bで実行される処理をソフトウェアで実現可能に構成しても良い。
【0097】
[第3の実施形態]
図8に本発明の第3の実施形態に係る需要データ管理システムおよびその管理方法の一実施例として用いる需要データ管理システム10Bの構成概略を示した構成概略図を示す。
【0098】
図8に示される需要データ管理システム10Bは、第1の実施形態に係る需要データ管理システム10に対して、需要データ分類手段57と、需要データ検索手段58とをさらに具備する点以外は基本的に異ならない。従って、本実施形態に係る需要データ管理システム10Bおよびその管理方法の説明では、需要データ管理システム10と異ならない箇所に同じ符号を付して説明を省略する。
【0099】
図8に示される需要データ管理システム10Bは、需要データ観測手段11と、需要予測処理手段12と、需要データ圧縮・解凍処理手段13と、圧縮需要データ保存手段14と、需要データの分類処理が可能な需要データ分類手段57と、目的に応じた需要データの検索処理が可能な需要データ検索手段58とを具備する。
【0100】
また、需要データ管理システム10Bにおいて、需要データ観測手段11と、需要予測処理手段12と、需要データ圧縮・解凍処理手段13と、圧縮需要データ保存手段14と、需要データ分類手段57と、需要データ検索手段58とは、バス16および信号伝送手段17を介して電気的に接続され、ネットワーク18を形成している。
【0101】
図9に需要データの分類および検索処理を実行する需要データ分類手段57および需要データ検索手段58の一実施例を示した構成概略図を示す。
【0102】
図9によれば、需要データ分類手段57は、圧縮需要データから原需要データの主要波形特徴情報を有する部分(ウェーブレット変換により得られる複数レベルの信号成分のうち特定のレベルの信号成分)を分類キー情報として抽出する分類キー情報抽出部60と、需要データ分類処理部61とを備える。需要データ分類処理部61で分類された後の需要データ(以下、分類済み需要データとする)は、需要データ保存手段14でデータベース(以下、DBとする)化される。すなわち、需要データ保存手段14では、分類済み需要データから分類済み需要データDB62が作成され、作成された分類済み需要データDB62を保存し管理することで、各分類済み需要データの保存および管理を行っている。
【0103】
また、需要データ検索手段58は、検索する需要データと分類済み需要データDB62に格納される各分類済み需要データとのマッチングの度合(以下、マッチング度とする)を評価する分類キーマッチング評価部64と、マッチング度に応じて、分類済み需要データDB62から需要データを抽出する需要データ抽出部65と、検索結果を表示する検索結果表示部66とを備える。
【0104】
図8に示される需要データ管理システム10Bおよびその管理方法について説明する。
【0105】
需要データ管理システム10Bおよびその管理方法では、まず、他の実施形態と同様に、データ圧縮処理ステップとして需要データをデータ圧縮処理して圧縮需要データが作成される。そして、圧縮需要データを用いて需要データ分類手段57で需要データ分類ステップがなされる。その後、システム利用者が需要データの検索を要望する時は、需要データ検索手段58である条件に適合する需要データを検索する需要データ検索ステップを実行する。
【0106】
需要データ分類手段57でなされる需要データ分類ステップは、まず、分類キー情報抽出部60で圧縮需要データから原需要データの主要波形特徴情報を有する部分を分類キー情報として抽出する分類キー情報抽出ステップがなされる。分類キー情報には、ウェーブレット変換の最終レベルの低周波信号として抽出される平滑化データを用いる。
【0107】
図10にウェーブレット変換の最終レベルの低周波信号として抽出される平滑化データを説明する説明図を示す。
【0108】
図10に示されるように、ウェーブレット変換結果は、例えば、4つ等の幾つかのレベルの信号波形が集合したものとなる。このうち、最終レベルの低周波信号として抽出されるのが平滑化データである。需要データ管理システム10Bおよびその管理方法では、平滑化データを分類キー情報として用いる。平滑化データを分類キー情報として用いる理由は、分類キー情報としての有用性が高いと考えられるためである。
【0109】
平滑化データが分類キー情報としての有用性が高いと考えられる理由は2点ある。1つ目の理由は、平滑化データには原需要データの形状的な特徴が現れる点である。
【0110】
マザーウェーブレット(ウェーブレット変換を行う際に用いる関数)の種類によっては位相情報が原データに対して少なからずずれる場合もあるものの、形状的な特徴は保持される場合が多い。従って、通常の分類イメージが、低周波成分に着目してなされることを考慮すれば、平滑化データを分類キー情報として用いることは、低周波成分に着目する通常の分類イメージとの整合性が良く有用的である。
【0111】
平滑化データが分類キー情報としての有用性が高いと考えられる理由のもう1つは、平滑化データがウェーブレット変換時に抽出されるものであり、圧縮需要データから平滑化データを抽出することは非常に容易であるという点である。圧縮需要データは、ウェーブレット変換により圧縮コード化した需要データであり、圧縮需要データから同じウェーブレット変換で抽出される平滑化データを抽出することは、非常に容易に行うことができる。上述した2点の理由から平滑化データは分類キー情報として有用性が高いと考えられる。
【0112】
分類キー情報抽出ステップが完了すると、次に、需要データ分類処理部61で、分類キー情報抽出ステップで抽出された分類キーを利用して原需要データをクラス分類する需要データクラス分類ステップがなされる。需要データクラス分類ステップにおいて、需要データを分類する際には、圧縮需要データに分類クラスタグ情報が付加される。
【0113】
次に、需要データクラス分類ステップが完了すると、分類済み需要データDB62作成・格納ステップがなされ、需要データクラス分類ステップで分類クラスタグ情報が付加された圧縮需要データが需要データ保存手段14に伝送され、需要データ保存手段14でDB化されて保存される。すなわち、需要データ保存手段14には分類済み需要データDB62が作成され、各分類済み需要データが格納される。分類済み需要データDB62作成・格納ステップが完了すると、需要データ分類ステップは完了する。
【0114】
次に、需要データ検索手段58でなされる需要データ検索ステップは、まず、分類キーマッチング評価部64で、ある入力された検索対象の需要データが持つ分類キー情報を検索キー情報として、分類済み需要データの持つ分類キー情報とのマッチング度を評価する分類キーマッチング評価ステップがなされる。
【0115】
次に、需要データ抽出部65で、マッチング度の高い分類済み需要データを抽出する需要データ抽出ステップがなされる。尚、需要データ抽出ステップで抽出される需要データの個数は、需要データ抽出部65の需要データ抽出条件(マッチング度や抽出個数等)の設定を更新することで可変させることも可能である。
【0116】
次に、需要データ抽出ステップが完了すると、検索結果として需要データ抽出部65で抽出された分類済み需要データを検索結果表示部66に表示する検索結果表示ステップがなされ、検索結果表示ステップの完了をもって、需要データ検索ステップが完了する。
【0117】
本実施形態に係る需要データ管理システム10Bおよびその管理方法によれば、他の実施形態と同様に、従来例の需要データ管理システム1およびその管理方法と比較して、需要データ保存に使用される圧縮需要データ保存手段14の主記憶媒体の記憶領域を1/2〜1/10倍程度に節減できる。
【0118】
従って、需要データ実績にオンラインでアクセス可能な期間が従来よりも2〜10倍程度延長したり、低容量回線で圧縮需要データを遠隔地へ送信したり、圧縮需要データをリモート閲覧および監視したりすることができる。
【0119】
また、需要データ管理システム10Bが、第1の実施形態に係る需要データ管理システム10に対して、需要データ分類手段57と、需要データ検索手段58とをさらに具備することで、需要データの波形特徴情報を強調する形で圧縮コード化された圧縮需要データの内から適切な分類キー(検索キー)を抽出することが可能となり、過去データのパターン分類や類似需要データの検索等を行うことができる。つまり、圧縮需要データの2次利用が可能となる。
【0120】
さらに、需要データ管理システム10Bは、圧縮コード化された圧縮需要データの内から適切な分類キー(検索キー)を抽出するため、新たに大きな処理負荷を負うことなく、分類キー(検索キー)の抽出および分類キーのマッチング評価が高速に実現できる。
【0121】
さらにまた、分類キー(検索キー)として圧縮コードから抜き出す情報として、特に、離散ウェーブレット変換の最終展開レベルで得られる低周波成分である平滑化データを採用することで、原需要データの最低周波数成分情報、すなわち、原需要データの概形情報を保持しつつ、原需要データに対するデータ量を約1/2N(Nは展開レベル数)となるキー情報を得ることができる。従って、十分な展開レベル数をとることで、コンパクトな分類キー(検索キー)情報を得ることができる。
【0122】
尚、需要データ管理システム10Bは、需要データ分類手段57と、需要データ検索手段58とを具備する形態としているが、需要データ分類手段57および需要データ検索手段58の少なくとも一方を需要予測処理手段12に備える形態としても良い。
【0123】
また、需要予測処理手段12には需要データ分類手段57または需要データ検索手段58の全ての構成要素が含まれなくても良い。すなわち、需要データ分類手段57が備える分類キー情報抽出部60および需要データ分類処理部61、需要データ検索手段58が備える分類キーマッチング評価部64、需要データ抽出部65および検索結果表示部66のうち一部を需要予測処理手段12に備えて、その他を需要データ管理システム10Bに具備させても良い。
【0124】
以上、本発明に係る需要データ管理システムおよびその管理方法によれば、需要データ観測手段11で観測し構成された需要データに対して、データ圧縮処理を施して、圧縮需要データとして保存し、また、保存した圧縮需要データを必要に応じてデータ解凍処理を施して、原需要データを再構成して利用することが可能な需要データ管理システムおよびその管理方法を提供することができる。
【0125】
また、従来例の需要データ管理システム1およびその管理方法と比較して、データ圧縮処理を施すことから、需要データ保存に使用される圧縮需要データ保存手段14の主記憶媒体の記憶領域を1/2〜1/10倍程度に抑え、圧縮需要データ保存手段14が持つ主記憶媒体の記憶領域を有効利用できる。
【0126】
従って、需要データ実績にオンラインでアクセス可能な期間が従来よりも延長したり、低容量回線で圧縮需要データを遠隔地へ送信したり、圧縮需要データをリモート閲覧および監視したりすることが可能な需要データ管理システムおよびその管理方法を提供することができる。
【0127】
さらに、システム利用者がデータ圧縮処理前にデータ圧縮率を設定する際に、システム利用者自身が画面上で視覚的に圧縮・再構成に伴う劣化の度合いを確認しながら、適切なデータ圧縮率を決定したり、記憶容量的な制約の観点からデータ圧縮率自身を指定して、ほぼ所望のデータ圧縮率を実現可能な需要データ管理システムおよびその管理方法を提供することができる。
【0128】
一方、データ圧縮・解凍手段13,13Aが備えるデータ圧縮・解凍処理部21,21Aにおいて、データ圧縮部28でなされるデータ損失の伴うデータ圧縮処理に離散ウェーブレット変換ベースの圧縮方式を採用し、ウェーブレット変換係数の絶対値を適正なしきい値で抽出してやることで、高周波ノイズは低減しつつ、需要データ波形に現れる局所的な形状特徴を保持したデータ圧縮処理を実現する需要データ管理システムおよびその管理方法を提供することができる。
【0129】
また、システム利用者のニーズに合わせて需要データを保存、管理する際の需要データ圧縮処理時に損失なしデータ圧縮処理または損失ありデータ圧縮処理を選択することを可能とすることで、需要データの保存、管理する際の自由度が従来よりも高く、フレキシブルな運用が可能な需要データ管理システムおよびその管理方法を提供することができる。
【0130】
さらに、需要データの波形特徴情報を強調する形で圧縮コード化された圧縮需要データの内から適切な分類キー(検索キー)を抽出し、過去データのパターン分類や類似需要データの検索等を行うことで、圧縮需要データの2次利用が可能とし、さらにまた、新たに大きな処理負荷を負うことなく、分類キー(検索キー)の抽出および分類キーのマッチング評価が高速に実現を可能とした需要データ管理システムおよびその管理方法を提供することができる。
【0131】
他方、分類キー(検索キー)として圧縮コードから抜き出す情報として、特に、離散ウェーブレット変換の最終展開レベルで得られる低周波成分である平滑化データを採用し、十分な展開レベル数Nをとることで、原需要データの最低周波数成分情報、すなわち、原需要データの概形情報を保持しつつ、原需要データに対するデータ量を約1/2Nとしたコンパクトな分類キー(検索キー)情報を得ることが可能な需要データ管理システムおよびその管理方法を提供することができる。
【0132】
尚、需要データ管理システム10,10A,10Bでは、データ圧縮および解凍処理を行う需要データ圧縮・解凍処理手段13,13Aは、需要データ管理システム10,10A,10Bに具備される形態で示されているが、例えば、需要データを必要と需要予測処理手段12等の個々の手段に需要データ圧縮・解凍処理手段13,13Aを備える形態で構成しても良い。
【0133】
【発明の効果】
本発明に係る需要データ管理システムおよび管理方法によれば、需要データの保存に要する記憶容量が大幅に削減できるので、現時点からより長い期間遡及して過去の需要データ実績にオンラインでアクセスが可能な需要データ管理システムおよび管理方法を提供することができる。
【0134】
また、本発明に係る需要データ管理システムおよび管理方法によれば、状況に応じて損失なしデータ圧縮処理または損失ありデータ圧縮処理やデータ圧縮率を自由に選択できるので、需要データの保存および管理をよりフレキシブル、かつ容易に実行可能な需要データ管理システムおよび管理方法を提供することができる。
【0135】
さらに、本発明に係る需要データ管理システムおよび管理方法によれば、需要データの波形特徴情報を強調する形で符号化された圧縮コード内から適切な分類キー(検索キー)を抽出可能に構成することで、過去データのパターン分類や類似需要データの検索等が可能となり、圧縮需要データの2次利用が可能な需要データ管理システムおよび管理方法を提供することができる。
【図面の簡単な説明】
【図1】本発明の第1の実施形態に係る需要データ管理システムの構成概略を説明する構成概略図。
【図2】本発明の第1の実施形態に係る需要データ管理システムが具備する需要データ圧縮・解凍処理手段の構成概略を説明する構成概略図。
【図3】本発明の第1の実施形態に係る需要データ管理システムが具備する需要データ圧縮・解凍処理手段が備えるデータ圧縮・解凍処理部の構成概略を説明する構成概略図。
【図4】本発明の第1の実施形態に係る需要データ管理システムが具備する需要データ圧縮・解凍処理手段内のデータ圧縮部が備える変換係数抽出処理部の構成概略を説明する構成概略図。
【図5】本発明の第1の実施形態に係る需要データ管理システムが具備する需要データ圧縮・解凍処理手段内の表示出力部に表示されるデータ圧縮処理設定画面の一例を説明する説明図。
【図6】本発明の第2の実施形態に係る需要データ管理システムの構成概略を説明する構成概略図。
【図7】本発明の第2の実施形態に係る需要データ管理システムが具備する需要データ圧縮・解凍処理手段に備えられるデータ圧縮・解凍処理部の構成概略を説明した構成概略図。
【図8】本発明の第3の実施形態に係る需要データ管理システムの構成概略を説明する構成概略図。
【図9】本発明の第3の実施形態に係る需要データ管理システムが具備する需要データ分類手段および需要データ検索手段の構成概略を説明した構成概略図。
【図10】ウェーブレット変換の最終レベルの低周波信号として抽出される平滑化データを説明する説明図。
【図11】従来の需要データ管理システムの構成概略を示す構成概略図。
【符号の説明】
10,10A,10B 需要データ管理システム
11 需要データ観測手段
12 需要予測処理手段
13,13A 需要データ圧縮・解凍手段
14 圧縮需要データ保存手段
16 バス
17 信号伝送手段
18 ネットワーク
20 データ圧縮・解凍処理設定部
21,21A データ圧縮・解凍処理部(損失ありデータ圧縮・解凍処理部)
23 処理設定入力部
24 表示出力部
25 処理設定実行部
28 データ圧縮部
29 データ解凍部
31 ウェーブレット変換処理部
32 変換係数抽出処理部
33 符号化処理部
35 変換係数絶対値ソーティング処理部
36 しきい値決定処理部
37 抽出処理実行部
39 復号処理部
40 逆ウェーブレット変換処理部
43 データ圧縮処理設定画面
45 原需要データ表示部
46 データ圧縮率設定部
47 再構成需要データ表示部
49 データ圧縮率表示部
50 スライダ
51 OKボタン
52 Cancelボタン
54 損失なしデータ圧縮・解凍処理部
55a,55b 切替スイッチ
57 需要データ分類手段
58 需要データ検索手段
60 分類キー情報抽出部
61 需要データ分類処理部
62 分類済み需要データDB
64 分類キーマッチング評価部
65 需要データ抽出部
66 検索結果表示部[0001]
BACKGROUND OF THE INVENTION
The present invention relates to a system for managing time series data obtained by observation and a management method thereof, and in particular, demand data for managing demand data obtained by observing daily demand for energy such as power and heat of a consumer. The present invention relates to a management system and a management method thereof.
[0002]
[Prior art]
FIG. 11 shows an explanatory diagram for explaining a demand
[0003]
The demand
[0004]
A demand data management method by the demand
[0005]
The daily load of energy demand such as electric power and heat is observed by the demand data observation means 2, and demand data is constructed. The demand data configured by the demand
[0006]
Generally, the most recent demand data, that is, demand data that has just been observed and configured by the demand data observation means 2 is stored as data with the maximum resolution corresponding to the sampling period at the time of observation. However, for demand data for which a certain period of time such as one week has passed since the observation and configuration, backup to auxiliary storage media (optical disk, magnetic tape, etc.) or original data for monthly or seasonal integration By converting to data of coarser resolution in the form of data and storing the data again, the storage area of the demand data storage means 4, which is a main storage medium advantageous for data access, is secured as much as possible.
[0007]
A demand
[0008]
[Patent Document 1]
JP-A-6-259408 ([0001] to [0003], [0010] and FIG. 1)
[0009]
[Problems to be solved by the invention]
With the conventional demand data management system and its management method, when it is applied to large-scale retailers and energy service providers that handle hundreds to thousands of customers, the demand that is observed and acquired every day There is a concern that the data becomes a huge amount of data, and the storage and storage cost becomes very large.
[0010]
In addition, from the viewpoint of securing the storage area of the demand data storage means that is the main storage medium, demand data that has passed a certain period of time is backed up to an auxiliary storage medium, converted into coarse resolution data, and stored again, etc. It has been processed. Therefore, it is impossible or difficult to access online demand data after a certain period of time, and there is a problem that the customer's performance data is not sufficiently utilized.
[0011]
In the present invention, the demand data storage means has the main feature of the demand data storage means by applying data compression processing to the demand data that is observed and configured and storing it, and decompressing the compressed data as necessary. It is an object of the present invention to provide a demand data management system and a management method that make effective use of a storage area of a storage medium and enable online connection to demand data results over a longer period.
[0012]
Another object of the present invention is to apply a data compression method using wavelet transform to data compression processing of demand data, and when a system user performs data compression processing of demand data, the data compression rate and data It is an object of the present invention to provide a demand data management system and a management method that can be executed in consideration of reproduction accuracy and that can store and manage demand data more flexibly and easily.
[0013]
Another object of the present invention is to provide a demand data management system and a management method that enable secondary use of compressed demand data configured by performing data compression processing of demand data.
[0014]
[Means for Solving the Problems]
In order to solve the above-described problem, the demand data management system according to the present invention measures a daily load of energy demand such as power and heat of a consumer every predetermined unit time as described in
[0015]
In order to solve the above-described problem, a demand data management system according to the present invention is characterized in that, as described in
[0016]
In order to solve the above-described problem, the demand data management system according to the present invention is characterized in that, as described in
[0017]
Furthermore, in order to solve the above-described problem, the demand data management system according to the present invention is characterized in that, as described in claim 4, the demand data compression / decompression processing means is configured to perform lossy data compression / decompression with a certain degree of deterioration. When setting the data compression rate of the decompression processing unit and the data compression processing executed by the data compression / decompression processing unit, when the system user temporarily sets the data compression rate, the data compression / decompression processing setting unit A data compression / decompression processing setting unit configured to perform provisional data compression processing and reconfiguration processing on demand data at a temporarily set data compression rate and to display a preview of the reconstructed demand data. To do.
[0018]
Furthermore, in order to solve the above-described problem, a demand data management system according to the present invention is characterized in that, as described in
[0019]
On the other hand, in order to solve the above-described problem, the demand data management system according to the present invention is characterized in that, as described in claim 6, the transform coefficient extraction processing unit outputs a wavelet transform coefficient output from the wavelet transform processing unit. The transform coefficient absolute value sorting processing unit for sorting the wavelet transform coefficients in descending order of absolute values, and the transform coefficient sequence output from the transform coefficient absolute value sorting processing unit are uniquely defined by a predetermined data compression rate specified by the system user. A threshold value determination processing unit for determining a threshold value from absolute values of two transform coefficients before and after the division, and a threshold value output from the threshold value determination processing unit. An extraction processing execution unit that extracts a wavelet transformation coefficient output from the wavelet transformation processing unit based on a value. To.
[0020]
In order to solve the above-described problem, the demand data management system according to the present invention is as described in
[0021]
Furthermore, in order to solve the above-described problem, the demand data management system according to the present invention is as described in claim 8. Said Based on the classification key information included in the compressed demand data of the compressed demand data classified by the demand data classification means and the demand data to be searched. Z Demand data retrieval means for evaluating the degree of matching of this classification key information and displaying compressed demand data that matches the retrieval purpose Further It is characterized by comprising.
[0022]
Furthermore, in order to solve the above-described problem, the demand data management system according to the present invention is as described in claim 9. The wavelet component at the specific level is smoothed data obtained as final residual data of the discrete wavelet transform It is characterized by that.
[0023]
In order to solve the above-described problem, the demand data management method according to the present invention measures the daily load of energy demand such as power and heat of a consumer every predetermined unit time as described in
[0024]
In order to solve the above-described problem, the demand data management method according to the present invention is characterized in that, as described in
[0025]
In order to solve the above-described problem, the demand data management method according to the present invention includes a demand data compression processing step that compensates for complete reconstruction in the demand data before the data compression processing. A demand data compression processing method selection step for selecting one of the two data compression processing steps: a lossless data compression processing step to be performed and a lossy data compression processing step with a certain degree of deterioration. One of the data compression processing steps selected in the step is executed.
[0026]
Furthermore, in order to solve the above-described problem, in the demand data management method according to the present invention, as described in
[0027]
In order to solve the above-described problem, the demand data management method according to the present invention is as described in
[0028]
In order to solve the above-described problem, the demand data management method according to the present invention provides, as described in claim 15, wherein the transform coefficient extraction processing step uses the wavelet transform coefficient output in the wavelet transform processing step. The transform coefficient absolute value sorting process step for sorting in descending order of the absolute value of the wavelet transform coefficient, and the transform coefficient sequence output in this transform coefficient absolute value sorting process step are uniquely defined by a predetermined data compression ratio designated by the system user. The threshold value is determined by the division ratio to be determined, and the threshold value is determined from the absolute values of the two transform coefficients before and after the division. Extraction processing for extracting the wavelet transform coefficient output in the wavelet transform processing step based on Characterized in that it comprises a row steps.
[0029]
In addition, in order to solve the above-described problem, the demand data management method according to the present invention includes: The wavelet component of the specific level is a wavelet component that represents a main shape characteristic of the signal waveform of the demand data. It is characterized by that.
[0030]
Furthermore, in order to solve the above-described problem, the demand data management method according to the present invention is as described in
[0031]
Furthermore, in order to solve the above-described problem, a demand data management method according to the present invention includes: The wavelet component at the specific level is smoothed data obtained as final residual data of the discrete wavelet transform It is characterized by that.
[0032]
DETAILED DESCRIPTION OF THE INVENTION
Embodiments of a demand data management system and its management method according to the present invention will be described below with reference to the accompanying drawings.
[0033]
[First Embodiment]
FIG. 1 is a schematic configuration diagram showing a schematic configuration of a demand
[0034]
The demand
[0035]
The demand data observation means 11, the demand prediction processing means 12 and the demand data compression / decompression processing means 13 included in the demand
[0036]
FIG. 2 shows a schematic configuration diagram illustrating an embodiment of the demand data compression /
[0037]
The demand data compression / decompression processing means 13 includes a data compression / decompression
[0038]
FIG. 3 shows a schematic configuration diagram illustrating an embodiment of the data compression /
[0039]
The data compression /
[0040]
The
[0041]
Further, the data compression /
[0042]
FIG. 4 shows a schematic configuration diagram illustrating an embodiment of the conversion coefficient
[0043]
In the transform coefficient
[0044]
On the other hand, the data
[0045]
Note that the output reconstruction demand data and the original demand data do not completely match because of data loss during compression. In addition, since the amount of data loss during compression increases as the data compression rate during data compression processing increases, the deterioration in reconstructed demand data relative to the original demand data becomes more significant as the data compression rate during data compression processing increases. It will be something.
[0046]
A demand data management method in this embodiment will be described.
[0047]
The demand data management method in the present embodiment first performs a demand data compression step. In the demand data compression step, the demand data observed and configured by the demand data observation means 11 is transmitted to the demand data compression / decompression processing means 13. When the demand data is transmitted to the demand data compression / decompression processing means 13, it is transmitted in a normal data format that has not been subjected to data compression processing.
[0048]
Next, a lossless data compression processing step for compressing and coding the demand data input by the demand data compression / decompression processing means 13 is performed. That is, the demand data compression /
[0049]
The lossless data compression processing step performed by the demand data compression /
[0050]
FIG. 5 shows an example of the data compression
[0051]
The data compression
[0052]
The data compression
[0053]
In the data compression processing setting step, first, a data compression rate temporary setting step is performed. The data compression rate temporary setting step is a step in which the system user inputs the data from the process setting
[0054]
When the data compression rate temporary setting step is performed, the signal waveform of the reconstructed demand data that is output when the process setting
[0055]
Next, the system user performs a reconstruction demand data outline confirmation step, and the signal waveform of the original demand data displayed on the original demand
[0056]
Next, when performing data compression processing at the current temporarily set data compression rate, the system user performs a data compression rate determination step. When performing data compression processing at the current temporarily set data compression rate, the system user selects the
[0057]
When the data compression process starts, a wavelet transform processing step is performed in the wavelet
[0058]
The conversion coefficient extraction processing step performed by the conversion coefficient
[0059]
The transform coefficient absolute value sorting processing step performed by the transform coefficient absolute value sorting
[0060]
The conversion coefficient number sequence output from the conversion coefficient absolute value sorting
[0061]
The division ratio (the side where the absolute value of the conversion coefficient is large: the side where the absolute value of the conversion coefficient is small) that divides the input conversion coefficient sequence into the side where the absolute value of the conversion coefficient is large and the side where the absolute value of the conversion coefficient is small is It is uniquely determined from the data compression rate. The reason why the division ratio is uniquely determined according to the data compression rate is that the ratio of data to be extracted is uniquely determined according to the data compression rate.
[0062]
For example, when the set data compression rate is 10%, if the influence of encoding or the like is small, the wavelet transform coefficient extracted by the subsequent extraction
[0063]
The threshold value
[0064]
On the other hand, the wavelet transform coefficient is input to the extraction
[0065]
The wavelet transform coefficients extracted by the extraction
[0066]
In addition, when it is desired to execute the reconstruction demand data outline confirmation step again and to temporarily set the data compression rate again, the numerical value is directly input to the data compression
[0067]
When the demand data stored as the basic data of the demand prediction is used by the demand
[0068]
The data decompression process performed by the demand data compression /
[0069]
In the data decompression processing performed by the demand data compression / decompression processing means 13, first, the system user who operates the demand prediction processing means 12 inputs the input means (shown in the figure) provided in the demand prediction processing means 12 as a Man-Machine interface. The data decompression process is input. Then, the data compression /
[0070]
For example, when the demand
[0071]
The compression demand data decompression processing step executed by the data compression /
[0072]
After the decoding processing step is performed, the inverse wavelet
[0073]
The demand
[0074]
Therefore, according to the demand
[0075]
For example, if the past record of demand data that can be accessed online from the viewpoint of the free space in the storage area of the main storage medium of the compressed demand data storage means 14 is one month from the time of observation, the present embodiment According to the demand
[0076]
In addition, since the storage area of the main storage medium of the compressed demand data storage means 14 used for storing demand data is saved, the compressed demand data can be transmitted to a remote location via a low capacity line, or the compressed demand data can be viewed remotely. Can be monitored.
[0077]
Further, when the system user inputs the data compression rate before the data compression process and temporarily sets the demand
[0078]
On the other hand, not only visually determining the data compression rate, but also when specifying the data compression rate itself from the viewpoint of storage capacity constraints, the absolute values of the wavelet transform coefficients are sorted, and the sorted column is used as the data compression rate. By determining the position (value) to be divided at a division ratio based on the above, it is possible to realize a substantially desired data compression rate if the influence of encoding or the like is considered to be small.
[0079]
The data compression /
[0080]
In the demand
[0081]
In the demand data compression /
[0082]
Further, the data compression /
[0083]
[Second Embodiment]
FIG. 6 shows a schematic configuration diagram showing a schematic configuration of a demand
[0084]
The demand
[0085]
The demand
[0086]
In the demand
[0087]
The demand data compression /
[0088]
FIG. 7 shows a schematic configuration diagram of an embodiment of the data compression /
[0089]
The data compression /
[0090]
The change-over
[0091]
The demand data management method according to the present embodiment includes two data of the lossless data compression processing step for performing lossless data compression processing and the lossy data compression processing for performing lossy data compression processing, compared to the first embodiment. A demand data compression processing method selection step for selecting one of the compression processing steps is provided. The system user executes the selected data compression step after selecting the lossless or lossy data compression processing in the demand data compression processing method selection step.
[0092]
According to the demand
[0093]
Therefore, the period during which online access to demand data results can be extended is about 2 to 10 times longer than before, compressed demand data is transmitted to remote locations over a low-capacity line, and compressed demand data is remotely viewed and monitored. can do.
[0094]
Further, the demand
[0095]
Therefore, the demand
[0096]
In the data compression /
[0097]
[Third Embodiment]
FIG. 8 is a schematic configuration diagram showing a schematic configuration of a demand
[0098]
The demand
[0099]
The demand
[0100]
Further, in the demand
[0101]
FIG. 9 is a schematic configuration diagram showing an embodiment of demand data classification means 57 and demand data search means 58 for executing demand data classification and search processing.
[0102]
According to FIG. 9, the demand data classification means 57 is a part having main waveform feature information of the original demand data from the compressed demand data. (Specific level signal component among multiple level signal components obtained by wavelet transform) Is included as a classification key information, and a demand data
[0103]
Moreover, the demand data search means 58 is a classification key matching
[0104]
The demand
[0105]
In the demand
[0106]
The demand data classification step performed by the demand data classification means 57 is a classification key information extraction step in which the classification key
[0107]
FIG. 10 is an explanatory diagram for explaining smoothed data extracted as a low-frequency signal at the final level of the wavelet transform.
[0108]
As shown in FIG. 10, the wavelet transform result is a collection of signal waveforms of several levels such as four. Of these, smoothed data is extracted as a low-frequency signal of the final level. In the demand
[0109]
There are two reasons why smoothed data is considered highly useful as classification key information. The first reason is the smoothed data In This is the point where the shape characteristics of the original demand data appear.
[0110]
Depending on the type of the mother wavelet (function used when performing wavelet transform), the phase information may be slightly shifted from the original data, but the shape characteristics are often retained. Therefore, considering that a normal classification image is focused on low-frequency components, using smoothed data as classification key information is consistent with a normal classification image focusing on low-frequency components. Well useful.
[0111]
Another reason that the smoothed data is considered to be highly useful as classification key information is that the smoothed data is extracted at the time of wavelet transform, and it is very difficult to extract the smoothed data from the compressed demand data. It is easy to use. The compressed demand data is demand data that has been compression-coded by wavelet transform, and it is very easy to extract smoothed data extracted by the same wavelet transform from the compressed demand data. The smoothed data is considered to be highly useful as classification key information for the above two reasons.
[0112]
When the classification key information extraction step is completed, the demand data
[0113]
Next, when the demand data class classification step is completed, a classified
[0114]
Next, in the demand data search step performed by the demand data search means 58, first, the classification key matching
[0115]
Next, the demand
[0116]
Next, when the demand data extraction step is completed, a search result display step for displaying the classified demand data extracted by the demand
[0117]
According to the demand
[0118]
Therefore, the period during which online access to demand data results can be extended is about 2 to 10 times longer than before, compressed demand data is transmitted to remote locations over a low-capacity line, and compressed demand data is remotely viewed and monitored. can do.
[0119]
Further, the demand
[0120]
Furthermore, since the demand
[0121]
Furthermore, as the information extracted from the compressed code as the classification key (search key), in particular, by adopting smoothed data that is a low frequency component obtained at the final development level of the discrete wavelet transform, the lowest frequency component of the original demand data is obtained. Information, that is, about half of the amount of data for the original demand data while maintaining the outline information of the original demand data N It is possible to obtain key information such that (N is the number of development levels). Therefore, compact classification key (search key) information can be obtained by taking a sufficient number of development levels.
[0122]
The demand
[0123]
Further, the demand prediction processing means 12 may not include all the components of the demand data classification means 57 or the demand data search means 58. That is, among the classification key
[0124]
As described above, according to the demand data management system and the management method thereof according to the present invention, the demand data observed and configured by the demand data observation means 11 is subjected to the data compression processing and stored as the compressed demand data. It is possible to provide a demand data management system and its management method capable of reconstructing and using the original demand data by subjecting the stored compressed demand data to data decompression processing as necessary.
[0125]
Further, since the data compression processing is performed as compared with the demand
[0126]
Therefore, it is possible to extend the period in which demand data results can be accessed online longer than before, send compressed demand data to remote locations over a low-capacity line, and remotely view and monitor compressed demand data A demand data management system and a management method thereof can be provided.
[0127]
Furthermore, when the system user sets the data compression rate before the data compression process, the system user himself / herself visually confirms the degree of deterioration due to compression / reconstruction on the screen, and selects an appropriate data compression rate. The demand data management system and its management method can be provided that can achieve a substantially desired data compression rate by determining the data compression rate or designating the data compression rate itself from the viewpoint of storage capacity constraints.
[0128]
On the other hand, in the data compression /
[0129]
In addition, demand data can be stored by enabling selection of lossless data compression or lossy data compression during demand data compression when storing and managing demand data according to the needs of system users. Therefore, it is possible to provide a demand data management system and a management method thereof that have a higher degree of freedom in management than before and can be operated flexibly.
[0130]
Furthermore, an appropriate classification key (search key) is extracted from the compressed demand data compressed and encoded in a form that emphasizes the waveform feature information of the demand data, and pattern classification of past data, similar demand data search, and the like are performed. Demand that enables secondary use of compressed demand data, and also enables fast extraction of classification keys (search keys) and matching evaluation of classification keys without incurring a large new processing load. A data management system and a management method thereof can be provided.
[0131]
On the other hand, as the information extracted from the compression code as the classification key (search key), smooth data that is a low-frequency component obtained at the final development level of the discrete wavelet transform is adopted, and a sufficient number of expansion levels N is taken. , While keeping the minimum frequency component information of the original demand data, that is, the outline information of the original demand data, the data amount for the original demand data is reduced to about 1/2. N It is possible to provide a demand data management system and its management method capable of obtaining compact classification key (search key) information.
[0132]
In the demand
[0133]
【The invention's effect】
According to the demand data management system and management method according to the present invention, the storage capacity required for storing demand data can be greatly reduced, so that past demand data results can be accessed online retroactively for a longer period of time. A demand data management system and management method can be provided.
[0134]
Further, according to the demand data management system and management method according to the present invention, the lossless data compression process or the lossy data compression process or the data compression rate can be freely selected according to the situation, so that the demand data can be stored and managed. It is possible to provide a demand data management system and a management method that can be executed more flexibly and easily.
[0135]
Furthermore, according to the demand data management system and management method of the present invention, an appropriate classification key (search key) can be extracted from the compressed code encoded in such a way as to emphasize the waveform feature information of demand data. As a result, pattern classification of past data, retrieval of similar demand data, and the like are possible, and a demand data management system and management method capable of secondary use of compressed demand data can be provided.
[Brief description of the drawings]
FIG. 1 is a schematic configuration diagram illustrating a schematic configuration of a demand data management system according to a first embodiment of the present invention.
FIG. 2 is a schematic configuration diagram illustrating a schematic configuration of demand data compression / decompression processing means included in the demand data management system according to the first embodiment of the present invention.
FIG. 3 is a schematic configuration diagram illustrating a schematic configuration of a data compression / decompression processing unit included in a demand data compression / decompression processing unit included in the demand data management system according to the first embodiment of the present invention.
FIG. 4 is a schematic configuration diagram illustrating a schematic configuration of a conversion coefficient extraction processing unit included in a data compression unit in a demand data compression / decompression processing unit included in the demand data management system according to the first embodiment of the present invention.
FIG. 5 is an explanatory diagram illustrating an example of a data compression processing setting screen displayed on a display output unit in the demand data compression / decompression processing unit included in the demand data management system according to the first embodiment of the present invention.
FIG. 6 is a schematic configuration diagram illustrating a schematic configuration of a demand data management system according to a second embodiment of the present invention.
FIG. 7 is a schematic configuration diagram illustrating a schematic configuration of a data compression / decompression processing unit included in a demand data compression / decompression processing unit included in a demand data management system according to a second embodiment of the present invention.
FIG. 8 is a schematic configuration diagram illustrating a schematic configuration of a demand data management system according to a third embodiment of the present invention.
FIG. 9 is a schematic configuration diagram illustrating schematic configurations of demand data classification means and demand data search means included in a demand data management system according to a third embodiment of the present invention.
FIG. 10 is an explanatory diagram for explaining smoothed data extracted as a low-frequency signal at the final level of wavelet transform.
FIG. 11 is a schematic configuration diagram showing a schematic configuration of a conventional demand data management system.
[Explanation of symbols]
10, 10A, 10B Demand data management system
11 Demand data observation means
12 Demand forecast processing means
13, 13A Demand data compression / decompression means
14 Compression demand data storage means
16 bus
17 Signal transmission means
18 network
20 Data compression / decompression process setting section
21,21A Data compression / decompression processing unit (lossy data compression / decompression processing unit)
23 Process setting input section
24 Display output section
25 Process setting execution part
28 Data compression unit
29 Data decompression unit
31 Wavelet transform processor
32 Conversion coefficient extraction processing unit
33 Encoding processor
35. Conversion coefficient absolute value sorting processor
36 Threshold decision processing unit
37 Extraction process execution part
39 Decoding processor
40 Inverse wavelet transform processing unit
43 Data compression setting screen
45 Raw demand data display section
46 Data compression rate setting part
47 Reconstruction demand data display
49 Data compression rate display
50 slider
51 OK button
52 Cancel button
54 Lossless data compression / decompression processor
55a, 55b selector switch
57 Demand data classification means
58 Demand data search means
60 Classification key information extraction unit
61 Demand data classification processing section
62 Classified demand data DB
64 Classification Key Matching Evaluation Unit
65 Demand data extraction unit
66 Search result display area
Claims (18)
前日までの需要データ実績から当日の需要データを予測する需要予測処理手段と、
ウェーブレット変換を用いて前記需要データをデータ圧縮処理して圧縮コード化した圧縮需要データの出力および前記圧縮需要データをデータ解凍処理して需要データを再構成した再構成需要データの出力を実行する需要データ圧縮・解凍処理手段と、
前記圧縮需要データを保存する圧縮需要データ保存手段と、
前記圧縮需要データに含まれる特定レベルのウェーブレット成分を分類キー情報として用いて前記需要データの分類を行う需要データ分類手段とを具備し、
前記需要データ分類手段は、前記圧縮需要データを所定のカテゴリーに分類して前記圧縮需要データ保存手段に保存するように構成されることを特徴とする需要データ管理システム。Demand data observation means for measuring the daily load of energy demand such as electricity and heat of a consumer every predetermined unit time, and integrating the constant time to obtain demand data;
Demand forecast processing means to forecast the demand data of the day from the demand data actual up to the previous day,
Demand for executing output of compressed demand data obtained by compressing and compressing the demand data using wavelet transform and output of reconstructed demand data obtained by decompressing the compressed demand data and reconstructing demand data Data compression / decompression processing means;
Compressed demand data storage means for storing the compressed demand data;
Demand data classification means for classifying the demand data by using a wavelet component of a specific level included in the compressed demand data as classification key information,
The demand data classification unit is configured to classify the compressed demand data into a predetermined category and store the classified demand data in the compressed demand data storage unit .
ある程度の劣化が伴う損失ありデータ圧縮・解凍処理部と、
前記需要データをデータ圧縮処理する際に、前記損失なしデータ圧縮・解凍処理部および損失ありデータ圧縮・解凍処理部のうちデータ圧縮処理の実行を希望する一方をシステム利用者の操作により自在に切り替え可能な切替スイッチとを備え、前記損失なしデータ圧縮・解凍処理部および損失ありデータ圧縮・解凍処理部のうちシステム利用者の希望する一方でデータ圧縮処理を実行することを特徴とする請求項1記載の需要データ管理システム。The demand data compression / decompression processing means includes a lossless data compression / decompression processing unit that compensates for complete reconstruction of demand data before data compression processing;
A lossy data compression / decompression processor with some degradation,
When the demand data is subjected to data compression processing, one of the lossless data compression / decompression processing unit and the lossy data compression / decompression processing unit that is desired to execute data compression processing is freely switched by the operation of the system user. 2. A data switching process is provided, wherein the data compression process is performed at the request of a system user among the lossless data compression / decompression processing unit and the lossy data compression / decompression processing unit. Demand data management system described.
このデータ圧縮・解凍処理部で実行するデータ圧縮処理のデータ圧縮率を設定する際に、システム利用者がデータ圧縮率を仮設定すると、前記データ圧縮・解凍処理設定部が前記需要データを仮設定されたデータ圧縮率で仮データ圧縮処理および再構成処理を行い、再構成需要データのプレビュー表示することを可能に構成したデータ圧縮・解凍処理設定部とを備えることを特徴とする請求項1記載の需要データ管理システム。The demand data compression / decompression processing means includes a loss data compression / decompression processing unit with a certain degree of deterioration,
When setting the data compression rate of the data compression processing executed by the data compression / decompression processing unit, when the system user temporarily sets the data compression rate, the data compression / decompression processing setting unit temporarily sets the demand data. 2. A data compression / decompression processing setting unit configured to perform temporary data compression processing and reconfiguration processing at a set data compression rate and to display a preview of reconfiguration demand data. Demand data management system.
前記損失あり圧縮・解凍処理部は、前記需要データを離散ウェーブレット変換するウェーブレット変換処理部と、
このウェーブレット変換処理部から出力されるウェーブレット変換係数のうち、このウェーブレット変換係数の絶対値が所定のしきい値以上のものを抽出する変換係数抽出処理部と、
この変換係数抽出処理部から抽出されたウェーブレット変換係数を符号化して前記需要データを圧縮需要データとして出力する符号化処理部と、
前記圧縮需要データを復号してウェーブレット変換係数を出力する復号処理部と、
この復号処理部から出力されたウェーブレット変換係数を逆ウェーブレット変換してウェーブレット変換係数から前記再構成需要データを出力する逆ウェーブレット変換処理部とを備えることを特徴とする請求項1記載の需要データ管理システム。The demand data compression / decompression processing means includes a loss data compression / decompression processing unit with a certain degree of deterioration,
The lossy compression / decompression processing unit includes a wavelet transform processing unit that performs discrete wavelet transform on the demand data;
Among the wavelet transform coefficients output from the wavelet transform processing unit, a transform coefficient extraction processing unit that extracts an absolute value of the wavelet transform coefficient that is equal to or greater than a predetermined threshold value;
An encoding processing unit that encodes the wavelet transform coefficient extracted from the conversion coefficient extraction processing unit and outputs the demand data as compressed demand data;
A decoding processor that decodes the compressed demand data and outputs a wavelet transform coefficient;
The demand data management according to claim 1, further comprising: an inverse wavelet transform processing unit that performs inverse wavelet transform on the wavelet transform coefficient output from the decoding processing unit and outputs the reconstructed demand data from the wavelet transform coefficient. system.
この変換係数絶対値ソーティング処理部から出力される変換係数数列をシステム利用者が指定した所定データ圧縮率で一義的に決定する分割比で分割し、分割した前後にある2つの変換係数の絶対値からしきい値を決定するしきい値決定処理部と、
このしきい値決定処理部から出力されるしきい値に基づき前記ウェーブレット変換処理部から出力されたウェーブレット変換係数を抽出する抽出処理実行部とを備えることを特徴とする請求項5記載の需要データ管理システム。The transform coefficient extraction processing unit sorts the wavelet transform coefficients output from the wavelet transform processing unit in descending order of the absolute values of the wavelet transform coefficients,
The conversion coefficient sequence output from the conversion coefficient absolute value sorting processing unit is divided by a division ratio that is uniquely determined by a predetermined data compression ratio designated by the system user, and the absolute values of the two conversion coefficients before and after the division. A threshold value determination processing unit for determining a threshold value from
6. The demand data according to claim 5, further comprising an extraction processing execution unit that extracts the wavelet transform coefficient output from the wavelet transform processing unit based on the threshold value output from the threshold value determination processing unit. Management system.
前記圧縮需要データに含まれる特定レベルのウェーブレット成分を分類キー情報として用いて前記需要データの分類を行う圧縮需要データ分類ステップと、
前記圧縮需要データ分類ステップの分類結果に基づいて前記圧縮需要データを分類して保存する圧縮需要データ保存ステップと、
を具備することを特徴とする需要データ管理方法。Measuring the load day energy demand for consumer power and heat for each predetermined unit time, the compressed demand data compressed coded perform data compression processing with wavelet transformation demand data obtained by accumulating predetermined time Demand data compression processing step to be output;
A compressed demand data classification step for classifying the demand data using a specific level of wavelet components included in the compressed demand data as classification key information;
A compressed demand data storage step for classifying and storing the compressed demand data based on a classification result of the compressed demand data classification step ;
The demand data management method characterized by comprising.
このデータ圧縮処理設定ステップは、データ圧縮率を仮設定するデータ圧縮率仮設定ステップと、
このデータ圧縮率仮設定ステップで仮設定されたデータ圧縮率で、需要データを仮データ圧縮処理および再構成処理を行った場合における再構成需要データのプレビュー表示とデータ圧縮処理前の需要データである原需要データとを視覚的に比較確認する再構成需要データ概形確認ステップと、
この再構成需要データ概形確認ステップで視覚的に比較確認した再構成需要データが問題ない場合に、データ圧縮率仮設定ステップで設定したデータ圧縮率を正式なデータ圧縮率として適用を許可するデータ圧縮率確定ステップとを備えることを特徴とする請求項10記載の需要データ管理方法。The demand data compression processing step is a lossy data compression processing step with a certain degree of deterioration, and this lossy data compression processing step includes a data compression processing setting step for setting a data compression rate at the time of data compression processing,
The data compression processing setting step includes a data compression rate temporary setting step for temporarily setting a data compression rate,
The data compression rate temporarily set in this data compression rate temporary setting step is the demand data before the data compression processing and the preview display of the reconstructed demand data when the demand data is subjected to the temporary data compression processing and the reconfiguration processing. Reconstructed demand data outline confirmation step for visually comparing and confirming the original demand data;
Data for which application of the data compression rate set in the data compression rate temporary setting step as a formal data compression rate is permitted when there is no problem with the reconstruction demand data visually compared and confirmed in this reconstruction demand data outline confirmation step The demand data management method according to claim 10, further comprising a compression rate determination step.
前記需要データ圧縮処理ステップは、ある程度の劣化が伴う損失ありデータ圧縮処理ステップであり、この損失ありデータ圧縮処理ステップは、前記需要データを離散ウェーブレット変換するウェーブレット変換処理ステップと、
このウェーブレット変換処理ステップで出力されたウェーブレット変換係数のうち、このウェーブレット変換係数の絶対値が所定のしきい値以上のものを抽出する変換係数抽出処理ステップと、
この変換係数抽出処理ステップで抽出されたウェーブレット変換係数を符号化して前記需要データを圧縮需要データとして出力する符号化処理ステップとを備え、
前記圧縮需要データ解凍処理ステップは、前記圧縮需要データを復号してウェーブレット変換係数を出力する復号処理ステップと、
この復号処理ステップで出力されたウェーブレット変換係数を逆ウェーブレット変換してデータ圧縮処理前の需要データを再構成した再構成需要データを出力する逆ウェーブレット変換処理ステップとを備えることを特徴とする請求項10記載の需要データ管理方法。 Further comprising a compressed demand data decompression processing step for outputting reconstructed demand data obtained by reconstructing demand data by performing data decompression processing on the compressed demand data stored in the compressed demand data storage step;
The demand data compression processing step is a lossy data compression processing step with a certain degree of deterioration, and the lossy data compression processing step includes a wavelet transform processing step for performing discrete wavelet transform on the demand data,
Of the wavelet transform coefficients output in this wavelet transform processing step, a transform coefficient extraction processing step for extracting the wavelet transform coefficient whose absolute value is a predetermined threshold value or more,
An encoding process step that encodes the wavelet transform coefficient extracted in the transform coefficient extraction process step and outputs the demand data as compressed demand data;
The compressed demand data decompression processing step decodes the compressed demand data and outputs a wavelet transform coefficient; and
Claims, characterized in that an inverse wavelet transform processing step of outputting the reconstructed demand data reconstructed demand data before data compression wavelet transform coefficients outputted by the decoding process step by inverse wavelet transform 10. The demand data management method according to 10 .
この変換係数絶対値ソーティング処理ステップで出力される変換係数数列をシステム利用者が指定した所定データ圧縮率で一義的に決定する分割比で分割し、分割した前後にある2つの変換係数の絶対値からしきい値を決定するしきい値決定処理ステップと、
このしきい値決定処理ステップで出力されたしきい値に基づき前記ウェーブレット変換処理ステップで出力されたウェーブレット変換係数を抽出する抽出処理実行ステップとを備えることを特徴とする請求項14記載の需要データ管理方法。The transform coefficient extraction processing step sorts the wavelet transform coefficients output in the wavelet transform processing step in descending order of the absolute values of the wavelet transform coefficients, and a transform coefficient absolute value sorting process step;
The transformation coefficient number sequence output in this transformation coefficient absolute value sorting step is divided by a division ratio that is uniquely determined by a predetermined data compression ratio designated by the system user, and the absolute values of the two transformation coefficients before and after the division. A threshold determination processing step for determining a threshold from
15. The demand data according to claim 14, further comprising an extraction processing execution step for extracting the wavelet transform coefficient output in the wavelet transform processing step based on the threshold value output in the threshold determination processing step. Management method.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002270610A JP4040941B2 (en) | 2002-09-17 | 2002-09-17 | Demand data management system and management method thereof |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2002270610A JP4040941B2 (en) | 2002-09-17 | 2002-09-17 | Demand data management system and management method thereof |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2004110301A JP2004110301A (en) | 2004-04-08 |
| JP4040941B2 true JP4040941B2 (en) | 2008-01-30 |
Family
ID=32268186
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2002270610A Expired - Fee Related JP4040941B2 (en) | 2002-09-17 | 2002-09-17 | Demand data management system and management method thereof |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP4040941B2 (en) |
Families Citing this family (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN102779223B (en) * | 2011-05-13 | 2016-03-30 | 富士通株式会社 | The method of short-term electric load prediction and device |
| WO2017037881A1 (en) * | 2015-09-02 | 2017-03-09 | 株式会社日立製作所 | Online prediction system and method |
-
2002
- 2002-09-17 JP JP2002270610A patent/JP4040941B2/en not_active Expired - Fee Related
Also Published As
| Publication number | Publication date |
|---|---|
| JP2004110301A (en) | 2004-04-08 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP3356663B2 (en) | Image encoding device, image encoding method, and recording medium recording image encoding program | |
| Klump et al. | Lossless compression of synchronized phasor measurements | |
| CN111064705B (en) | Data compression acquisition and transmission method suitable for advanced measurement system | |
| JP3797836B2 (en) | Remote maintenance system | |
| Huang et al. | Application of arithmetic coding for electric power disturbance data compression with wavelet packet enhancement | |
| CN112486137B (en) | Methods, systems, and fault diagnosis methods for constructing fault feature databases in active power distribution networks | |
| GB2284121A (en) | Data compression using wavelet transformation; tree pruning | |
| CN115883670B (en) | Medical data analysis and acquisition method and device | |
| Kapisch et al. | Spectral variation-based signal compression technique for gapless power quality waveform recording in smart grids | |
| JP3434260B2 (en) | Audio signal encoding method and decoding method, these devices and program recording medium | |
| JP4040941B2 (en) | Demand data management system and management method thereof | |
| Louys et al. | Astronomical image compression | |
| EP0389050A1 (en) | Digital video signals encoding device | |
| JPWO2019229998A1 (en) | Data processing method and equipment for instrumental analysis | |
| Chatterjee et al. | An input-delay neural-network-based approach for piecewise ECG signal compression | |
| Vines et al. | Adaptive IFS image coding with proximity maps | |
| JP2017158183A (en) | Image processing device | |
| JP4359949B2 (en) | Signal encoding apparatus and method, and signal decoding apparatus and method | |
| Barlas et al. | A novel family of compression algorithms for ECG and other semiperiodical, one-dimensional, biomedical signals | |
| Li et al. | Progressive compression of 3d graphic models | |
| JPH11312979A (en) | Digital signal encoding apparatus, encoding method, decoding equipment value, decoding method, and signal processing apparatus | |
| Abdali-Mohammadi | 12 lead electrocardiography signals compression by a new genetic programming based mathematical modeling algorithm | |
| US6907413B2 (en) | Digital signal processing method, learning method, apparatuses for them, and program storage medium | |
| JPH1013246A (en) | Time series data compression / decompression method and apparatus | |
| Contreras-Valdes et al. | Data compression based on discrete Wavelet transform and fault detection of short-circuit faults in transformers |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20050225 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20070627 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20070724 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20070925 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20071106 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20071108 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101116 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101116 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20101116 Year of fee payment: 3 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20111116 Year of fee payment: 4 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20121116 Year of fee payment: 5 |
|
| FPAY | Renewal fee payment (event date is renewal date of database) |
Free format text: PAYMENT UNTIL: 20131116 Year of fee payment: 6 |
|
| LAPS | Cancellation because of no payment of annual fees |