時間発展シミュレーション向けの時系列データ圧縮手法

• 松尾 勇気

  東京大学情報理工学系研究科

• 石川 裕

  東京大学情報理工学系研究科

書誌事項

タイトル別名

• TIME-SERIES DATA COMPRESSION METHOD FOR TIME EVOLUTION SIMULATIONS

抄録

時間発展シミュレーションは定期的に計算結果を出力するため、巨大なデータが生成される。そのデータサイズを縮小するため、データ圧縮技術が使われているが、ある時間ステップにおいて書き出すデータの隣接する値の類似性を活用している。本研究では、予測器に基づいた既存の高速な浮動小数点圧縮アルゴリズムを基にした時系列データ圧縮器 t-FPC を提案する。圧縮率を向上させるため、1 つの時間ステップに出力される中間データを、同一の時間ステップのデータ内部のものではなく、最近の複数の時間ステップで出力されたデータ間の差分を用いて圧縮を行う点でそれとは異なる。さらに、書き出す差分データ全体の bit 長の分布から可変サイズでデータを書き出すことにより圧縮率を向上する。また、連続して同じ値の場合、時間ステップの出力が全て同じ値の場合には、特別なエンコーディングをすることにより、圧縮率をさらに向上させる。時間発展シミュレーションである SCALE 気象・気候モデルの実際のファイル出力データを用いた評価により、t-FPC は、既存の浮動小数点データ専用の圧縮器や一般のデータ圧縮器に比べて、圧縮率や処理スループットの観点において、良い性能を達成していることを示す。

収録刊行物

• 情報処理学会研究報告. [ハイパフォーマンスコンピューティング]

  情報処理学会研究報告. [ハイパフォーマンスコンピューティング] 2014 (4), 1-4, 2014-02-24

  一般社団法人情報処理学会

キーワード

• IO

詳細情報

• CRID: 1573387452649249024
• NII論文ID: 110009675718
• NII書誌ID: AN10463942
• 本文言語コード: ja
• データソース種別:
  • CiNii Articles