富士通研究所、分散ストレージ上で大量データを高速処理する技術を開発

2018年9月20日(木)日川佳三（IT Leaders編集部）

リスト

富士通研究所は2018年9月20日、説明会を開き、現在開発中の2つの新技術を発表した。ビッグデータを高速に処理するための分散ストレージ技術「Dataffinic Computing（データフィニックコンピューティング）」と、データの出どころや加工履歴などデータの成り立ちを示す来歴情報を確認できるようにする技術「ChainedLineage（チェーンドリネージュ）」である。2018年度から2019年度にかけて製品化する。

　（1）新技術の1つ、Dataffinic Computing（データフィニックコンピューティング）は、ビッグデータを高速に処理するための分散ストレージ技術である。SDS（ソフトウェア定義型ストレージ）において、ストレージに保存したデータを処理する際に、ネットワーク経由でデータを転送しなくてもよいようにする。ストレージノード間や外部サーバーへとデータを転送する必要がないため、データの処理を高速化できる。

図1：分散ストレージ上で大量データを高速処理する技術「Dataffinic Computing（データフィニックコンピューティング）」の概要（出典：富士通研究所）
拡大画像表示

　Dataffinic Computingにおいては、分散ストレージを構成する個々のストレージは、データを処理するサーバーでもある。データ処理ソフトは、外部ストレージからデータを転送してくることなく、ローカルストレージのデータを利用して高速に処理する形になる。

　Dataffinic Computingを支える技術の1つは、ストレージに書き込むコンテンツに合わせてデータを分割し、それぞれのストレージノードへと分散配置する技術「コンテンツアウェアデータ配置」である。これにより、データ処理時にデータをストレージノード間で転送する必要がなくなる。

　Dataffinic Computingを支えるもう1つの技術「アダプティブリソース制御」では、個々のストレージノードの負荷を予測して、これからデータ処理ソフトを動作させるタイミングで負荷が高くなるノードを避け、負荷が低いノードを選んでデータ処理ソフトをプロビジョニング（配備）して実行する。

　Dataffinic Computingを搭載したSDS製品は、2019年度中に富士通が製品化を予定する。提供形態（ソフトウェアやアプライアンスなど）は未定。

データの出どころや加工履歴を確認できる仕組みを構築

　（2）新技術の1つ、「ChainedLineage（チェーンドリネージュ）」は、データの出どころや加工履歴といったデータの成り立ちを示す来歴情報を、企業をまたがって確認できるようにする技術である。個人データの利用に同意しているかどうかを管理する機能も提供する。これらにより、安心してデータを利用できるようにする。

図2：データの出どころや加工履歴といったデータの成り立ちを示す来歴情報を企業をまたがって確認できるようにする技術「ChainedLineage（チェーンドリネージュ）」の概要（出典：富士通研究所）
拡大画像表示

　例えば、運転履歴データを基に、個人にカスタマイズした自動車保険を提供できる。データを辿ることによって、保険料の算出に使われたデータ群を特定できる。保険料が通常よりも高い場合に、原因を調べられる。別の例では、患者の診療データを病院から大学経由で創薬メーカーに渡して新薬を開発する、といったデータチェーンを安全に運用できる。

　ChainedLineageを支える技術の1つが、データの来歴情報を企業をまたがって統合する技術である。ブロックチェーンの取引履歴に、各社の加工履歴を統合して格納する。2019年度の実用化を目指し、今後データ利活用シーンにおけるフィールド実証実験を進めていく予定である。

　ChainedLineageを支えるもう1つの技術が、企業をまたがって個人データの同意状況を管理する技術である。ブロックチェーン上に、共通して使える同意ポータルを用意する。個人データを使う場合は、同意ポータルによって本人の同意を確認し、同意済みのデータだけを送信する。同機能は、2018年度中の実装を目指す。