１００年後も使える（使われる）高速・巨大・低コストアーカイブの普及
現在は情報が満ち溢れる一方、その十分な利活用はむしろ難しくなったとも言える状況です。
特に膨大に積み上がった観測データ、IoTデータなどのビッグデータは提供することすら容易ではありません。データ利用者側はこのようなビッグデータを万難を排して入手することができたとしても、それらを自分の目的に合わせて組み合わせることが困難で、利用どころではありません。
Zap100プロジェクトはこのような問題を解決し、巨大な情報群を高速かつ、低コストで利用できるような新データベースシステムの展開を行うプロジェクトです。
2019年度、JAXA、ターボデータラボラトリー、エスペラントシステムで「巨大時系列データの高速アクセスに関する（共同）研究」を始めました。基盤となる技術は従来よりターボデータラボラトリー、エスペラントシステムが開発してきたZap-Over技術(表形式ビックデータをファイル化しインターネット上のファイルサーバに置くだけでユーザが高速検索できるようにする技術）です。共同研究によりの実用性が大きく高まり、より実用的なソフトウェアとして成長しはじめました。
2020年度、目標をより具体的に定義し直しました。「100年後も使える高速・巨大・低コストアーカイブの普及」です。きっかけはJAXAや国立天文台などが蓄積する貴重な観測ビッグデータを半永久的に使える形で保持したいという強いニーズとそれを実現できるよいテクノロジーが存在していないことが明らかになったことでした。
2020年度は、データベースの専門家やデータサイエンティストにも参加頂き、Zap-Over技術の論文投稿やさらなる機能の改善を行っています。
当プロジェクトはとりわけアーカイブとして蓄積される時系列のビッグデータに注力しています。このようなビッグデータは、分析や統計をはじめ、AIやIoT、ブロックチェーンなど様々な目的に利用されるべきものですが、すでに述べたようにそれらを共有し、組み合わせ、活用する技術が未成熟であったため、活用は困難でした。
Zap-Over技術はこのような課題を解決します。インターネットを介してだれもがビッグデータに気軽に接続し、それらを組み合わせて自分の目的に合ったビッグデータを作成できるようにします。
世界の片隅に細々と灯る炎はすぐに立ち消えてしまいます。貴重な観測データを半永久的に利用可能にしようとするZap100プロジェクトが100年続くためには、Zap-Over技術が世界中のたくさんの人々に利用される必要があります。そのためには技術開発の継続と同時に社会展開の努力を続ける必要がありますが、厳しい競争と軋轢に巻き込まれる企業活動の形態での社会展開では時間と労力がかかり、成功の確率も高くはありません。そこでZap100プロジェクトはオープンで非営利でアカデミックな形で活動し、速やかに目的とする持続性とその条件である世界的広がりを達成しようとしています。
優れた技術であっても、その利用者人口が小さければ継続しません。
まずはJAXAで使われ、次に国立天文台、NASAなどの天文分野で使われること。
さらに天文分野に限らず、IoTやブロックチェーンなどでも使われること。
そしてそれ以外の様々な領域でも使われることが必要です。
データフォーマットやソフトウェア（エンジン部分）が乱立してしまっては、やはり使えなくなってしまいます。
最初の２０年間は特許群でプロテクトを行い、同時にIEEEなどで標準規格になることを目指します。
その時々のソフトウェア、システムに接続するインターフェイスの提供など、どう継続して行くのか、利用者をどうサポートして行くのか、など、幅広な意見を得ながら進めていきます。
貴重なデータを様々に活用する技法・文化を育てて行かなければなりません。
こちらも幅広に意見を得ながら進めていきます。
Zap100プロジェクトのメンバーの一人である古庄 晋二が、 異能vationに採択されました。
Zap100プロジェクトと、異能vationでの挑戦課題（開発した技術の社会展開の試みとその記録を残す）を推進していきます。