流れるデータをリアルタイムに圧縮・解凍する新技術を開発

July, 30, 2024, つくば--映像など無限に流れるデータを圧縮器に一度通すだけで、頻出するデータのパターンを自動的に見つけて圧縮・完全に復元（解凍）可能な新技術を開発した。従来の技術より10～30%圧縮率が高く、次世代データ伝送方式としてIoTやクラウドなどに用いれば、消費電力を大幅に削減できる。
IoT（Internet of Things）やクラウドなど現代社会に欠かせない情報通信技術では、映像やセンサなどのデジタルデータを計算し、伝送する速度がサービスの質を決める。例えば、監視カメラ映像による人物特定では、映像の伝送、人工知能（AI）での認識、結果を利用者に返すといった一連の流れを高速化する技術が求められる。実はこの過程で時間がかかるのは、AIによるデータ計算よりもデータの移動（通信）。このため、元データの情報の高精細さを損なわずにデータ量を可能な限り削減し、通信時間を減らす手法の開発が望まれている。実現すれば、AIの計算に必要なデータをより短時間で伝送できる。さらに、5G/6Gなどの無線通信やインターネットなど広域通信に流れるデータ量を減らせるため、世界規模での消費電力の削減につながる。

従来のデータ圧縮技術では、データを有限なある程度のまとまりとして記録し、それを圧縮していたため、データを記録するメモリーやデータを処理するプロセッサーが不可欠だった。このため、終わりなく連綿と流れるデータ（データストリーム）を圧縮する場合、圧縮機構は大がかりになる一方、リアルタイムの圧縮はできないという問題があった。

研究では、データストリームを圧縮器に一度通すだけで、頻出するデータパターンを自動的に探し出し、最少で1ビットにまで圧縮できる新技術を開発した。しかも、どのようなデータでもリアルタイムに完全に元に戻すことができる。これまでの技術では、一つの単位データ（シンボル）を1ビットにまで圧縮することはできたが、新方式では複数の単位データをまとめて1ビットにまで圧縮できる。これにより、従来方式に比べ圧縮効率が10～30%向上した。

また、今回の新技術では、プロセッサやメモリーなどを利用することなく、高速でコンパクトなデータ圧縮機能のハードウェア化が容易にできるという特色がある。半導体チップに今回の成果を適用し、AIに実装すれば、データ量の削減によるさらなる高速化、データの移動経路における省電力化が図れ、Society 5.0を実現する持続可能なブレークスルー技術となることが期待される。
(詳細は、https://www.tsukuba.ac.jp)