暗号カメラと暗号画像認識によるセンサレベルビジュアルプライバシー保護

Society5.0社会実現が叫ばれる中、ビッグデータ活用はサイバースペースにとどまらず、実世界でのユーザの行動履歴をカメラなどで取得し、活用することが期待されている。現在、携帯電話やスマートスピーカなどの様々なIoT機器はカメラを搭載し、深層学習による画像認識の精度が向上したことから、このような実世界情報のセンシングや活用が現実味を帯びてきている。一方で、カメラで人を観測することでのプライバシー問題も社会問題化している。本研究ではセンサ(撮像素子)上の光学像そのものをスクランブルする暗号カメラを提案する。センサでのサンプリング前にシーンを第三者に理解できない形へ光学的にスクランブル化し，符号化読み出しを行うことで、画像がデジタル化される前のセンサレベルでのビジュアルプライバシー保護を実現する。また、暗号カメラで撮影された暗号画像から復元を介さず、直接認識する新たな画像認識フレームワーク「暗号画像認識」を提案し、そのモデルや学習手法についての研究をおこなう。これまでのカメラは、レンズにより像をセンサ面に集光し、ぼけのない画像輝度を均一な矩形配置の画素でサンプリングすることを前提に設計されてきた。本研究で提案する暗号カメラは、レンズを用いず光学マスクによりスクランブルし、ランダムや加算読み出しをおこなうことから、従来のインパルスサンプリングやナイキストサンプリングとは全く異なる新たなセンシングアプローチの提案であると言える。さらには、従来の暗号化は、デジタル化されたものを前提としてきたが、光学系や電子回路を用いたアナログ的暗号化を行う点も斬新である。さらには、画像をデジタル化する前に暗号化するセンサレベルのプライバシー保護を提案している点が、これまでなかった画期的な点である。

Society5.0社会実現が叫ばれる中、ビッグデータ活用はサイバースペースにとどまらず、実世界でのユーザの行動履歴をカメラなどで取得し、活用することが期待されている。現在、携帯電話やスマートスピーカなどの様々なIoT機器はカメラを搭載し、深層学習による画像認識の精度が向上したことから、このような実世界情報のセンシングや活用が現実味を帯びてきている。一方で、カメラで人を観測することでのプライバシー問題も社会問題化している。本研究ではセンサ(撮像素子)上の光学像そのものをスクランブルする暗号カメラを提案する。センサでのサンプリング前にシーンを第三者に理解できない形へ光学的にスクランブル化し，符号化読み出しを行うことで、画像がデジタル化される前のセンサレベルでのビジュアルプライバシー保護を実現する。また、暗号カメラで撮影された暗号画像から復元を介さず、直接認識する新たな画像認識フレームワーク「暗号画像認識」を提案し、そのモデルや学習手法についての研究をおこなう。これまでのカメラは、レンズにより像をセンサ面に集光し、ぼけのない画像輝度を均一な矩形配置の画素でサンプリングすることを前提に設計されてきた。本研究で提案する暗号カメラは、レンズを用いず光学マスクによりスクランブルし、ランダムや加算読み出しをおこなうことから、従来のインパルスサンプリングやナイキストサンプリングとは全く異なる新たなセンシングアプローチの提案であると言える。さらには、従来の暗号化は、デジタル化されたものを前提としてきたが、光学系や電子回路を用いたアナログ的暗号化を行う点も斬新である。さらには、画像をデジタル化する前に暗号化するセンサレベルのプライバシー保護を提案している点が、これまでなかった画期的な点である。