グーグルがスマホのカメラで心拍と呼吸数を認識する新機能発表、Pixelから提供スタート

GoogleのフィットネスアプリGoogle Fitに、スマホカメラを使った呼吸数・心拍数計測機能が加わります。

呼吸数の計測は、スタンドなどに立てたスマホのカメラで胸から上をとらえることで、服ごしの体の動きを画像認識で推測する仕組み。

Google Fitは従来から、スマホを持って歩いた際の位置情報や動きを使い、ウォーキング等の移動距離と歩数を推定して、運動量や消費カロリーの目安として記録する機能を備えています。

また Wear OSスマートウォッチやスポーツ・エクササイズ用ウェアラブルデバイスとの連携で心拍数などを記録することもできました。今回の新機能では、スマホのカメラだけで呼吸数や心拍を計測できるようになります。

心拍数のほうはスマホの背面カメラレンズに指先を載せて、血行による僅かな色の変化を捉える仕組み。こちらは古くから実用されている原理です。

(指先でなく顔などを撮影して心拍数を推定する技術は以前からあり、マイクロソフトも Kinect V2センサで商用化していましたが、今回のGoogle Fit 新機能では精度のためか周囲環境の影響を考慮したのか、呼吸と同時には取得できないようです)。

Google Fitのスマホカメラ呼吸数・心拍数計測機能は、来月からまずは Pixel スマートフォン向けに提供します。将来的には他のAndroid端末にも拡大する計画。

心拍数の計測はスマートウォッチやフィットネストラッカーの多くが備えていますが、呼吸数はバンドを胸や腹部に装着したり、心拍と同じセンサで周期的な変動から推測したり、医学的に正確な計測にはチューブを口に加えたり、あるいは医療用のバイタルセンサやベビーモニターとして設置する専用機器であったりとさまざまな方法はあるものの、手軽な計測機器は普及していません。

スマホカメラだけで認識できるのは手軽で、機械学習や画像処理の勝利ともいえる一方、比較的狭い画角にちゃんと上半身を収め続ける必要があることや、画像処理で胸を動きを推定する原理から、運動をしながら測る用途には不向きです。

カメラの画角に依存しない心拍数・呼吸数モニタリング技術としては、ウルトラワイドバンドを含む電波で動きを捉える技術も研究から応用へと進んでいますが、いまのところ心拍・呼吸モニタ兼用WiFiルータは売っていません(広範囲の人感センサを兼ねるWiFiルータはLinksysが出しています)。

Googleも電波を使った人体の動き認識を研究しており、Pixel 4に搭載したSoliレーダーを今度は据え置きのNest Hubスマートディスプレイに搭載して、ジェスチャ認識や睡眠トラッキングに応用するうわさもあります。

Googleの新Nest Hubスマートディスプレイは Soliレーダー搭載、睡眠トラッキングに活用？

フィットネス用途はもちろん、睡眠時無呼吸やベビーモニター、健康管理でも呼吸数や動きの認識は重要であることを考えると、テレビやスマートスピーカー、ルーターが人間の動きやバイタルを常時監視するセンサを兼ねる未来は意外と早く来そうです。医療や介護的にはすばらしい技術であると同時に、以前なら大往生とみなされていた就寝中の急変による死が可視化されて「救急が間に合わなかった結果」になるかもしれませんが。

Google は新型コロナウイルス感染症への対応や、AI技術・モバイル技術が健康・医療に与える影響について研究者・技術者・臨床家が語るオンラインイベントThe Check Upも開催しています。

WiFi電波で脈拍・呼吸を計る「バイタルラジオ」、MITが開発。精度99% (2015年)

顔の動画像から脈拍を計測する技術、富士通研究所が開発 (2013年)

Xbox Oneの新Kinectは大幅進化、表情や心拍も認識。6人同時に全身キャプチャ(2013年)

（Engadget日本版より転載）

グーグルがスマホのカメラで心拍と呼吸数を認識する新機能発表、Pixelから提供スタート

カテゴリー：ヘルステック

タグ：Google / グーグル（企業）、Google Fit（製品・サービス）、Google Pixel（製品・サービス）、Google Nest（製品・サービス）

投稿者:

TechCrunch Japan