【KinectでFace Trackingの検討】瞬き、顔/眼/眉の輪郭、瞳孔等 SDK Ver.1.6 @NeoTechLab
【KinectでFace Trackingの検討】瞬き、顔/眼/眉の輪郭、瞳孔等 SDK Ver.1.6  @NeoTechLab
Uploaded October 2012 | Updated September 2026, 2 weeks ago
【筆者サポートページ】
【私設研究所Neo-Tech-Lab.com】『Kinectが変えるセンシングの世界』
【関連情報】 neo-tech-lab.co.uk/ARsensing

【CQ出版】『インターフェース2013年1月号』(11月25日発売予定)
kumikomi.net/interface/contents/201301.php
センサ&カメラで ジェスチャ検出! 動き見切ったり!
スポーツ/医療/ヘルスケアに必要な回路から信号処理まで
研究 人間センシング


KinectでオリジナルなFace Trackingアルゴリズムを構築しようとしています。
Kinect for Windows SDK Ver.1.6から赤外線カメラの生映像がColorImageStreamで得られるようになったので、その機能を使って予備的な実験を行っています。眼球と顔の皮膚では赤外線の反射率が激しく違うようで、瞬きするところがはっきりとわかります。顔、眼、眉、唇の輪郭もはっきりと区別できています。さらに瞳孔も映っていることがわかるでしょうか?
視点センサ(見ている方向がわかるセンサ)だって作れそうです。
瞬きもはっきりと撮影できるので、いねむり防止センサとかにも応用ができそうです。

唇は毛細血管が発達しているので、赤外線吸光度が大きく、皮膚に比べて反射が少ないのです。また、眉毛は毛髪と同じで赤外線を反射しにくいということから理解できる結果です。

Kinectは遊ぶという点でネタが尽きそうにないし面白いかも。
【KinectでFace Trackingの検討】瞬き、顔/眼/眉の輪郭、瞳孔等 SDK Ver.1.6KinectV2 High Resolution Depth Fusion (My Original)【Kinect】ADC内蔵温度センサでファンヒーターの温度をARセンシングRealSense HeartBeat from Face  /2015/10/28Infrared Gesture Sensor 赤外線ジェスチャーセンサ(~1m)Open SourceのMeshRoomでPhotogrametryを試してみた口すぼめ法で酸素消費量を上回る酸素を供給した場合の脈波【HTML5+JavaScript】『PCのカメラで脈拍をリアルタイム非接触センシング』Kinect for Windows v2とMMDモデル表示の共存Non-Contact Breathing Monitor by Kinect for Windows Ver.2.0Augmented Reality Sensor 【拡張現実センサ 事例】HoloLensの表示実験
Tomoaki Ueda (NeoTechLab) |

【KinectでFace Trackingの検討】瞬き、顔/眼/眉の輪郭、瞳孔等 SDK Ver.1.6

SHARE TO X SHARE TO REDDIT SHARE TO FACEBOOK WALLPAPER