SlideShare a Scribd company logo
1 of 19
Download to read offline
IMU を組み込んだスリッパ型デバイスに
よる個人識別手法の検討
Personal Identification Method by Slipper-type Device with IMU Sensor
〇藤井美結, 加藤花歩, Chengshuo Xia, 杉浦裕太
慶應義塾大学
2020年9月3日 第37回センシングフォーラム 計測部門大会 萌芽セッション
• 人々が集う場(老人ホーム,地域公民館など)におけ
る利用者管理の目的でのユーザ個人識別を想定
• 個人識別の方法→生体(顔,指紋,虹彩など)
• 動作を中断しなければならない可能性
2
背景
• 顔認証による出席管理[1]
3
関連研究
[1] CHEN Ping, HUANGFU Da-Peng, and LUO Zu-Ying. Automatic Attendance Face Recognition for Real Classroom Environments. BDIOT 2018, ACM,65–70
カメラで出席者を計測するようす
• 歩き方の個性に基づく個人認証[2]
4
関連研究
[2]M. Okumura, H. Iwama, Y. Makihara, and Yasushi Yagi. Performance Evaluation of Vision-based Gait Recognition using a Very Large-scale Gait Database. Proc.
IEEE 4th Int. Conf. on Biometrics: Theory, Applications and Systems, pp. 1-6, Washington D.C., USA, Sep. 2010.
カメラで歩行を撮影しているようす
• 日常動作で識別は可能である.
• 顔や見た目のプライバシが守れない.
• 環境によっては識別が困難である.
• カメラに映らない場所に人がいるとき
• 暗闇など
• 人が重なってしまったとき
5
カメラを用いた認証の課題
• 日常の自然な動作の生体情報を使用した個人識別
• 環境に左右されない個人識別
• プライバシに配慮した個人識別
6
目的
• スリッパにセンサを組み込んで歩行動作を計測して
個人を識別するスリッパ型デバイスを提案
• 対象としている屋内施設における日常動作として利用者
の歩容を定義
• 動作計測の方法
• 施設内で利用される「履物」に注目
• 特にスリッパは屋内施設で使用されていることが多い.
7
提案手法
• 人々が集う場で,プライバシを侵害することなく個
人を識別でき,人々の行動記録が可能
• 例) 出席率やリピート率
8
提案手法
匿名Aさん
提案手法
匿名Aさん匿名Bさん
9
実装・実験 全体的な流れ
実験1 センサ装着位置の基礎検討
• 全身に装着したセンサによる個人識別
• 最適な分割数や特徴抽出方法等を検討実験2 スリッパデバイスでの実験
• センサを装着したスリッパによる個人識別
10
実験1:センサ装着位置の基礎検討
項目 実験1
被験者 [人] 10
センサの種類 IMU(Xsens)
3軸加速度センサ
センサ装着箇所 全身17部位
動作 歩行動作
フレームレート [fps] 60
取得フレーム数 約5000
センサ装着位置
実験条件
• データ計測フェーズ
11
実験1:センサ装着位置の基礎検討
• 学習・識別フェーズ
計測データを120フレ
ームずつ分割したもの
を40ファイル準備
ハミング窓をかける
高速フーリエ変換
得られた全周波数のス
ペクトルのうち,
低周波数側の半分をデ
ータの特徴量にする
サポートベクタマシン
で学習,5 分割交差検
証で識別
サンプル数128とした
ので、不足部分を両端
から0埋め
• 全身の多くの部位で90%を超
える精度で個人識別が可能
• 足の個人識別精度
• 右足94.3%
• 左足95.3%
• 両足97.0%
• 足のみのセンサデータでも充
分に個人識別が可能
12
実験1:結果と考察
各身体部位での個人識別率[%]
• 市販のスリッパにM5StickCを1つ装着
• 右スリッパの中心部にバンドで固定.
13
実験2:スリッパデバイスでの実験
IMU(M5StickC)を装着したスリッパ
14
実験2:スリッパデバイスでの実験
②Bluetoothシリアル通信
IMU(M5StickC)
①加速度の計測
③受信データをcsvに変換 ④実験1と同様の手法で
学習&識別
csv
学習&識別
コード
計測~学習&識別の流れ
15
実験2:スリッパデバイスでの実験
項目 実験1 実験2
被験者 [人] 10 3(筆者含む)
センサの種類 IMU(Xsens)
3軸加速度センサ
センサ装着箇所 全身17部位 右足
動作 歩行動作
フレームレート [fps] 60
取得フレーム数 約5000
実験条件
• データ計測フェーズ
16
実験2:スリッパデバイスでの実験
• 学習・識別フェーズ(再掲)
計測データを120フレ
ームずつ分割したもの
を40ファイル準備
ハミング窓をかける
高速フーリエ変換
得られた全周波数のス
ペクトルのうち,
低周波数側の半分をデ
ータの特徴量にする
サポートベクタマシン
で学習,5 分割交差検
証で識別
サンプル数128とした
ので、不足部分を両端
から0埋め
• 個人識別精度は85%
• 実験1,2ともに120 フレー
ム(=2 秒)の学習データを使
用した
• およそ4 歩分の動作で個人識
別が可能であるといえる.
17
実験2:結果と考察
スリッパデバイスでの個人識別結果
• 加速度センサ以外のセンサの使用の検討
• センサを取り付ける位置による個人識別精度の変化
の検証
• リアルタイム認証
18
今後の課題
装着位置の例
19
まとめ
背景 人々が集う場における利用者管理の目的でのユーザ個人識別
関連研究
顔認証を使用した,出席管理システム
画像認識を使用した,歩行の特徴による個人認証
提案
スリッパにセンサを組み込んで歩行動作を計測して
個人を識別するスリッパ型デバイス
応用例 人々が集まる場において,個人を特定せずに人々の行動を記録
実装,実験
全身に装着したIMUによる個人識別の精度を検証
スリッパで計測した結果を使用した識別
結果
両足のIMUセンサによる個人識別精度は97.0%
スリッパでの計測データによる個人識別精度は85.0%
課題
加速度センサ以外のセンサの使用の検討
センサを取り付ける位置による個人識別精度の変化の検証
リアルタイム認証
匿名A
さん
匿名A
さん
匿名B
さん

More Related Content

More from sugiuralab

Pinch Force Measurement Using a Geomagnetic Sensor
Pinch Force Measurement Using a Geomagnetic SensorPinch Force Measurement Using a Geomagnetic Sensor
Pinch Force Measurement Using a Geomagnetic Sensorsugiuralab
 
Smartphone-Based Teaching System for Neonate Soothing Motions
Smartphone-Based Teaching System for Neonate Soothing MotionsSmartphone-Based Teaching System for Neonate Soothing Motions
Smartphone-Based Teaching System for Neonate Soothing Motionssugiuralab
 
Tactile Presentation of Orchestral Conductor's Motion Trajectory
Tactile Presentation of Orchestral Conductor's Motion TrajectoryTactile Presentation of Orchestral Conductor's Motion Trajectory
Tactile Presentation of Orchestral Conductor's Motion Trajectorysugiuralab
 
TouchLog: Finger Micro Gesture Recognition Using Photo-Reflective Sensors
TouchLog: Finger Micro Gesture Recognition  Using Photo-Reflective SensorsTouchLog: Finger Micro Gesture Recognition  Using Photo-Reflective Sensors
TouchLog: Finger Micro Gesture Recognition Using Photo-Reflective Sensorssugiuralab
 
Seeing the Wind: An Interactive Mist Interface for Airflow Input
Seeing the Wind: An Interactive Mist Interface for Airflow InputSeeing the Wind: An Interactive Mist Interface for Airflow Input
Seeing the Wind: An Interactive Mist Interface for Airflow Inputsugiuralab
 
Identification and Authentication Using Clavicles
Identification and Authentication Using ClaviclesIdentification and Authentication Using Clavicles
Identification and Authentication Using Claviclessugiuralab
 
Estimation of Violin Bow Pressure Using Photo-Reflective Sensors
Estimation of Violin Bow Pressure Using Photo-Reflective SensorsEstimation of Violin Bow Pressure Using Photo-Reflective Sensors
Estimation of Violin Bow Pressure Using Photo-Reflective Sensorssugiuralab
 
バウンサーを動かす外付けデバイス
バウンサーを動かす外付けデバイスバウンサーを動かす外付けデバイス
バウンサーを動かす外付けデバイスsugiuralab
 
A Virtual Window Using Curtains and Image Projection
A Virtual Window Using Curtains and Image ProjectionA Virtual Window Using Curtains and Image Projection
A Virtual Window Using Curtains and Image Projectionsugiuralab
 
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システムスマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システムsugiuralab
 
指側面を入力インタフェース化するリング型デバイス
指側面を入力インタフェース化するリング型デバイス指側面を入力インタフェース化するリング型デバイス
指側面を入力インタフェース化するリング型デバイスsugiuralab
 
ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識
ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識
ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識sugiuralab
 
磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別
磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別
磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別sugiuralab
 
Augmented Sports of Badminton by Changing Opening Status of Shuttle’s Feathers
Augmented Sports of Badminton by Changing Opening Status of Shuttle’s FeathersAugmented Sports of Badminton by Changing Opening Status of Shuttle’s Feathers
Augmented Sports of Badminton by Changing Opening Status of Shuttle’s Featherssugiuralab
 
指腹開放型入力デバイス における文字ジェスチャ識別
指腹開放型入力デバイス における文字ジェスチャ識別指腹開放型入力デバイス における文字ジェスチャ識別
指腹開放型入力デバイス における文字ジェスチャ識別sugiuralab
 
Carpal Tunnel Syndrome Estimation through Median Nerve Segmentation in Ultr...
Carpal Tunnel Syndrome Estimation  through Median Nerve Segmentation  in Ultr...Carpal Tunnel Syndrome Estimation  through Median Nerve Segmentation  in Ultr...
Carpal Tunnel Syndrome Estimation through Median Nerve Segmentation in Ultr...sugiuralab
 
静電容量の測定による畳のタッチセンサ化手法の提案
静電容量の測定による畳のタッチセンサ化手法の提案静電容量の測定による畳のタッチセンサ化手法の提案
静電容量の測定による畳のタッチセンサ化手法の提案sugiuralab
 
Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...
Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...
Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...sugiuralab
 
反射型光センサを用いた指先のジェスチャ識別
反射型光センサを用いた指先のジェスチャ識別反射型光センサを用いた指先のジェスチャ識別
反射型光センサを用いた指先のジェスチャ識別sugiuralab
 
Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...
Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...
Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...sugiuralab
 

More from sugiuralab (20)

Pinch Force Measurement Using a Geomagnetic Sensor
Pinch Force Measurement Using a Geomagnetic SensorPinch Force Measurement Using a Geomagnetic Sensor
Pinch Force Measurement Using a Geomagnetic Sensor
 
Smartphone-Based Teaching System for Neonate Soothing Motions
Smartphone-Based Teaching System for Neonate Soothing MotionsSmartphone-Based Teaching System for Neonate Soothing Motions
Smartphone-Based Teaching System for Neonate Soothing Motions
 
Tactile Presentation of Orchestral Conductor's Motion Trajectory
Tactile Presentation of Orchestral Conductor's Motion TrajectoryTactile Presentation of Orchestral Conductor's Motion Trajectory
Tactile Presentation of Orchestral Conductor's Motion Trajectory
 
TouchLog: Finger Micro Gesture Recognition Using Photo-Reflective Sensors
TouchLog: Finger Micro Gesture Recognition  Using Photo-Reflective SensorsTouchLog: Finger Micro Gesture Recognition  Using Photo-Reflective Sensors
TouchLog: Finger Micro Gesture Recognition Using Photo-Reflective Sensors
 
Seeing the Wind: An Interactive Mist Interface for Airflow Input
Seeing the Wind: An Interactive Mist Interface for Airflow InputSeeing the Wind: An Interactive Mist Interface for Airflow Input
Seeing the Wind: An Interactive Mist Interface for Airflow Input
 
Identification and Authentication Using Clavicles
Identification and Authentication Using ClaviclesIdentification and Authentication Using Clavicles
Identification and Authentication Using Clavicles
 
Estimation of Violin Bow Pressure Using Photo-Reflective Sensors
Estimation of Violin Bow Pressure Using Photo-Reflective SensorsEstimation of Violin Bow Pressure Using Photo-Reflective Sensors
Estimation of Violin Bow Pressure Using Photo-Reflective Sensors
 
バウンサーを動かす外付けデバイス
バウンサーを動かす外付けデバイスバウンサーを動かす外付けデバイス
バウンサーを動かす外付けデバイス
 
A Virtual Window Using Curtains and Image Projection
A Virtual Window Using Curtains and Image ProjectionA Virtual Window Using Curtains and Image Projection
A Virtual Window Using Curtains and Image Projection
 
スマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システムスマートフォンを用いた新生児あやし動作の教示システム
スマートフォンを用いた新生児あやし動作の教示システム
 
指側面を入力インタフェース化するリング型デバイス
指側面を入力インタフェース化するリング型デバイス指側面を入力インタフェース化するリング型デバイス
指側面を入力インタフェース化するリング型デバイス
 
ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識
ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識
ヒアラブルデバイスにおける音漏れ信号を用いた空中ジェスチャ認識
 
磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別
磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別
磁石内臓イヤリングによる磁力変化を利用したジェスチャ識別
 
Augmented Sports of Badminton by Changing Opening Status of Shuttle’s Feathers
Augmented Sports of Badminton by Changing Opening Status of Shuttle’s FeathersAugmented Sports of Badminton by Changing Opening Status of Shuttle’s Feathers
Augmented Sports of Badminton by Changing Opening Status of Shuttle’s Feathers
 
指腹開放型入力デバイス における文字ジェスチャ識別
指腹開放型入力デバイス における文字ジェスチャ識別指腹開放型入力デバイス における文字ジェスチャ識別
指腹開放型入力デバイス における文字ジェスチャ識別
 
Carpal Tunnel Syndrome Estimation through Median Nerve Segmentation in Ultr...
Carpal Tunnel Syndrome Estimation  through Median Nerve Segmentation  in Ultr...Carpal Tunnel Syndrome Estimation  through Median Nerve Segmentation  in Ultr...
Carpal Tunnel Syndrome Estimation through Median Nerve Segmentation in Ultr...
 
静電容量の測定による畳のタッチセンサ化手法の提案
静電容量の測定による畳のタッチセンサ化手法の提案静電容量の測定による畳のタッチセンサ化手法の提案
静電容量の測定による畳のタッチセンサ化手法の提案
 
Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...
Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...
Virtual IMU Data Augmentation by Spring-Joint Model for Motion Exercises Reco...
 
反射型光センサを用いた指先のジェスチャ識別
反射型光センサを用いた指先のジェスチャ識別反射型光センサを用いた指先のジェスチャ識別
反射型光センサを用いた指先のジェスチャ識別
 
Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...
Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...
Masktrap: Designing and Identifying Gestures to Transform Mask Strap into an ...
 

IMUを組み込んだスリッパ型デバイスによる個人識別手法の検討(SF2020)