论文Touch180

Touch180: Finger Identification on Mobile Touchscreen using Fisheye Camera and Convolutional Neural Network

abstract

  • 鱼眼+深度学习,证明检测手指的准确性和鲁棒性
  • 生成了一个dataset
  • 训练了一个CNN,确定手指touch的位置

intro

  • 可以通过给不同的手指不同的职责来增强对触摸屏的使用
  • 以前的分别手指的论文
    • wearable device -> 比较贵
    • 确定触摸的区域 -> 必须多个手指触控
    • 还有一个方法是在手上戴上了一个有颜色的戒指(诶这个方法用来实现现在的device的画画功能感觉怎么样)
    • 用了深度相机的 -> 不适合mobile device
    • 其他用CNN的没有使用鱼眼相机

dataset

  • 直接用不同的frame来做的dataset
  • 用五个二进制的数字来表示labeling

net