مجله ماشین بینایی و پردازش تصویر

مجله ماشین بینایی و پردازش تصویر

تشخیص حرکات دست برای تعامل انسان و رایانه با استفاده از کدگذاری خط سیر حرکت و شبکه عصبی مصنوعی

نوع مقاله : مقاله پژوهشی

نویسندگان
دانشکده برق وکامپیوتر، دانشگاه تحصیلات تکمیلی صنعتی و فناوری پیشرفته کرمان
چکیده
حرکات دست انسان حالتی از تعامل غیرکلامی است که در ارتباط بین انسان و رایانه مورد استفاده قرار می‌گیرد. شهودی و طبیعی بودن حرکات دست مهمترین عامل ایجاد انگیزه در محققان است که دست‌ها را برای بهبود تعامل بین انسان و رایانه مورد استفاده قرار دهند. در این مقاله جهت تشخیص حرکت دست، با استفاده از اختلاف فریم ‌ها، دست به عنوان تنها شی متحرک در تصاویر جدا شده است. پس از آن، بردار ویژگی حرکت دست استخراج شده است. این بردار ویژگی به عنوان ورودی شبکه عصبی مصنوعی جهت طبقه‌ بندی حرکات انتقالی دست استفاده شده است. برای استخراج بردار ویژگی دو روش ارائه شده است. بردار ویژگی اول حاصل از کدگذاری خط سیر انتهایی‌ ترین پیکسل دست در طی فریم‌ ها است. بردار ویژگی دوم، از دو هیستوگرام زاویه‌ ای  برای کدگذاری دست استفاده می‌کند. شناسایی شش حرکت مختلف دست در داده‌ های آزمایشی با نرخ بازشناسی 95/54 درصد با استفاده از بردار ویژگی اول و تشخیص این حرکات با نرخ بازشناسی 95/53 توسط بردار ویژگی دوم، کارایی بردارهای ویژگی پیشنهادی در تشخیص حرکات دست را نشان می‌ دهد. همچنین مقایسه‌ ی بردارهای ویژگی پیشنهادی با بردار ویژگی یک روش متداول، برتری روش‌ های پیشنهادی را از نظر دقت، تعداد ویژگی‌ها و زمان آموزش طبقه‌ بند نشان می‌ دهد.
کلیدواژه‌ها

عنوان مقاله English

Hand gesture recognition for human computer interaction using motion trajectory coding and artificial neural network

نویسندگان English

Farzaneh Azadipour ghahestani
Esmat Rashedi
Department of Electrical Engineering, Graduate University of advanced technology, Kerman
چکیده English

Human hand movements are used in the non-verbal interaction between human and computers. Intuitive and natural hand movements is the most important factor motivating researchers to use the hands to improve the human-computerinteraction. In this paper, for hand gesture recognition, hand as the only moving object in the video is detectedusing the difference between frames. After that, hand movement feature vector is extracted. This vector is used to detect hand gesture using artificial neural network. Two methods are proposed for feature-vector extraction. The first method codes themotion trajectory of the final hand pixel in the frames. The second method uses two angle histograms. Identifying six different gestures with recognition rate of 95.54 percent using the first method and 91.53 percent using the second method, shows the efficiency of the proposed system. Also, the comparison between the proposed feature vectors with a conventional method shows the superiority of theproposed methods in terms of accuracy, the number of features, and classifier training time.

کلیدواژه‌ها English

Hand Gesture Recognition
Hand Detection
hand motion trajectory coding
Angle Histogram
Artificial Neural Network
دوره 3، شماره 2
پاییز 1395
صفحه 13-22

  • تاریخ دریافت 21 بهمن 1394
  • تاریخ بازنگری 08 خرداد 1395
  • تاریخ پذیرش 05 مرداد 1395