ДЕВЯТКОВ В.В. и др. Метод мультимодального распознавания сцен. - МГТУ им. Н.Э.Баумана, Proceedings of the International Conference on System Analysis and Information Technologies, Issue 2009, Session 2, CAIT-2009, Киев, Украина, 28 мая 2009, найдено в Интернет на http://sait.org.ua/eproc/2009/2/s2201.pdf/view. US 2007011609 A1, 11.07.2007. EP1335338 A2, 13.08.2003. US 2006077174 A1, 13.04.2006. US 6111580 A, 29.08.2000. WO 2007133716 A1, 22.11.2007. US 6779060 В1, 17.08.2004. US 6345111 B1, 05.02.2002. KR 20090084212 A, 05.08.2009. WO 2009078523 A1, 25.06.2009. RU 2339087 C2, 20.11.2008. RU 2316051 С2, 27.01.2008. Gesture and Sign Languages in Human-Computer Interaction, Lecture Notes in Computer Science, International Gesture Workshop, GW 2001, London, UK, April 18-20, 2001, Springer Berlin/Heidelberg, Volume 2298. MCKENZIE MILLS K. ET AL, Integrating speech and two-dimensional gesture input-a study of redundancy between modes, COMPUTER HUMAN INTERACTION CONFERENCE, 1998. PROCEEDINGS, AUSTRALIA, 30 NOV. - 4 DEC. 1998, LOS ALAMITOS, IEEE COMPUT. SOC, c.6-13.
Имя заявителя:
Девятков Владимир Валентинович (RU), Алфимцев Александр Николаевич (RU)
Изобретатели:
Девятков Владимир Валентинович (RU) Алфимцев Александр Николаевич (RU)
Патентообладатели:
Девятков Владимир Валентинович (RU) Алфимцев Александр Николаевич (RU)
Реферат
Изобретение относится к области вычислительной техники и служит для управления телевизором с использованием мультимодального интерфейса (ММИ). Техническим результатом является расширение взаимодействия между пользователем и дисплейной системой электронной аппаратуры телевизора. Технический результат достигается тем, что способ управления телевизором с помощью ММИ включает визуальное взаимодействие между пользователем и дисплейной системой телевизора. С помощью ММИ, содержащего в качестве системы управления телевизором персональный компьютер, видеокамеру и микрофон, осуществляют управление телевизором путем взаимодействия пользователя с дисплейной системой телевизора, используя алгоритм обнаружения и распознавания пользователя, алгоритм распознавания жестов и алгоритм распознавания голосовых сигналов и экстраполирования динамического ряда данных этих алгоритмов по определенным формулам, в которых математически выражена зависимость алгоритмов этих трех модальностей, взаимодействующих с графическим меню ММИ, выявляют путем математического анализа алгоритмы трех совокупностей сигнальных команд управления телевизором, которые включаются в базу данных и память ММИ интерфейса, в результате ММИ автоматически выявляет индивидуальные для каждого пользователя алгоритмы трех совокупностей сигнальных команд, взаимодействующих с его графическим меню, и осуществляет с их помощью управление телевизором. 9 ил.