Tobii eye tracker программа для управления компьютером
How do I properly set up my eye tracking hardware and software?
Change step
Explore other sections or get help
This Learn article will show you how to configure your hardware and Tobii Pro Lab to record E-Prime using an External presenter project.
Learn how to setup and configure your Tobii Pro Nano eye tracker.
Learn how to setup your HTC VIVE headset and base stations
Learn how to use the eye images to help setup and troubleshoot a Glasses 2 recording
Learn the recommended locations of the body to place the GSR electrodes.
Learn how to setup a scene camera project in Pro Lab
Learn how to optimize your eye tracking setup for time critical experiments.
Learn how to install and activate Tobii Pro Lab on your computer.
Learn how to set up and install the Tobii Pro Spectrum eye tracker.
Learn how to set up a Shimmer3 GSR+ device with Tobii Pro Lab.
Learn how to configure Tobii Pro Lab to send TTL events to an external biometric device.
Learn how to set up and install the Tobii Pro TX300 eye tracker.
Learn how to connect your Tobii Pro Glasses 2 to the Pro Glasses Controller software on your computer.
Learn how to install the Tobii Glasses Controller software.
Learn the basics of how to prepare Tobii Pro Glasses 2 for usage and how to use them in a study.
Learn how to configure your eye tracker with a "non-standard" screen or physical display area.
Learn how to installing and use the external processing unit for Tobii Pro X3-120.
Learn how to setup and install your Tobii Pro X3-120 eye tracker.
Learn how to setup and install your Tobii Pro X2-30 or Tobii Pro X2-60 eye tracker.
Learn how to configure and setup Tobii Pro Lab or Tobii Pro Studio correctly for the Tobii Pro Mobile Device Stand.
Learn how to install and activate Tobii Pro Studio on your computer.
Learn how to configure your Tobii Pro Nano, X2-30, X2-60 or X3-120 eye tracker correctly for the Mobile Device Stand.
Learn how to assemble all the components of the Mobile Device Stand correctly.
1. Select the hardware
2. Select Tobii device
Tobii Experience Driver v1.96
Once your eye tracker has been plugged in, you should automatically get the driver via Windows Update and the Tobii Experience app from Microsoft Store. But, if you are not getting the driver or the app, please download the driver below.
Please note that the version displayed in-app is the app version, not the driver version. This version is not yet available on Windows Update so download now to get the latest driver and potential app updates.
3. Select application
Tobii Experience Driver v1.81
Please note that this is in beta only and it will not get any further updates. Windows Eye Control and Touchpad features are not supported by Tobii Experience.
First, if you have the Tobii Core software installed you need to uninstall it before installing Tobii Experience.
October 18, 2021
Please note that Tobii Experience is not compatible with Windows Eye Control and Touchpad features. If you wish to use those features, instead download the Tobii Core software.
Do you understand and still want to download Tobii Experience?
If you are unsure what this means, please contact support.
Tobii Eye Tracking Core Software v2.16.8
This package provides Tobii Eye Tracking Core Features to Tobii Eye Tracker 4C, Tobii EyeX and Steelseries Sentry. Some have reported issues with head tracking with Tobii Core 2.13.4. So if you are experiencing issues, please download 2.13.1 here.
Tobii Eye Tracking Core Software v2.16.8
This package provides Tobii Eye Tracking Core Features to Tobii Eye Tracker 4C, Tobii EyeX and Steelseries Sentry.
2. Select Alienware device
Tobii Experience v1.0
Once your eye tracker has been plugged in, you should automatically get the driver via Windows Update and the Tobii Experience app from Microsoft Store.
If you need to download the driver, please visit your manufacturer's website.
Tobii Experience v1.0
Once your eye tracker has been plugged in, you should automatically get the driver via Windows Update and the Tobii Experience app from Microsoft Store.
If you need to download the driver, please visit your manufacturer's website.
Tobii Experience v1.0
Once your eye tracker has been plugged in, you should automatically get the driver via Windows Update and the Tobii Experience app from Microsoft Store.
If you need to download the driver, please visit your manufacturer's website.
Alienware Eye Tracking Core Software v2.13.4
This package provides Tobii Eye Tracking Core Features on the Alienware Notebook 17 R4 with native integrated Tobii Eye Tracking running on Windows 10.
Some have reported issues with head tracking with Tobii Core 2.13.4. So if you are experiencing issues, please download 2.13.1 here.
October 16, 2018
Tobii Aware v2.13.4
Tobii Aware gives you access to Windows Hello face authentication and a selection of Power features. Read More This package provides the Tobii Aware feature on the Alienware 13, 15 and 17 R4 with Realtek IR camera (without native eye tracking), running on Windows 10.
October 16, 2018
Predator Eye Tracking Core Software v2.13.4
This package provides Tobii Eye Tracking Core Feature for the Predator Z301CT, Predator Z271T, Predator XB271HUT, Predator XB251HQT and Predator 21 X, with a built-in Tobii Eye Tracker running on Windows 10 64-bit, Windows 8.1 64-bit, and Windows 7 64-bit.
October 16, 2018
Acer Eye Tracking Core Software v2.13.4
This package provides Acer Eye Tracking Core Feature for V 17 Nitro Black Edition with a built-in Tobii Eye Tracker running on Windows 10 64-bit, Windows 8.1 64-bit and Windows 7 64-bit.
October 16, 2018
Tobii Eye Tracking Core Software v2.13.3
This package provides Tobii Eye Tracking Core Features to the MSI GT72 running on Windows 10.
Disclaimer: As the MSI GT72 is discontinued by MSI, we are unfortunately unable to provide the latest and greatest experience for all of you MSI Users out there. Please have a look at this article for more information.
Tobii Ghost v1.12.1
Tobii Ghost is an add-on to our Tobii Eye Tracking software that enables streamers to give their audience the insights of seeing where they're looking in-game or in applications. Read more
EyeX and Steelseries Sentry users,
February 22, 2022
Tobii Game Hub v2.6
Tobii Game Hub is an add-on to our Tobii Eye Tracking software and enables eye tracking and head tracking functionality in a selection of games. Get started
Free software to help manage your screen-based eye tracker. This application helps set up the eye tracker with or without a screen, and it assists with user calibration, and troubleshooting. Depending on the eye tracker model, you can also use it to change settings and update the firmware.
Overview
Efficient configuration and setting
The Tobii Pro Eye Tracker Manager is a new configuration and setting utility that helps you manage your connected eye trackers. It is available free of charge and greatly increases efficiency for users of either the Tobii Pro SDK or Tobii Pro Lab.
The Pro Eye Tracker Manager allows researchers to easily configure the eye tracker when it's being used with a screen. This application is also used to configure the hardware in scene camera setups, where physical objects are used as stimuli. For users of the Mobile Testing Accessory the Tobii Pro Eye Tracker Manager offers a wizard and simplified process of setting up and configuring the eye tracker for testing of mobile devices.
If your eye tracker supports different sampling frequencies or eye tracking modes, these are changed using the Pro Eye Tracker Manager. The modes adapt the way the eye tracker collects gaze data.
For Tobii Pro Spectrum, Tobii Pro Fusion and Tobii Pro Nano, the Pro Eye Tracker Manager is used to update the eye tracker firmware. For other eye tracker models, firmware is updated using the Eye Tracker Browser tool.
You can always download the latest firmware version from the Learn & Support section.
Fast and reliable user calibration
The Pro Eye Tracker Manager offers an efficient option for users of the Pro SDK to conduct fast and reliable user calibrations. Prior to the calibration, a track status panel indicates the location of the participant's eyes within the track box.
If requested by our technical support team, a diagnostics data file can be created and exported for extensive troubleshooting.
One application, support for many eye trackers and platforms
The Pro Eye Tracker Manager is available for all screen-based eye trackers from Tobii Pro, so the same application works across the various models you may use for your research.
The application is available for Windows, Linux, and Mac systems. Support for the Tobii Pro X3-120 requires an EPU, if you are running it on a Mac or Linux.
Integration with your application
The Pro Eye Tracker Manager can be integrated with analytical applications built on the Pro SDK using call-in functions. The Pro SDK will still give researchers full flexibility, but common parts of the workflow of an eye tracking software application, such as configuring the display area, viewing the track status (a visualization of the head box), and conducting user calibration, can be easily be done with this tool, reducing the amount of coding needed. The integration, which is seamless, makes it easy and efficient for researchers to create their own applications.
Eye images can be viewed live in the Pro Eye Tracker Manager for models which support this functionality, currently these would be the Pro Spectrum and Pro Fusion products. This allows researchers to understand what is potentially affecting their eye tracking data.
Статья написана, прежде всего, для людей, которым трудно или невозможно работать на компьютере общепринятым способом: нажимая кнопки на клавиатуре и двигая мышь. Постараюсь рассказать, как была сделана система, которая позволяет управлять компьютером при помощи одного только взгляда. Сразу оговорюсь, что приведённое решение может плохо работать, если человек носит астигматические очки/очки с линзами разных диоптрий.
Итак, есть только глаза и компьютер. Ничего другого использовать нельзя, — ни педалей, ни поворота головы, ни преобразования речи в текст.
2. Выбор из существующих решений
- Готовые устройства существуют, но стоят удивительных денег; на территории России их никто не продаёт, не обслуживает; программное обеспечение не предусматривает работу с русским языком (в частности, нет клавиатуры с кириллицей).
- Есть программное обеспечение с открытым исходным кодом, нацеленное на создание самодельных систем. Испытания со своей камерой не дают приемлемого качества работы.
- Есть возможность купить устройства для разработчиков (developer edition) по сходной цене в компаниях Tobii и TheEyeTribe. Но по схеме «утром — деньги, вечером — стулья», то есть предзаказ можно оформить осенью 2013 года, а получить устройство — в начале 2014 года.
Для справки, в разделе «5. Другие способы, которые я не попробовал» привожу описание разных устройств, о которых я набрал информацию.
Неожиданно в середине декабря компания Tobii меняет концепцию, переходит на разработку нового устройства EyeX, а своё старое устройство REX рассылает разработчикам по цене, в три раза ниже первоначальной и прямо сейчас, уверяя, что написанный для REX код будет работать и с EyeX.
Долго думать не стал, заказал REX, на основе которого и сделана система.
[исправление от 22.08.2017] В настоящий момент появились более современные айтрекеры, которые также могут быть использованы (см. ниже)
3. Детали реализации
3.1. Аппаратная часть
3.1.1. Вариант первый: Tobii Eye Tracker 4C
Наиболее актуальная на лето 2017 года модель недорогого айтрекера.
- продаётся в России (около 11 500 рублей)
- не требует порта USB 3.0, достаточно USB 2.0
- меньше светит в глаза красными лампочками
- меньше грузит процессор
- провод USB жёстко заделан в корпусе, а не вываливается из mini-USB разъёма
- железо поновее
3.1.2. Вариант второй: Tobii EyeX
Предыдущая модель от Tobii. Сейчас ещё можно купить, но только если с деньгами совсем туго. Приготовьтесь глазеть на красные лампочки. Тем не менее, очень достойный аппарат для своего времени.
Внимание! Для работы EyeX требуется USB3! Если в вашем компьютере нет портов USB3, устройство работать не будет!
Заказать устройство можно на сайте Tobii.
Доставляют UPS'ом из Швеции.
3.1.3. Другие поддерживаемые устройства
Tobii REX – больше не продаётся, но была очень хорошая машинка с двумя камерами.
TheEyeTribe – больше не продаётся. Так себе железка. Хотя и сделала прорыв в области малобюджетных айтрекеров, заставив Tobii существенно снизить цены.
GazePoint GP3 – весьма дорогой прибор, в то же время уступающий более дешёвым приборам от Tobii.
3.2 Программное обеспечение
При попытке использовать программное обеспечение от других, более дорогих моделей Tobii, именуемое Tobii Gaze Interaction, ничего не получилось. Но понравилась идея, там реализованная.
Итак, программное обеспечение пришлось писать самому.
Была написана программа, которая позволяет имитировать глазами действия мышью: левый, правый, двойной щелчок, drag-and-drop, колесо прокрутки, а также набирать текст глазами на виртуальной клавиатуре.
Лучше, впрочем, один раз увидеть. Демонстрацию работы программы приглашаю посмотреть здесь.
Программа доступна для скачивания (в том числе в исходных кодах) на github: здесь.
Для скачивания нужно нажимать кнопку «RAW» — так принято на github.
Подробная инструкция по установке программы приведена вот здесь. Пусть вас не смущает, что там описывается только работа в режиме таблицы.
Программа пригодилась нескольким людям из разных стран, больным боковым амиотрофическим склерозом (БАС). Вот в этом клипе фонда «Милосердие» рассказана одна из таких историй.
4. Проблема работы в очках
Используемое устройство, так же как и большинство других аналогичных, использует для определения направления взгляда блики на зрачках, которые получаются от инфракрасной подсветки. К сожалению, очки добавляют паразитные блики.
Несмотря на то, что при настройке устройства под конкретного пользователя есть возможность указать, что человек носит очки, это не слишком помогает, устройство постоянно теряет положение зрачков.
Буду благодарен за проверенные рекомендации по устранению бликов на линзах очков в инфракрасном диапазоне.
5. Другие способы, которые я не попробовал
[устаревшая информация, это было актуально в 2013-2014 годах]
Сразу оговорюсь, что устройства используются не только для облегчения работы на компьютере для людей с ограниченными возможностями, но и, например, для исследования того, каким частям веб-страниц пользователи уделяют наибольшее внимание. Поэтому иногда за такие системы заламывают чудовищные деньги. Впрочем, и за устройства для инвалидов часто заламывают удивительные деньги.
5.1. Продукты коммерческих компаний
SMI — senso-motoric instruments
Их устройства можно посмотреть вот здесь.
Устройства можно купить в России (не буду давать ссылку), но когда я поинтересовался ценой самого дешёвого, мне озвучили цену в один миллион двести тысяч рублей. До свидания, SMI.
Tobii
Фирма давно выпускает продукты для людей с ограниченными возможностями. Даже Intel инвестировала в них несколько миллионов долларов. У них был альянс с фирмой Dell, когда планшет поставлялся с железкой для отслеживания глаз, причём техническую поддержку оказывала Dell.
На русском можно прочитать здесь.
На английском — на их сайте.
Много всего про эти устройства можно посмотреть на youtube.
Совсем недавно цены начинались с $4000. В настоящее время (январь 2014) цена на PCEye упала до $2000, но софт не русифицирован (Tobii Gaze Interaction).
EyeTech
Тоже давно работают в этой сфере, кажется с конца 90-х. Их устройства более аляповатые, но очень понравился софт, демонстрацию которого можно посмотреть вот здесь.
В то же время есть клип, на котором человек моргает глазами для нажатия на кнопку мыши — это не понравилось, обморгаешься. У Tobii такого не видел.
Есть три устройства, различающихся только размером, для разных мониторов, от ноутбука до 30 дюймов. Цена, которую мне удалось найти — $8700. Господа не скромничают.
Но то, как работает их софт, приметим.
DynaVox
Специализированное устройство, нельзя пользоваться стандартными компьютерными программами.
EyeGaze Edge (от LC Technologies)
Это основные игроки на рынке. Одна из маленьких новых амбициозных контор, которая сама не смогла довести до ума свой продукт, тем не менее не поленилась раскритиковать лидеров и привела вот такую табличку, из которой понятно, что сами они самые крутые (хотя продукта ещё нет, а демо-ролик показывает, что позиция зрачка всё время скачет). Но сравнение остальных весьма показательно. Хотя оборудование там приведено часто уже устаревшее, но можно оценить порядок цен и кто продвинулся дальше.
5.2. Проекты с открытым исходным кодом
К сожалению, ни одна из упомянутых ниже программ не дала достаточно точного определения направления взгляда на имеющемся оборудовании (видеокамера PC104E с режимом ночной съёмки и отдельно расположенная инфракрасная светодиодная подсветка). Тем не менее, возможно у кого-то заработает лучше.
GazeTracker
Рекомендую начать с того, что посмотреть клип на этой странице.
Проект развивался в университете ИТ Копенгагена. Развивался где-то до конца 2010 года, после чего впал в апатию. Тем не менее многими уважаем за свою открытость, некоммерциализованность и определённые достижения. Изначально был нацелен на возможность работы с оборудованием типа «сделай сам» (DIY — do it yourself). Многие самодельщики использовали этот софт со своими железками, часто обходившимися им в 20-30 долларов. См., например, вот это.
Текущая версия 2.0 beta, до этого был ряд стабильных версий, например 1.6, 1.8.
В инструкции по использованию упоминается, что сами разработчики использовали камеру Sony HDR-HC5 с одной или двумя лампами подсветки от той же Sony, модель HVL-IRM.
На сайте [относительно] живой форум, можно пообщаться если не с разработчиками, то с апологетами.
Haytham
Университет ИТ в городе Копенгагене не забросил работы после того, как команда GazeTracker свалила. Теперь у них есть куда более красивая система:
Это не одна программа, а сервер, раздающий положение зрачка клиентам по сети. Один из клиентов — это программа Haytham_Monitor, которая управляет курсором мыши. Если бы хорошо заработала на моём железе, не было бы нужды ничего делать. Удачи ребятам.
Управление компьютером при помощи клавиатуры и мыши старо, как мир. Конечно, все это относительно, но технологии меняются очень быстро, а вот способ управления остается неизменным. Пусть клавиатура и мышь меняют свою функциональность, меняется дизайн устройство ввода, суть дела это не меняет.
Сейчас некоторые компании стараются создать нечто качественно новое. Так, широко известна система Leap Motion, у которой, говорят, есть немало недостатков, несмотря на все достоинства. Здесь управление производится при помощи жестов. Сейчас появилась и другая система — Eye Tribe Tracker. Здесь управление производится при помощи взгляда, без необходимости совершать какие-либо телодвижения.
Насколько это доступно?
Сразу отмечу, что большинство таких систем только разрабатываются, а Eye Tribe Tracker — не концептуальный проект, а коммерческая система. Причем работает девайс и ПО Eye Tribe Tracker как на ПК и ноутбуках, так и на мобильных устройствах.
Доступна система уже для всех, купить ее можно без особых проблем.
А работает как?
Аппаратный модуль-трекер подключается к компьютеру или планшету, к порту USB 3.0. Затем устанавливается ПО, после чего со всем этим можно уже работать. Система улавливает, куда смотрит пользователь, и преобразовывает движения глаза в команды управления компьютерным устройством.
Еще положительным моментом является то, что Eye Tribe Tracker не требует подвода дополнительного питания, а значит, не требуется куча проводов, работе ничего не мешает.
За улавливание направления взгляда пользователя отвечает датчик с системой инфракрасного излучения. Затем эти данные обрабатываются специальным алгоритмом. Точность системы очень велика, учитываются малейшие движения зрачков, работа возможна и при слабом освещении. Правда, авторы ПО рекомендуют работать со своей системой внутри помещения без попадания прямых солнечных лучей на датчик.
А что для разработчиков?
Технические характеристики:
Вывод: систему можно использовать в качестве дополнительного способа управления. При этом Eye Tribe Tracker подходит как для работы с ПК, так и для работы с планшетом (вероятно, с планшетом даже удобнее, хотя и не факт). Все это просто устанавливать, и еще проще — использовать.
Читайте также: