waves head tracker что это
Waves Nx: система виртуального 3D-звука для накладных наушников от Waves Audio
Компания Waves Audio представила девайс Waves Nx, который способен превратить любые наушники в источник трехмерного звука с помощью датчика движения головы и сопряженного с ним приложения.
Датчик движения, закрепленный на оголовье наушников (девайс работает только с мониторными/накладными моделями), будет отслеживать движения головы в пространстве и настраивать звук согласно ее положению.
Использовать Waves Nx можно как с мобильными устройствами, так и с ПК: приложение доступно для обеих платформ. Веб-камера также позволит следить за положением головы.
Инженеры Waves Audio старались добиться как можно более реалистичного звучания. В наушниках в правое ухо поступает то, что играет в правом канале, в левое — то, что в левом. Кстати, в реальном мире звуки поступают через оба уха, где бы ни находился источник, просто то ухо, которое находится дальше от источника, получает сигнал с задержкой. Именно эта задержка позволяет создать объемную звуковую картину.
Не забыли разработчики и об отраженных волнах: как сказано на странице девайса на Kickstarter, «мозг использует информацию о различных уровнях громкости и времени поступления сигнала, векторе распространения этих отраженных волн, и создает трехмерное звуковое пространство». В природе даже легкий кивок головы меняет восприятие звука. Мозг считывает разницу между звучанием до движения и звучанием после, соотносит ее с кивком и определяет местоположение источника звука в пространстве. Тогда как в традиционных наушниках положение источника не зависит от положения слушателя.
Сейчас Waves Nx можно приобрести на Kickstarter за 69 долларов (после окончания кампании девайс с приложением планируют продавать за 99 долларов), а за 499 долларов Waves Audio предлагает комплект из датчика, приложения и наушников Audeze Sine. Из запланированных 200 000 собрано 88 000, но до конца кампании осталось еще 34 дня. Рассылать девайсы спонсорам в случае успеха кампании начнут в сентябре этого года.
Waves Audio представляет Nx Head Tracker в рамках кампании Kickstarter
Ранее в этом году компания Waves Audio представила Nx, революционную технологию программного обеспечения, обеспечивающую возможность панорамной аудиовизуализации посредством стереонаушников. Инновация открывает двери для её широкого применения в виртуальной реальности, аугментированной реальности, 3D-комбинировании и многих других сферах. Waves Nx обеспечивает пользователям в наушниках ту же естественную глубину звучания и отражения звука с панорамным эффектом, что и в физическом помещении. Благодаря Waves Nx, музыка, фильмы и игры начинают звучать поистине революционным образом, переходя в новое измерение 3D-реальности с эффектом погружения — и все это происходит внутри наушников пользователя. Компания Waves приняла решение сделать Nx центром своей научно-исследовательской деятельности для дальнейшего развития технологии. Теперь Waves обращается к всему сообществу любителей качественного звука с призывом принять участие в этом процессе посредством кампании «Kickstarter», запуск которой состоялся 22 июня. Kickstarter открывает перед истинными энтузиастами возможность раньше других приложить руку к этому поистине революционному инструментарию.
Waves является лауреатом престижной технологической премии Technical GRAMMY® и ведущим мировым разработчиком технологий аудио-DSP. На протяжении вот уже более двух десятилетий компания неизменно остаётся пионером в создании алгоритмов обработки психоакустических сигналов с использованием передовых знаний о человеческом слухе и восприятии для радиального улучшения качества воспринимаемого звука.
Восприятие объёмного звука представляет собой чрезвычайно сложное явление. Оно объединяет в себе взаимодействие между акустическими волнами и помещением или пространством, взаимосвязь между звуковыми волнами и физическим движением головы и ушей, реакцию среднего и внутреннего уха и звукового нерва, и, наконец, восприятие и интерпретацию акустического «ландшафта» нашим мозгом.
В то же время, восприятие звука в наушниках — процесс абсолютно иной. Технология Waves Nx ликвидирует этот разрыв, воссоздавая в наушниках те же звуковые ориентиры, что наш слух улавливает в реальном мире. Одним из секретов этой уникальной инновации является отслеживание положения головы и позиционирование звука в наушниках соответственно тому, как пользователь слышал бы его в реальности. Waves Nx определяет движения головы пользователя, улавливая мельчайшие нюансы для создания реального, динамического и постоянно изменяющегося сенсорного ощущения, — путем надлежащего позиционирования звука в левом и правом наушниках для стимуляции движения в трёхмерном аудиопространстве.
Не так давно, компания Waves c успехом осуществила запуск первого продукта в семействе Nx — плагина Nx Virtual Mix Room. Эта разработка представляет собой инструмент для «виртуального мониторинга», воссоздающий в микрофонах реальную акустику высококлассного микшерного пульта, тем самым позволяя профессионалам отрасли принимать более точные решения относительно микширования и записи при помощи наушников. С момента запуска плагин Nx Virtual Mix Room получил массу хвалебных отзывов. Следующий инструмент линейки Nx, готовящийся к выпуску на рынок (его релиз ожидается в сентябре этого года), — это Nx Head Tracker, небольшое по размеру устройство Bluetooth с возможностью крепления на любой паре наушников для отслеживания движений головы пользователя и передачи данных программному обеспечению Nx. Nx Head Tracker может использоваться совместно с плагином Nx Virtual Mix Room или с приложением Waves Nx, которое будет выпущено в ближайшее время и позволит всем пользователям испытать настоящее качество 3D-аудио на своих компьютерах и мобильных устройствах. С помощью сообщества любителей качественного звука, привлекаемого посредством кампании Kickstarter, Waves планирует расширить свою деятельность по разработке Nx с целью усиления сенсорных ощущений и изменения самого способа, которым мы слышим мир.
Waves Nx 4+
Waves Inc.
Розроблено для iPhone
Знімки екрана iPhone
Waves Nx is a ground breaking audio technology that finally bridges the gap between speakers and headphones. With the Waves Nx App and the Waves Nx Head Tracker device you can use any headphones and listen to all of your content in truly immersive 3D sound, everywhere you go!
The perception of spatial sound in the real world is a complex phenomenon. It combines the interactions between the acoustic sound waves and the room or space, the interaction with our head and ears, the reaction of our middle and inner ear and the audio nerve, and finally our brain’s cognition and interpretation of the acoustic scene. The perception of sound over headphones is a completely different experience. If we take listening to stereo headphones vs. listening to speakers as our example, there are several major differences:
Waves Nx uses head tracking and scientific models of the way our brains and ears perceive audio to create an amazing sounding fully immersive 3D audio experience that turns any pair of headphones into a high quality Speaker Setup, it not only models the speakers, it models the entire room!
The Waves Nx Head Tracker can also be used with the Waves Nx applications for Windows and Mac and even with the Waves Nx – Virtual Mix Room plug-in for professional audio workstations, check www.waves.com/nx for more information!
Currently Waves Nx App only supports playing back local media files, check back soon for updates adding support to popular streaming services!
Head Tracker’ы. Подключение, использование и все что с ними связано
Опции темы
Посмотрел. но все же уточню, верно?
Тот же вопрос.. собрал DIY Headtracker, через программку работает хорошо.
А в at9 никак не могу увидеть сигнала.
Здравствуйте! Прошу совета. Хочу обзавестись хедтрекером. До этого никогда с такими устройствами не общался. Видел в этой ветке рекомендацию на Quanum с хоббикинга, который сделан и DIY хедтрекера с rcgroups. Но, почему-то, хоббикинг из продажи его изъял. Нет даже следов на самом сайте. И на сайте Quanum молчок.
Пожалуйста, порекомендуйте хедтрекер современный, чтобы не плыл, не портил мне нервы.
Дак DIY хедтрекер и сделайте.
10 минут паять, ещё 5 калибровать.
хед трекер можно подключить к любой аппе? и только через тренерский разъем?
Все которые знаю через него, или через воткнутый в него ретранслятор.
Что интересного? Обычный передатчик и приёмник. Более интересно срастить код трекера и модуля передатчика и обойтись одной атмегой. Я попробовал, но по быстрому не получилось, забросил.
Не обязательно. В коде трекера есть возможность замены каналов. Т.е. можно его включить между пультом и модулем передатчика. Он заменит значения последних каналов на те, которые генерирует он.
Лично эту возможность не проверял, было не нужно.
Только кнопку сброса лучше на пульт вынести.
Я себе завёл через футабовский разъём на тренерский тумблер (который подпружинен), там как раз лишний нормально разомкнутый контакт висит. Если есть только JR-ный разъём, то придётся колхозить.
Чуть раньше писал уже.
Нормально работает? Кнопка центра на пульте?
Да, с PCB антеннами, приёмная часть встроена в пульт. С пульта миксами можно включить\отключить трекер. Кнопка на шлеме выведена, требуется обычно один раз, после того как наденешь.
народ подскажите а как кнопку калибровки приделать. к опен трекеру?
Пытаюсь подключить хедтрекер очков боскам к turnigy tgy-i6.
На турниге 9х через тренерский разъем и вывод питания от передатчиковского акка очки и их хедтрекер работают безукоризненно, причем внешнего питания на очки не надо.
Но. i6 вдвое легче 9х, а шея не казенная.
Пока ничего не получается, 5 и 6 каналы или слушаются крутилок передатчика или уходят в крайнее положение, если фишку крутилок из платы в передатчике выдернуть.
Может быть кто уже проходил? По граблям ходить что то не хочется.
Добрый день.
Есть аппаратура Devo10 (в ней присутсвует тренерский разъем). Посоветуйте пожалуйста очки с ХэдТрекером?
Лучше сначала выбрать подходящие именно вам очки, а уже потом думать есть ли в них место под фабричный хедтрекер, или стоит сделать свой, по лучше.
Тема с очками тут: Мучительный выбор очков для фпв.
Сначала выставляете в очках каналы, на которые вы повесите ХТ, затем в передатчике отдаёте эти каналы ученику, всё.
Но, поверьте, потраченное на это время, будет жалко, всё равно придётся делать самодельный
Сами очки, по качеству картинки, намного лучше многих акул и т.д. а вот ХТ редкостное га. о, впрочем, как и на многих других очках.
Инерционный трекер на базе Arduino и GY-85
Привет Хабр. Head tracker, иногда его же называют инерционный трекер — устройство, которое отслеживает движение головы в пространстве, то есть в трёх осях — X,Y,Z.
Сегодня я вам поведаю, как можно двигать курсор мыши при помощи движений головы, хотя, всё не ограничивается одной только репой, можно использовать и любую другую подвижную часть тела, как, например руку.
— Arduino, лучшее решение в данном случае это Arduino Nano V3(стоит недорого, относительно небольшие размеры), обязательно чтобы плата была с микроконтроллером ATmega328 на борту. Так же было бы не плохо, чтобы в ардуинке был USB to UART преобразователь на чипе CH340:
Дабы не возникало проблем с нехваткой памяти у микроконтроллера или драйверами, как например с ардуинками на базе чипов FT232RL.
Код, как видно из скрина выше, занимает около 16-ти килобайт памяти микроконтроллера, чего точно не хватит, если ардуинка будет на базе ATmega168, хотя конечно можно и вырезать не совсем нужный функционал из прошивки и таким образом попытаться уместить. Правда, зачем?
Драйвера к чипу CH340G ищите в первых ссылках по запросу «ch340g driver» в гугле, или же в архиве к данной статье.
— Датчик GY-85, это трех осевой гироскоп MPU3200, акселерометр ADXL345 и магнитометр HMC5883L на одной плате. Этого более чем достаточно чтобы ориентироваться в пространстве в трёх осях.
Он лучше всего себя показал, не требует предварительных калибровок, подключили, прошили ардуинку и работает. Хотя AHRS(Курсовертикаль) прошивка и позволяет калибровку, но это отдельная тема, которая, как я считаю, раскрыта более чем полностью на форуме по игре WarThunder;
— Разная мелочь — провода, паяльник (без него не обойтись, потому, как Arduino Nano и GY-85 приходят из Китая в распаянном состоянии),USB удлинитель, Mini-USB кабель для Arduino Nano V3.
Сборка Head Tracker’а:
Подключаем Arduino и GY-85, в случае Arduino Nano это будет так:
Подаём питание на ардуино — на датчике должен засветился светодиод.
В случае Head Tracker’а датчик идеально прикрепить на ободок наушников, вот так по «криворукому» это сделал я:
Уверен, что вы это сделаете куда аккуратнее, чем меня.
Arduino плату прикрутил обычным проводом от витой пары, дабы ничего не закоротить на плате изоляцию с провода не снимал, всё нормально держится, если её постоянно не теребить.
По поводу не теребить плату, я просто скрутил USB кабель и провод наушника тем же проводком от витой пары.
Так же сначала хотел поступить и с датчиком, но путём проб и ошибок выяснил, что это не вариант, я напишу ниже почему. Просто связал всё ниткой, получилось вот так:
Под датчик, как и под ардуинку, подложил кусочек вспененного полиэтилена, чтобы они не царапали мне наушники, да и так лучше держится всё это.
Правда тут есть кое-какие моменты, важно датчик располагать таким образом, чтобы стрелка Y указывала на монитор.
Так же надо датчик держать подальше от металлических предметов, рекомендуемое расстояние 5-10 см. В противном случае могут быть искажение показаний, глюки в работе датчика. Это актуально для тех, у кого металлический ободок наушников. Хотя искажать показания может не только металл, но и сама ардуинка или даже провода, что и было продемонстрировано на видео, так что постарайтесь отдалить всё это от датчика хотя бы на расстояние 5-10 см.
Самое простое решение с металлическим ободком наушников — губка для мытья посуды:
Так как у меня ободок пластиковый (было проверенно магнитом), я забил на всё это.
Прошивка:
Если у вас всё ещё не установлена последняя версия Arduino IDE — качаем и устанавливаем. На момент написания статьи это 1.6.8.
В нашем инерционном трекере будем использовать кастомную прошивку проекта AHRS Firmware for the SparkFun 9DOF Razor IMU and SparkFun 9DOF Sensor Stick(архив со всем необходимым в низу статьи). В Arduino IDE открываем файл Razor_AHRS.ino, который лежит в архиве по пути DIY headtracker\RazorAHRS_FaceTrack\Razor_AHRS:
И загружаем прошивку в ардуино:
OpenTrack — это бесплатная программа с открытым исходным кодом, предназначена для отслеживания движений головы пользователя и их преобразование в координаты. Умеет работать с разными устройствами ввода, включая ИК-рамку и Oculus Rift или же со смартфонами.
На видео, чувак играет в культовую игру Elite Dangerous, используя свой Android смартфон в качестве мыши:
Это позволило задействовать обе руки для игрового процесса. Согласитесь, выглядит очень круто. Правда мне в этой реализации не нравится несколько нюансов, а именно, смартфон относительно громоздкий и тяжёлый, GY-85 явно занимает места и весит меньше, к тому же от него не долбит в голову излучение от WiFi передатчика смартфона.
Но давайте вернёмся к нашим баранам Arduino и GY-85. Для начала нужно скачать и установить последнюю версию программы(на данный момент это opentrack-2.3 rc21p11), запускаем:
Теперь нам надо настроить программу — в поле «Tracker» выбираем «Hatire Arduino» и нажимаем кнопку «. » и мы увидим что-то типа этого:
Здесь надо изменить «Serial port» на COM порт нашей ардуинки, в моём случае это COM42. Дальше переходим во вкладку «Command», прописываем там, в полях «Init» и «Start» 1000, затем выставляем «BaudRate» 115200, и напоследок жмём «Save» и «OK».
Дальше в главном окне программы нажимаем кнопку «Start», начинаем вращать датчик в разных осях и следить за осьминогом. Скорее всего, движения датчика и осьминога будут отличаться, по крайней мере, в моём случае так получилось, не останавливая трекинг жмём кнопку «. » в поле «Tracker». Здесь нам нужно настроить «Axis Configuration» таким образом, чтобы движения датчика совпадали с движениями осьминога в программе — выставляем для «Yaw», «Pich» и «Roll» значения RotX/RotY/RotZ в нужной последовательности, в этом нам поможет вот эта картинка:
Как получилось у меня, можете увидеть на скрине настроек «Hatire Arduino» что выше. Ось «Roll» пришлось инвертировать, потому что осьминог крутился в обратные стороны.
Так же программа позволяет настраивать чувствительность для каждой из осей — кнопка «Mapping» в главном окне программы:
Правой кнопкой мыши можно ставить и перемещать точки, левая кнопка мыши удаляет точки, можно ставить несколько точек, чтобы устранить нелинейность в показании датчика, если таковые имеются. У меня же всё оси настроены вот так:
Вкладка «Filter» в головном окне программы позволяет изменять тип фильтра, или же вообще его отключить, в этом случае показания будут очень нестабильными и резкими. У меня тип фильтра стоит «Accela» вот с такими настройками:
При желании можете поиграться с настройками.
Переходим к настройке эмуляции мыши, для этого во вкладке «Protocol» выбираем «mouse emulation» и нажимаем кнопку «. «, там надо выставить «Yaw» и «Pich» для осей X, Y:
Нажимаем кнопку старт и вуаля — профилактика шейного остеохондроза. И напоследок добавлю, что перед нажатием кнопки старт надо ровно установить голову относительно монитора, потому что датчик в этот момент производит калибровку.
Наверняка у многих появится вопрос, какой смысл крутить голову вокруг монитора если тот стоит на месте? Как было мною сказано на видео, это всего лишь начало темы VR на на моём YouTube канале.