"Русский переплет" зарегистрирован как СМИ.
Свидетельство о регистрации в Министерстве печати РФ: Эл. #77-4362 от
5 февраля 2001 года. При полном или частичном использовании
материалов ссылка на www.pereplet.ru обязательна.
|
24.06.2018 18:14 |
Для создания квантового компьютера совместят темпоральные кристаллы и майорановские фермионы
Создав из темпорального кристалла частицу, являющуюся собственной античастицей, физики собираются сделать квантовый компьютер, который будет намного надежнее и . . . |
23.06.2018 22:34 |
В России изобрели электроракетный двигатель на йоде
В ракетно-космической корпорации «Энергия» назвали время начала испытаний российской разработки. Наземные испытания электроракетного двигателя, который . . . |
23.06.2018 22:14 |
Источник HESS J1943+213 оказался экстремальным блазаром
Международная группа астрономов провела многоволновые наблюдения источника HESS J1943+213 и обнаружила доказательства в пользу гипотезы о том, что этот гамма-источник . . . |
23.06.2018 22:09 |
О неподтвержденных околоземных объектах
Околоземные объекты (Near-Earth objects, NEO) являются небольшими небесными телами Солнечной системы, орбиты которых таковы, что эти тела иногда оказываются слишком близко . . . |
23.06.2018 22:02 |
Парадоксы Вселенной: масса продолжает удивлять физиков
Масса — одно из основополагающих и в то же время загадочных понятий в науке. В мире элементарных частиц ее не отделить от энергии. Она ненулевая даже у нейтрино, а . . . |
22.06.2018 22:35 |
Россия включается в космическую гонку
В Российской Федерации планируют в ближайшие годы составить серьёзную конкуренцию американской частной комической компании Space X на рынке дешёвых космических . . . |
22.06.2018 22:30 |
С секстантом в космос
Американское космическое агентство решило научить астронавтов на борту Международной космической станции (МКС) использовать секстанты — старинные . . . |
22.06.2018 22:24 |
«Красные самородки» стали настоящим галактическим Клондайком для астрономов
Примерно десятилетие назад астрономы открыли популяцию небольших, но массивных галактик под названием «красные самородки» (red nuggets). В новом исследовании, . . . |
22.06.2018 17:32 |
Почти 80 экзопланет-кандидатов идентифицированы в рекордные сроки
Ученые проанализировали данные, собранные при помощи миссии К2, представляющей собой продолжение миссии легендарного космического телескопа НАСА Kepler («Кеплер»), . . . |
22.06.2018 17:27 |
Ученые расшифровали «розеттский камень» активных ядер галактик
Галактика, в центре которой лежит как минимум одна сверхмассивная черная дыра – под названием OJ 287 – вызывала множество вопросов у астрономов в прошлом . . . |
22.06.2018 17:23 |
Британские физики объяснили, почему мы не найдем инопланетян
Британские физики нашли новое, более логичное объяснение тому, почему мы до сих пор не нашли инопланетян и не найдем их, и опубликовали его в статье, направленной к . . . |
22.06.2018 17:12 |
Астрономы напрямую увидели недостающую барионную материю Вселенной
Группа астрономов под руководством Фабрицио Никастро показала, что в спектре излучения лацертиды 1ES 1553+113 возникают линии сильно ионизированного кислорода, . . . |
22.06.2018 17:06 |
В небе над Липецком сгорел суперболид
Утром 21 июня в небе жители пяти областей Центральной России заметили яркий объект, который вспыхнул, а затем сгорел в атмосфере. Астрономы предполагают, что это . . . |
22.06.2018 17:03 |
Нейросеть Facebook предсказала движения музыкантов по аудиозаписи Разработчики из Facebook представили нейросеть, которая умеет предсказывать движения рук музыканта по аудиозаписи. Система слушает музыкальную композицию и одновременно проецирует в дополненной реальности аватара, играющего мелодию. Программисты, чья статья была представлена на конференции Conference on Computer Vision and Pattern Recognition (CVPR), считают, что разработка может быть полезна для обучения игре на музыкальных инструментах.
Сегодня для самостоятельного обучение игре на различных инструментах используются разные приложения и видеоуроки. Однако они, как правило, позволяют рассмотреть движения музыканта лишь с определенного ракурса. Перенос учителя в виртуальную или дополненную реальность может быть удобен для пользователей, так как он позволит им полностью увидеть правильную постановку рук при игре на инструменте.
Группа разработчиков под руководством Эли Шлицермана (Eli Shlizerman) решила создать виртуальный аватар, который бы мог имитировать движения рук пианиста или скрипача, основываясь на аудиозаписи. Для этого они использовали LSTM-нейросеть. Это разновидность архитектуры рекуррентных нейросетей, где каждый слой имеет обратную связь с другими слоями и обладает своеобразной памятью, позволяющей учиться на своих ошибках и усваивать долгосрочные связи (подробнее об LSTM-нейросетях можно почитать в нашем материале «Самая человеческая задача»).
В качестве данных для обучения программисты использовали публично доступные видеозаписи, на которых профессионалы играют на музыкальных инструментах без аккомпанемента. Для пианино исследователям удалось собрать 3,6 часа материала, для скрипки — 4,4 часа. На каждом кадре видеозаписи нейросеть определяла, где находятся руки и пальцы исполнителя и строила скелетную модель. Она сопоставляла эти данные с мел-частотным кепстральными коэффициентами, которые используются в качестве характеристики аудиосигналов. Важно заметить, что исследователи не использовали midi-файлы, поэтому нейросеть не обучалась зависимостям между нотами и, например, конкретными клавишами пианино.
В результате программа научилась определять взаимосвязь между характеристиками звука и движениями рук музыканта и строить предсказания. Созданную нейросетью скелетную модель разработчики использовали для создания аватара в дополненной реальности. Итог их работы можно увидеть на видео ниже:
На видеоролике хорошо видно, что аватар скорее подражает музыкантам, чем полноценно повторяет их движения. Тем не менее, движения виртуального персонажа выглядят вполне естественно. По мнению создателей, в будущем подобная технология может найти множество применений. Например, аватар может быть использован для обучения — в то время как он будет копировать движения профессионала в виртуальной реальности, пользователь сможет обойти его с разных сторон и понаблюдать за техникой игры.
Сегодня виртуальные аватары все чаще используются для решения различных задач. Например, с их помощью предлагают опрашивать свидетелей преступления, лечить больных шизофренией и парализованных людей.
По информации https://nplus1.ru/news/2018/06/22/facebook-music
|
22.06.2018 16:58 |
Общую теорию относительности подтвердили на галактических масштабах
Астрономы из Великобритании и Германии подтвердили, что Общая теория относительности хорошо работает не только в масштабах Солнечной системы, но и на расстояниях . . . |
22.06.2018 16:27 |
Зонд «Хаябуса-2» увидел 150-метровую скалу и валуны на астероиде Рюгу
Космический аппарат «Хаябуса-2» получил новые снимки астероида Рюгу, на которые стали видны группы валунов на его поверхности, а также крупная скала в северной . . . |
22.06.2018 15:27 |
Беспилотный автомобиль «Яндекса» впервые проехал по длинному маршруту
Беспилотный автомобиль, разрабатываемый российской компанией «Яндекс», впервые в автономном режиме проехал по длинному маршруту. Согласно сообщению компании, . . . |
22.06.2018 15:20 |
В 2025 году Норвегия начнёт переход на электрические самолёты для пассажирских перевозок
В Норвегии провели тестирование двухместного электрического самолёта Alpha Electro G2, построенного компанией Pipistrel на заводе в Словении. Министр транспорта Кетил . . . |
22.06.2018 15:13 |
В Intel создали самый маленький в мире квантовый чип
Уже практически не остается сомнений в том, что в будущем квантовые компьютеры если и не заменят привычные нам вычислительные машины, то уж точно сильно их . . . |
21.06.2018 17:49 |
Лазер из темной материи
В прошлом году была выдвинута теория, связывающая воедино черные дыры, темную материю и понятие гравитации. Частицами темной материи в новой теории, которая . . . |