Google ai тепер може читати по губах краще, ніж люди

Відео: ЯК НАВЧИТИСЯ ЧИТАТИ ПО РОТА?

Відео: Тепер особливим учням не потрібно читати по губах викладачів

Інженери компанії Google AI працювали спільно з дослідниками з Оксфордського університету для створення найбільш точною для читання по губах на сьогоднішній день програми. Переглядаючи тисячі годин відео від Бі-бі-сі, ученим вдалося створити нейронну мережу в AI, яка здатна читати по губах, з 46.8% точністю. У порівнянні з професійною людиною, читаючою по губах, програма перевершує всі можливості фахівця з великою перевагою.

Відео: ТИХИЙ ВИКЛИК / ЧИТАТИ ПО РОТА / THE WHISPER CHALLENGE

Програмне забезпечення грунтується на роботі, опублікованій раніше в цьому місяці інший науковою групою в Оксфорді. Використовуючи подібні методи, ці вчені створили програмне забезпечення, яке вміло читати по губах з 93.4% точністю в деяких тестах, в порівнянні з точністю людини 52.3%. Слід зазначити, що ці тести проводилися з використанням спеціально записаних відео людей, які говорять ясно, шаблонні фрази, що в житті не завжди відбувається так. Проте, програмне забезпечення було протестовано на спонтанної живої мови, і показало вельми гідні результати.

Більше 5000 годин записів були використані для програмного забезпечення Google. Відеозаписи включили, приблизно 17 500 унікальних слів.

Відео: Прикол потрібно читати по губах

Google говорить про те, що програмне забезпечення може бути використане для різних додатків, від аннотирования німих фільмів до розпізнавання мови з камер відеоспостереження. Воно також може бути використано для контролю цифрових помічників. Дослідники стверджують, що є велика різниця між читанням по губах чіткої картинки по телевізору і зернистої камерою спостереження.

Технологія, зрозуміло, вдосконалюється, тому, цілком можливо, що в майбутньому не залишиться перешкод для Google в 100% розпізнаванні мови по губах.