Microsoft подала патентну заявку на технологію, яка дозволить штучному інтелекту змінювати слова людей під час прямих трансляцій і водночас коригувати рухи їхніх губ. Система зможе перекладати мовлення, прибирати небажані висловлювання та виправляти помилки майже в реальному часі. Про це повідомляє Patentlyze з посиланням на патентну заявку Microsoft.
Згідно з патентною заявкою, ШІ аналізуватиме аудіо та відео, визначатиме слова, які потрібно змінити, і замінюватиме їх відповідно до налаштувань глядача. Одночасно система редагуватиме зображення обличчя та рухи губ людини, щоб вони відповідали новому мовленню. Для плавного переходу технологія також змінюватиме короткі фрагменти відео та звуку до і після замінених слів.
Microsoft описує кілька можливих способів використання технології. Серед них — переклад прямих трансляцій різними мовами, видалення слів-паразитів, виправлення неправильної вимови та усунення запинок. Система також зможе замінювати розмовні вислови, діалектні слова, образливі фрази або неточні формулювання. У деяких випадках ШІ шукатиме слова для заміни в інтернеті.
Окрема особливість технології — персоналізація мовлення відповідно до профілю глядача. Це означає, що різні люди потенційно зможуть переглядати одну трансляцію, але чути різні версії висловлювань спікера залежно від власних налаштувань.
Технологію пропонують використовувати під час лекцій, презентацій, спортивних трансляцій, телевізійних шоу, концертів та інших прямих ефірів. У патентній заявці Microsoft також передбачає можливість зберігати оригінальні аудіо та відео для подальшої перевірки.
Водночас така система порушує питання достовірності інформації. Якщо ШІ змінюватиме слова людини під час трансляції, глядачі можуть не знати, які висловлювання належать спікеру, а які згенерувала система. Це створює ризики для новинних трансляцій, інтерв’ю та інших форматів, у яких важлива точність цитування.
Microsoft подала заявку 29 квітня 2025 року, а 29 жовтня 2026 року її опублікували під номером US20260341309A1. Наразі йдеться про патентну заявку, а не про готовий продукт. Компанія не повідомила, чи планує впроваджувати технологію у свої сервіси та коли вона може стати доступною.
Джерело: Futurism
