Google I/O 2023: представлено універсального перекладача відео, який підлаштовується під рухи губ

Компанія Google на заході для розробників I/O показала багато новинок, переважно вони пов'язані зі штучним інтелектом.

Компанія переносить свою технологію ШІ в Play Store, допоможе генерувати особисті повідомлення, додає кілька нових функцій безпеки, призначених для кращого захисту користувачів продуктів і послуг Google (серед них — захист від спаму для Google Drive та покращення видалення історії пошуку в Maps), а також новий вигляд сторінки результатів пошуку Google.

Також компанія інтегрує ШІ в такі продукти як Google Search і Workspace (Docs і Gmail), а Google Bard скасовує список очікування в 180 країнах і дасть змогу експортувати дані з Gmail і Документи.

Universal Translator

Google розробив модель перекладу наступного покоління, яка дозволяє перекладати відео різними мовами і коригувати рух губ. При цьому зберігається стиль і тон мови. Ця передова система може не тільки перекладати усне мовлення, зняте на відео, але й синхронізувати рухи губ і жести того, хто говорить з перекладеною мовою іншою мовою. 

Google Perspectives

Це новий розділ на сторінці результатів пошуку, який має полегшити пошук думок низки журналістів й експертів на різні теми в інтернеті.

Спершу Google Perspectives з’явилися у вигляді каруселі в результатах пошуку, але тепер їх інтегрували в інтерфейс окремо. Користувачі побачать новий розділ у верхній частині результатів пошуку, поруч із «Новинами», «Зображеннями» та «Покупками». Вони потраплять на стрічку, схожу на Pinterest, де будуть відео з YouTube, коментарі з Reddit, Stack Overflow та інших сайтів, записи з особистих блогів та інші речі, які система ранжування Google вважає реальними поглядами реальних людей.

У серпні 2022 року Google оголосив про зміни у своїй системі ранжування, які мали б знизити рейтинг неоригінального або некорисного контенту. Нещодавно Google почав вимірювати якість своєї пошукової видачі на основі авторитетності й експертності контенту та його авторів (чинник EEAT).

Функцію запустять в найближчі тижні.

Sidekick і Duet AI

Нова панель Sidekick від Google розташована на бічній панелі в Google Документах. Вона постійно читає та обробляє документ, поки ви пишете, надаючи контекстні пропозиції, які стосуються саме того, що ви пишете.

Користувачі можуть скористатися цією підказкою, а потім об’єднати її з документом, щоб додатиконтекст для кращого розуміння результату.

Користувачі також можуть перевірити орфографію та граматику в Документах Google, а потім прийняти або проігнорувати виправлення. Щоб скористатися функцією, у верхньому лівому куті потрібно натиснути «Перевірка орфографії».

Sidekick також може пропонувати зображення, створені ШІ на основі того, що він бачить у документі, щоб допомогти проілюструвати написану історію. Усе це об’єднали в «Duet AI»  — набір інтеграцій Workplace. Вони також включають генерацію зображень для Slides, автоматичне створення резюме зустрічей у Meet тощо.

Однак, щоб отримати доступ до цих нових інструментів, потрібно зареєструватися в Workspace Labs і приєднатися до списку очікування.

Google Photos

Дві нові функції в Пошуку Google допоможуть людям краще зрозуміти зміст і контекст зображень, які користувачі переглядають у результатах пошуку. Це додаткова інформація про саме зображення в розділі «Про це зображення», а також нова розмітка в самому файлі, яка дає змогу позначати зображення як «створені штучним інтелектом» (також Google планує запитувати у власників сайтів, чи хочуть вони ділитися контентом з ШІ). Усі згенеровані ШІ зображення від Google міститимуть метадані.

Компанія включатиме інформацію про те, коли зображення та подібні їм вперше проіндексовані Google, де зображення могло вперше з’явитися в інтернеті та де ще в мережі є це зображення. Останнє може також включати вебсайти новинних медіа або сайти перевірки фактів, де потенційно можна більше дізнатися про відповідне зображення. Зокрема про те, як воно могло використовуватися в кампаніях дезінформації.

Компанія заявляє, що це посилить візуальну грамотність і допоможе людям швидше оцінити, чи є зображення реальним, чи створеним штучним інтелектом. Однак ці інструменти самі по собі навряд чи розв’яжуть ширшу проблему зображень, створених ШІ, оскільки значна частина процесів відбувається поза стінами Google, де творці не грають за правилами.

Також користувачі зможуть сортувати свої фото за ключовим запитом і редагувати фото за допомогою Magic Editor.

Search Generative Experience (SGE)

Google Search впроваджує розмовний режим. Це допоможе звузити результати за допомогою природної мови. Пошук пропонуватиме наступні кроки під час проведення пошуку, а також надаватиме покликання, за якими можна заглибитися в тему. 

Коли користувач натискає на запропонований наступний крок, пошукова система переходить у діалоговий режим, де ви можете запитати Google більше про тему, яку вивчаєте. Контекст переноситиметься від запитання до запитання.

У Google зазначають, що раніше, якщо користувач хотів дізнатися, «що краще для сім’ї з дітьми до 3 років і собакою, каньйон Брайс або арки», довелося б розбити цей запит на більш дрібні, відсортувати купу інформації та скласти все докупи самостійно. Завдяки генеративному ШІ пошук зможе зрозуміти цей запит. Пошук не тільки докладніше розповість про маршрут або ціль подорожі, а також допоможе купити усе необхідне.

Google відкриває список очікування в рамках нової експериментальної програми під назвою Search Labs в Google і на Google.com у Chrome.

Bard

Насамперед Google скасовує список очікування та робить Bard доступним трьома мовами для понад 180 країн світу (раніше він був лише в США та Великій Британії). Окрім англійської, Bard тепер підтримує корейську та японську мови та незабаром підтримуватиме 40 найпоширеніших мов світу (серед них є українська).

Bard також зможе експортувати згенерований текст у Gmail і Google Docs зі збереженням форматування, як-от рядки теми, та незабаром додасть підтримку зображень. У таблицях ШІ допоможе краще сортувати та упорядковувати дані та перетворювати Sheets на органайзер чи календар.

Google Lens аналізуватиме зображення в запитах для розпізнавання об’єктів. Відповіді Bard також можуть містити зображення. Якщо користувач запитує про туристичні місця, кожна пропозиція супроводжуватиметься фотографією.

Tailwind 

Це «записник на основі ШІ». Він збирає інформацію з документів, які ви завантажуєте або зберігаєте на Google Drive.

Користувачі можуть поставити ШІ запитання та отримувати відповіді в контексті своїх документів, зокрема приміток. Є також кнопки для «Нові ідеї», «Тест для читання» та «Підсумок». Також Tailwind цитує всі свої джерела у ваших власних документах.

Підписуйтесь на наш telegram-канал t.me/sudua та на Twitter, а також на нашу сторінку у Facebook та в Instagram, щоб бути в курсі найважливіших подій.