Google нагадала про одну історично сформовану проблему, яка дозволяла говорити про расову нерівність: багато технологій зйомки і подальшої автоматичної обробки зображень працювали неоднаково зі знімками людей різних рас. З виходом смартфонів серії Pixel 6 компанія спробувала вирішити цю проблему.
Якщо алгоритми обробки зображень не тестуються за участю представників різних рас, то вони можуть не спрацьовувати належним чином, надмірно висвітлюючи зображення людей або неприродно знецінюючи їх шкіру. Щоб виправити ситуацію, компанія вирішила не обмежуватися тільки власною командою і залучила до роботи відомих фахівців з багатим досвідом у зйомці людей різних рас і подальшої обробки їх знімків. За участю цих фахівців Google значно збільшила число знімків у базі для навчання штучного інтелекту в додатку камери. Набір оптимізованих алгоритмів розпізнавання облич, зйомки та редагування зображень отримав назву Real Tone.
Компанія перерахувала ключові зміни, які отримали смартфони Pixel 6 для зйомки та оптимізації зображення представників різних рас.
- У цифровій фотографії отримання якісного портрета залежить від здатності камери визначати обличчя. Для поліпшення роботи цієї функції у вихідному наборі зображень було підвищено різноманітність осіб та умов освітлення.
- Сторонні консультанти допомогли розробникам прийняти більш правильні рішення в передачі нюансів кольору шкіри представників різних рас. В результаті покращилася робота алгоритму автоматичного коригування балансу білого.
- Оптимізовано алгоритми виставлення автоматичної експозиції. Експерти допомогли інженерам компанії встановити налаштування камери таким чином, щоб вона показала людину будь-якої раси таким, який вона є - без неприродного збільшення або зменшення яскравості.
- Проблемою колишніх алгоритмів була неприродна передача кольору шкіри в умовах розсіяного освітлення. Новий алгоритм зменшує вплив цього ефекту на кінцевий результат.
- Ще однією складністю була при певних умовах розмитість зображень людей з темним кольором шкіри. Google задіяла нові можливості чіпа Tensor, щоб зробити знімки більш різкими за рахунок контролю руху навіть в умовах низької освітленості.
Першими відгуки на оптимізовані алгоритми обробки зображення надали власні співробітники Google. Вони високо оцінили передачу тонів кольору шкіри, яскравість, глибину і деталізацію знімків, назвавши Pixel 6 найкращим для зйомки представників різних рас - навіть коли їх опитували, не уточнюючи моделі телефону, а пропонуючи тільки знімки.
У співпраці з експертами компанія оптимізувала не тільки алгоритми роботи камер в нових смартфонах, але і скоригувала роботу існуючих програмних продуктів. Оновилася функція автоматичного поліпшення знімків в Google Photos - в найближчі тижні вона буде доступна в додатку під Android і iOS. Крім того, нещодавно було додано автоматичне регулювання освітлення у відеозв'язку Google Meet.
