Facebook анонсував новий штучний інтелект, який зможе здійснювати прямі парні переклади більш ніж між 100 мовами. Про це Engadget розповіла науковий співробітник Facebook AI Анджела Фан (Angela Fan). Це означає, що система зможе перекладати тексти без застосування англійської мови в якості проміжної.
Більшість перекладачів спочатку перекладають тексти з джерела англійською, а потім іншою іноземною мовою. Через це процес виходить складним і втрачається точність деяких елементів тексту. За словами Фан, новий ШІ зможе виробляти двонаправлені переклади (наприклад з французької на китайську і навпаки) без використання англійської. За оцінкою BLEU (алгоритм оцінки якості перекладеного тексту) якість переведення на 10 балів вища, ніж з використанням англо-орієнтованої моделі.
Щоб створити новий ШІ, команда Facebook використовувала сервіс CommonCrawl для збору текстових прикладів по всій Мережі. Після цього розробники проаналізували весь матеріал за допомогою системи FastText, яку компанія створила кілька років тому. У підсумку вдалося сформувати базу даних з 7,5 мільярдів пропозицій, які система використовує для переказу.
З яким числом мов зможе в майбутньому працювати система, поки неясно. За словами Фан, все залежить від ресурсів, які опиняться в розпорядженні системи. У основних мов, таких як індійська, китайська або німецька, багато матеріалу, тому що на них публікується безліч текстів у Мережі. Набагато більше проблем з мовами на подобі Зулу, які не такі поширені.
Компанія надасть міжнародному дослідному співтовариству набір даних і моделей роботи у вигляді відкритого вихідного коду. Коли систему впровадять у повсякденну роботу соцмережі, поки що незрозуміло.
