#funky_ai
ᛗ ᚫᚾᛞᛟ
Последние исследования показывают, что на большинстве когда-либо существовавших языков больше не говорят. Десятки из этих мертвых языков также считаются потерянными, или "нерасшифрованными", то есть мы не знаем достаточно об их грамматике, лексике или синтаксисе, чтобы понимать их тексты.
Утраченные языки представляют собой нечто большее, чем простое академическое любопытство; без них мы теряем целый пласт знаний о людях, которые на них говорили. К сожалению, на большинстве из них существует настолько мало записей, что ученые не могут расшифровать их с помощью обычных алгоритмов машинного перевода. Некоторые из таких языков также не имеют хорошо изученного "родственного" языка, с которым их можно было бы сравнить, и в них часто отсутствуют традиционные разделители слов, такие как пробелы и пунктуация.
К счастью, исследователи из MIT недавно сделали важное открытие в этой области: была создана новая система, которая способна автоматически расшифровывать утраченный язык, не нуждаясь в углубленных знаниях о его связи с другими языками. Исследователи также показали, что их система может сама определять отношения между языками, и использовали ее для подтверждения важной научных гипотезы о родстве иберийского и баскского языков.
Система базируется на принципе, что языки обычно развиваются только определенными предсказуемыми путями. Например, слово с буквой "р" в родительском языке может смениться на "б" в языке-потомке, но замена на "к" менее вероятна из-за значительного разрыва в произношении.
AI учится встраивать звуки языка в многомерное пространство, где различия в произношении отражаются в расстоянии между соответствующими векторами. Такая конструкция позволяет улавливать соответствующие закономерности изменения языка и выражать их в виде вычислительных ограничений. Полученная модель может сегментировать слова в древнем языке и сопоставлять их с аналогами в родственном языке.
Команда исследователей применила свой алгоритм к иберийскому языку, рассматривая в качестве родственных баскский язык, а также менее вероятных кандидатов из романской, германской, тюркской и уральской семей. Хотя баскский и латинский языки оказались ближе к иберийскому, чем другие языки, они все равно слишком разные, чтобы считать их родственными.
В дальнейшей работе команда надеется расширить свою работу, выйдя за рамки акта соединения текстов с родственными словами в известном языке - новый подход команды предполагает выявление семантического значения слов, даже если непонятно, как их читать.
>>Click here to continue<<
