Обучением языковых моделей займутся заключенные. Из-за нехватки специалистов

Финский стартап Metroc, который разрабатывает поисковую систему для строительных компаний, стал использовать заключенных местных тюрем для разметки данных

Обучение необходимо для того, чтобы большая языковая модель начала понимать подсказки из новостных статей и муниципальных документов о предстоящих строительных проектах.

Дело в том, что на специальных платформах, практически нет финноговорящих работников, а из-за редкости финского языка инструменты автоматического перевода плохо с ним справляются.

Финским в мире владеют около 5,5 миллионов человек и почти все они живут в Финляндии. В ходе работы на экране ноутбука появляются короткие фрагменты текстов, имеющие отношение к недвижимости и строительству, а заключенный должен выбирать ответ «да» или «нет» на вопросы, связанные с этими текстами.

Подключив к работе заключенных, Metroc получил дешевую рабочую силу — работники получают 1,54 евро в час при смене длиной три часа. Исправительная система преподносит эту работу как часть проекта по подготовке заключенных к цифровой трансформации окружающего мира после освобождения.

Здесь мы рассказываем, что такое языковые модели и как они работают:

Unsplash