#helsinkinlp — Public Fediverse posts

Токенизация, как ключ к языковым моделям для низкоресурсных языков

Привет Хабр, меня зовут Эдуард, и я хочу поделиться своими наблюдениями о том, как статистические алгоритмы извлекают грамматику из текстов.

https://habr.com/ru/articles/973324/

#морфология #машинное_обучение #низкоресурные_языки #кабардинский #mistral7b #helsinkinlp

Нейросеть мне в помощь или как я сделал телеграм бота, который умеет переводить песни

Однажды, когда я искал эффективное решение для преобразования речи в текст (транскрибации), чтобы применить его в своем проекте умной колонки , обнаружил интересное решение под названием Whisper от широко известной компании Open AI . К сожалению, Whisper не подошел для реализации в моем проекте по «аппаратным» причинам, но его функционал отпечатался в моей душе. Прошло время и меня посетила идея: «Почему бы не разработать телеграмм бота, куда бы пользователь мог отправлять аудиофайл, а в ответ получал текстовую расшифровку и перевод (песни) на родной язык». В этой статье я расскажу о реализации данной идеи и Whisper в этом проекте займет одну из ключевых функций.

https://habr.com/ru/companies/timeweb/articles/774806/

#timeweb_статьи #искусственный_интеллект #python #linux #боты #музыка #перевод_с_английского #хостинг #Whisper #скрипты #нейросеть #HelsinkiNLP