The article discusses the development of a plugin to translate voice messages into text and its implementation in the social network VKontakte.В статье рассматривается разработка плагина по переводу голосовых сообщений в текст и его реализация в социальной сети ВКонтакте

Agiev, A. M.

Urbanovich, Yu. P.

Zheleznova, M. A.

Агиев, А. М.

Железнова, М. А.

Урбанович, Ю. П.

Russian

Institutional repository of Russian State Vocational Pedagogical University

695 4. Deren, M. Essential Deren: collected writings of film. Documentext. King-ston, New York, 2005. – 265c.  УДК 004.772/.773:004.4'277 Урбанович Ю. П., Агиев А. М., Железнова М. А. «VOICE-TO-TEXT CONVERTER» — ПЛАГИН ДЛЯ ПЕРЕВОДА ГОЛОСОВЫХ СООБЩЕНИЙ Юлия Павловна Урбанович учитель информатики и ИКТ urbanovich91@yandex.ru Андрей Михайлович Агиев обучающийся 11 класса agiev29@gmail.com  Мария Андреевна Железнова обучающаяся 11 класса mms00180@gmail.com Муниципальное автономное общеобразовательное учреждение гимназия № 99, Россия, г. Екатеринбург, Россия «VOICE-TO-TEXT-CONVERTER» - PLUGIN FOR TRANSLATING VOICE MESSAGES Yulia Pavlovna Urbanovich Maria Andreevna Zheleznova Andrey Mikhailovich Agiev Grammar school №99, Russia, Yekaterinburg, Russia Аннотация. В статье рассматривается разработка плагина по переводу голосовых сообщений в текст и его реализация в социальной сети ВКонтакте. Abstract. The article discusses the development of a plugin to translate voice messages into text and its implementation in the social network VKontakte. 696 Ключевые слова: голосовые сообщения, социальная сеть ВКонтакте.  Keywords: Voice messages, social network VKontakte. Тенденция развития программного обеспечения подразумевает включение не только базовых функций, но и дополнительного функционала, созданного сторонними разработчиками. Сейчас расширения для браузера могут использо-ваться совершенно для разных целей: отслеживание проведенного времени в со-циальных сетях или перевод голосовых сообщений в текст для более комфорт-ного общения.  Голосовые сообщения — явление не новое. Трудно сказать, кто именно их изобрёл, однако точно известно, что первыми популярными мессенджерами, ко-торые вооружились аудиосообщениями, стали «Вотсап» и «Фейсбук мессен-джер». Пользователям инновация понравилась, и теперь от голосовых практиче-ски нигде нет спасения.  Сегодня эта опция есть в «Телеграме», «ВКонтакте», «Вайбере», «Инста-граме», «Скайпе» и ряде других популярных сервисов. Потому что есть спрос. По данным Facebook голосовые сообщения — второй по популярности тип фай-лов, которые передают друг другу его пользователи. Тем не менее, противников у голосовых сообщений едва ли не больше, чем сторонников, их регулярно вы-смеивают и посвящают им мемы — прямо скажем, не всегда корректные. Но что делать, если голосовое сообщение отправлено не в очень удобное время и прослушать его нет возможности? Расширение для браузера «Voice-to-text-converter» способно помочь ре-шить проблему — сложность прослушивания голосовых сообщений, когда фи-зически это сделать невозможно. Основной задача плагина «Voice-to-text converter» - перевод голосового со-общения в текст по нажатию кнопки пользователем. Плагин для браузера состоит из трёх основных компонентов: • Плагин для браузера, реализующий функционал работы с пользовате-лем; 697 • Linux-сервер, реализующий функционал перевода голосового сообще-ния в текст. • HTTP-сервер, реализующий функционал взаимодействия Linux-сер-вера и плагина (рисунок 1).   Рисунок 1 — Компоненты плагина для браузера «Voice-to-text converter» Плагин «Voice-to-text converter» реализован с помощью языков програм-мирования: Bash, JavaScript, PHP. Рассмотрим подробнее реализацию каждого компонента плагина. 1. Плагин для браузера, реализован средствами JavaScript и дополнитель-ного модуля jQuery. При разработке плагина большое внимание уделялось подходу AJAX, ко-торый обеспечил фоновый обмен данными браузера с веб-сервером. Для создания плагина необходим файл «manifest.json» (манифест). Мани-фест веб-приложения предоставляет информацию о приложении (такую как имя, авторство, иконку и описание) в формате JSON-файла. Цель манифеста — уста-новить веб-приложение на домашний экран устройства, предоставляя пользова-телю более быстрый доступ и больше возможностей (рисунок 2). «Voice-to-text converter»Плагин Linux-сервер HTTP-сервер698  Рисунок 2 — Программный код файла «manifest.json» Основная js программа выполняет поиск аудиосообщений на странице сайта «vk.com/im/» и выводит кнопки у найденных сообщений для взаимодей-ствия с пользователем, при нажатии которых отправляется ссылка на аудио на http сервер. 2. Linux-сервер, реализованный средствами BASH. BASH (Bourne again shell) — одна из наиболее популярных современных разновидностей командной оболочки UNIX. Bash представляет собой команд-ный процессор, работающий в интерактивном режиме в текстовом окне. Как и все Unix-оболочки, он поддерживает автодополнение имён файлов и каталогов, подстановку вывода результата команд, переменные, контроль над порядком вы-полнения, операторы ветвления и цикла [2].  Для перевода аудио файла в текст используется Google Speech API. Google Cloud Speech-to-Text API позволяет разработчикам конвертировать аудио в текст, применяя средства нейронных сетей в API. Он может обрабаты-вать потоковое или предварительно записанное аудио в режиме реального вре-мени, используя технологию машинного обучения Google [5]. 699 Плагин «Voice-to-text converter» работает на бесконечном цикле: при обна-ружении файла на ftp сервере, программа получает его и отправляет его на сер-вер Google API для его конвертации, сконвертированный JSON файл программа преобразовывает в txt файл, а затем удаляет все «хвосты». 3. HTTP-сервер, реализованный средствами PHP. HTTP-сервер — это сервер, работающий по HyperText Transfer Protocol. Используется для обмена произвольными данными между компьютерами по сети Интернет. Эта технология является одной из самых востребованных для ска-чивания и загрузки данных с/на удаленные серверы, рассредоточенные по всему миру [3].  Для реализации возможности передачи файла на сервер, а также сохране-ния ссылки сообщения в уже существующий файл на веб-сервере используются PHP файлы, находящиеся на сервере. Передача текстового файла с сервера Linux происходит с помощью стан-дартного консольного http клиента в Linux.  Рисунок 3 — Программный код, осуществляющий передачу файла на http сервер Работа плагина «Voice-to-text converter» выглядит следующим образом: Пользователь, установивший плагин, заходит в личные сообщения в ВКонтакте, при наличии голосовых сообщений в личной переписке появляется кнопка для перевода голосового сообщения. По нажатию на данную кнопку, ди-ректория сервера ВКонтакте, где лежит сам аудиофайл, передается в php файл, с помощью которого ссылка аудиофайла сохраняется на http сервере. 700 В это же время на Linux-сервере работает программа, которая после обна-ружения файла, получает его и с помощью API Google переводит его в текст, от-правляя обратно на http сервер. Плагин получает файл и выводит текст в модаль-ном окне браузера (рисунок 4).  Рисунок 4 — Схема работы плагина Для реализации плагина на своем персональном компьютере, определены следующие технические требования: 1. Браузеры семейства Chromium (Google Chrome, Yandex browser, Mozila Firefox, Opera). 2. Объем памяти не менее 2 МБ. Голосовые сообщения выглядят не самым логичным поворотом и как будто возвращают нас к более «старым» типам общения — долгим объяснениям голосом вместо пары строк текста. И тем не менее многие выбирают именно их. Число голосовых сообщений очень быстро выросло, особенно за последние два года. Например, в 2019 году количество голосовых сообщений увеличилось больше чем на пятьдесят процентов. Для пользователей, которые активно используют социальные сети, данный плагин станет незаменимым помощников, в ситуациях, когда человек может находиться в транспорте, на совещании, в толпе или любом другом месте, где слушать голосовое сообщение просто дискомфортно. Список литературы 1. Блог компьютерных советов it-doc. – URL: https://it-doc.info/. 2. Журнал TJournal — Википедия. – URL: https://tjournal.ru/. 3. Научно-популярный журнал Хабр. – URL: https://habr.com/ru/. 701 4. Основы JavaScript. – URL: https://devel-oper.mozilla.org/ru/docs/Learn/Getting_started_with_the_web/JavaScript_basics. 5. Что такое API в Веб-приложениях и зачем он нужен. – URL: https://mkdev.me/posts/chto-takoe-api-v-veb-prilozheniyah-i-zachem-on-nu-zhen. 6. Что такое API?. – URL: https://habr.com/ru/sandbox/52599. 7. Что такое PHP?. – URL: http://php.net/manual/ru/intro-whatis.php.  УДК [78.02:004]+78.071.5 Фильчаков С. И., Буторина Н. И. МУЗЫКАЛЬНО-КОМПЬЮТЕРНЫЕ ТЕХНОЛОГИИ:  ТРАКТОВКИ ПОНЯТИЯ, ПРОБЛЕМЫ, ВОЗМОЖНОСТИ Сергей Иванович Фильчаков, преподаватель sergeipc@bk.ru Школа искусств, Новоуральск Наталья Иннокентьевна Буторина кандидат педагогических наук, доцент  nainnrgppu@mail.ru ФГАОУ ВО «Российский государственный профессионально-педагогический университет», Россия, Екатеринбург MUSIC-COMPUTER TECHNOLOGIES: INTERPRETATIONS OF CONCEPTS, PROBLEMS, OPPORTUNITIES Sergey Ivanovich Filchakov Children’s Art School, Novouralsk Natalia Innokentievna Butorina Russian State Vocational Pedagogical University, Russia, Ekaterinburg 

«VOICE-TO-TEXT-CONVERTER» - PLUGIN FOR TRANSLATING VOICE MESSAGES

https://elar.rsvpu.ru/bitstream/123456789/31429/1/978-5-8295-0699-5_2020_093.pdf

«VOICE-TO-TEXT-CONVERTER» - PLUGIN FOR TRANSLATING VOICE MESSAGES

Abstract

Similar works

Full text

Available Versions

Institutional repository of Russian State Vocational Pedagogical University