LINUX.ORG.RU

Нейросети в Firefox, а-ля Яндекс.Браузер

 , ,


0

3

Не секрет, что в Яндекс.Браузер реализован голосовой перевод видео. Знаю, что для некоторых пользователей, эта возможность была решающей при выборе браузера.

Но оказывается, уже давно (с 2021 года) можно прикрутить данную фишку и на firefox. Суть проста:

  • Установка расширения Tampermonkey
  • Установка скрипта с github (форк)
  • При воспроизведении, нажать на всплывающий значок вверху-середине видео

Возможно понадобится дать разрешение на автовоспроизведение «аудио и видео» (значок в адресной строке).


Проверил на ютубе с BBC News, ok.
Источник с 4pda

p.s. Специально не упомянул Chrome, ‘конкуренты’ пусть горят синим пламенем. :)


Обновление:
Добавлена консольная vot-cli.

★★★

Список поддерживаемых сайтов:
<...>
* XVideos
* PornHub
<...>

Хороший переводчик, интересный. Объясните мне, что на этих сайтах вы собрались переводить?

-- Сводная сестра, что ты делаешь в стиральной машине?

-- О мой сводный брат, я застряла.

звук расстегиваемой ширинки
cocucka ★★★★☆
()
Последнее исправление: cocucka (всего исправлений: 1)

Такое себе. Если я испанского не знаю, то просто не смотрю видео на испанском. У BBC есть приличная русская служба и не менее годная украинская. Английский там тоже не очень запутанный (как и на CNN, впрочем) – можно подтянуть аудирование и словарный запас. Зачем слушать заикающегося робота, начитывающего надмозговый перевод, решительно непонятно.

Vidrele ★★
()
Ответ на: комментарий от Vidrele

BBC News, это я ткнул пальцем в небо. Нужно было чем-то провериться.

А так и сам раньше думал, зачем это, когда читал про эту фишку на Яндекс.Браузер. Но вот иногда, стали попадаться ситуации, когда автор интересный, но свои видеподкасты выпускает только на en аудиторию.

krasnh ★★★
() автор топика
Ответ на: комментарий от krasnh

Итак, ты достаточно любознателен, чтобы интересоваться:

  • СПО;
  • англоязычными авторами подкастов;
  • нейропереводом видео.

И ты достаточно сообразителен, чтобы выуживать авторский замысел из кривых переводов.

То есть, у тебя есть все данные, чтобы осилить понимание английского на слух.

Vidrele ★★
()
Ответ на: комментарий от massimus

Я например с листа что угодно вплоть до научных текстов

вплоть до

Их проще всего читать, вообще-то, с точки зрения языка. Если с темой знаком, конечно (если не знаком, то и на родном тяжело). Сложнее всего художка.

CrX ★★★
()
Ответ на: комментарий от cocucka

что на этих сайтах вы собрались переводить?

ah-ah-ah-aaaa

перевод:

ых-ых-ых-ыыыы

дисклаймер - ни одно жЫвотное не пострадало, текст перевода распространяется бесплатно

olelookoe ★★★
()
Ответ на: комментарий от alex1101

Даров, Фрактал. Делириума подменяешь? Смотри, я попробовал и чуть ИРЛ следом за ним не отъехал, при том от похожей же причины, правда без короны обошлось у меня, другая инфекция вызвала похожие эффекты.

Так что тоже за здоровьем следи, не болей и оставь лавры Делириума ему самому. Он их честно заслужил, второго Делириума нам не надо, давай лучше на другом приколе выезжай, анимешниках там, фурфагах любителях май литтл пони, много всего весёлого осталось на ЛОР-е.

peregrine ★★★★★
()
Ответ на: комментарий от ox55ff

Никто ведь и не говорил, что это какая-то оригинальная разработка. Парни прикрутили фичу Яндекс.Браузер на другие браузеры. За что им честь и хвала.

krasnh ★★★
() автор топика

По «просьбам трудящихся» (1), автор написал консольную vot-cli.

Команды:

    vot-cli <link> - получить перевод по ссылке
    vot-cli --help - получить помощь по команде
    vot-cli --version - получить версию приложения
    vot-cli --output=<path> - указать путь для сохранения файла


Идея полезная, в плане использования в скриптах помимо браузера. Но пока еще сырая, о чем предупреждает и сам автор:

  • Иногда при загрузке файл может не перевестись/не загрузиться. Если это произошло попробуйте еще раз. (может быть это у меня какие-то проблемы с интернетом)
  • Я впервые попытался написать что-то подобное, поэтому получилось далеко не идеально. Есть какие-то рандомные ошибки соединения происходящие при отправке запроса DownloaderHelper (прокомментировано в коде) или Axios, и я не знаю как их исправить :(

p.s. Я уже попробовал тестово с внешним плеером (играют обе аудиодорожки с приглушением первой):

mpv "URL_youtube" --audio-files-append='URL_vtrans' --lavfi-complex='[aid1]volume=0.2[vol1];[aid2]volume=1.0[vol2];[vol1][vol2]amix[ao]'
krasnh ★★★
() автор топика
Ответ на: комментарий от t184256

Что с ней не так? Кроме того, что работает не на территории РФ и заблокирована? Ну так это плюс-минус все нормальные СМИ в РФ сейчас так, хочешь новости - обходишь блокировочку.

nebularia ★★
()
Ответ на: комментарий от Vidrele

BBC есть приличная русская служба и не менее годная украинская. Английский там тоже не очень запутанный (как и на CNN, впрочем) 

Журнализм мёртв, и все СМИ транслируют одни и те же факты и одни и те же их интерпретации, поэтому всё равно на каком языке их смотреть или читать. FTFY.

emorozov
()
2 января 2023 г.

Вот если бы еще без nodejs… Пробовал сделать запрос с помощью grpcurl, но ничего не вышло. Не понимаю я эти protobuf. Использую так

yt_video="https://www.youtube.com/watch?v=9laxdMKTZLA"; vot_audio=$(vot-cli "$yt_video" | cut -d " " -f 6 | tr -d $'\n'); mpv "$yt_video" --external-file="$vot_audio" --lavfi-complex='[aid1]volume=0.5[vol1];[aid2]volume=3dB[vol2];[vol1][vol2]amix[ao]'

но при первом обращении бесконечно ждет ответа сервера.

tyusha
()
Ответ на: комментарий от tyusha

но при первом обращении бесконечно ждет ответа сервера.

Я специально выше оставил авторскую ремарку, Нейросети в Firefox, а-ля Яндекс.Браузер (комментарий):


 -   Иногда при загрузке файл может не перевестись/не загрузиться ....
 -   Я впервые попытался написать что-то подобное, поэтому получилось далеко не идеально ....



В надежде, кому интересна именно консольная версия и есть знания javascript/NodeJS, подключатся к доработке на странице автора.

p.s. В браузерной версии у меня проблем не было, все работает достойно.

krasnh ★★★
() автор топика
9 сентября 2023 г.