Участник:Petr-akhlamov/Наработки по речи

Словари

Вот, что получилось по озвучке в Словарях:

Есть три словаря:

• GoldenDict
• QstarDict
• StarDict

Есть ограниченный набор озвученных слов:

• WyabdcRealPeopleTTS

Файлы TTS лежат в:

/usr/share/WyabdcRealPeopleTTS
/usr/share/OtdRealPeopleTTS

Есть файл словарей:

• stardict-slovnyk_en-ru
• stardict-slovnyk_ru-en
• stardict-quick_en-ru
• stardict-quick_ru-en

Работать будем с StarDict, потому что именно там получилось завести озвучку.

Установка

# apt-get install stardict
# apt-get install stardict-slovnyk_en-ru stardict-slovnyk_ru-en stardict-quick_en-ru stardict-quick_ru-en

Как все на самом деле

Stardict ▷ Домик ▷ Управление модулями

Видим:

• TTS-система
  • Espeak 1.0

На самом деле, что бы мы не прописывали в настройки, Stardict использует Espeak.

В настройках модуля можно выбрать русский, но там ужасное произношение.

На Github-е проекта в модулях (из того, что есть в Альте) есть:

https://github.com/huzheng001/stardict-3/tree/master/dict/stardict-plugins

• Festival

В gear у ALT-а тоже есть этот плагин:

https://git.altlinux.org/gears/s/stardict.git?p=stardict.git;a=tree;f=stardict/dict/stardict-plugins;h=16f970e56308cdfd470e9e1d046ef65183482181;hb=f36a632d3ef208f1f015cebb9f2d6b57f7676b6e

Но в пакетах его нет:

https://packages.altlinux.org/ru/sisyphus/srpms/stardict/

Речь

Некоторые заметки

Spech dispathcer от Ubuntu:

[Unit]
Description=Speech-Dispatcher, common interface to speech synthesizers

[Service]
Type=forking
User=speech-dispatcher
PIDFile=/run/speech-dispatcher/speech-dispatcher.pid
ExecStart=/usr/bin/speech-dispatcher -d --pid-file /run/speech-dispatcher/speech-dispatcher.pid
ExecReload=/bin/kill -HUP $MAINPID 

[Install]
WantedBy=multi-user.target
Alias=speech-dispatcher.service

Установка

• Основной движок:

# apt-get install speech-dispatcher

• Утилиты Speech Dispatcher:

# apt-get install speech-dispatcher-utils speech-dispatcher-module-festival

Конфигурация движка и тест:

spd-conf #настройка
spd-say #произнести текст (по-умолчанию только на английском)
sdpsend #отправка на какой-то сервер с портом

• orca

# apt-get install orca

• пакеты festival для speech-dispatcher

# apt-get install festival-freebsoft-utils

• RHVoice

# apt-get install RHVoice

Проверяем фестиваль

Примечание: Через spd не работает

$ spd-say -o festival -l en hello

^"работает", но по сути нет (по факту, это просто английский голос из другого движка, фестиваля в списке модулей нет)

$ spd-say -o festival -l russian привет

^не работает

служба speech-dispatcherd.service не запускается

Логи в Альте:

systemctl status speech-dispatcherd.service 
× speech-dispatcherd.service - Speech-Dispatcher an high-level device independent layer for speech synthesis.
     Loaded: loaded (/lib/systemd/system/speech-dispatcherd.service; enabled; vendor preset: disabled)
     Active: failed (Result: exit-code) since Tue 2024-09-24 15:01:24 MSK; 16min ago
        CPU: 13ms

сен 24 15:01:24 client.petr.ru systemd[1]: Starting Speech-Dispatcher an high-level device independent layer for speech synthesis....
сен 24 15:01:24 client.petr.ru speech-dispatcher[12365]: [Tue Sep 24 15:01:24 2024 : 53693] speechd: Speech Dispatcher 0.10.2 starting
сен 24 15:01:24 client.petr.ru systemd[1]: speech-dispatcherd.service: Control process exited, code=exited, status=1/FAILURE
сен 24 15:01:24 client.petr.ru systemd[1]: speech-dispatcherd.service: Failed with result 'exit-code'.
сен 24 15:01:24 client.petr.ru systemd[1]: Failed to start Speech-Dispatcher an high-level device independent layer for speech synthesis.. 

Похожий лог в Manjaro: https://github.com/brailcom/speechd/issues/640?ysclid=m1gbv94cme875550317

Nov 10 21:42:32 wiley speech-dispatcher[3128]: [Wed Nov 10 21:42:32 2021 : 132158] speechd: Speech Dispatcher 0.10.2 starting
Nov 10 21:42:32 wiley systemd[1]: speech-dispatcherd.service: Control process exited, code=exited, status=1/FAILURE
░░ Subject: Unit process exited
░░ Defined-By: systemd
░░ Support: https://forum.manjaro.org/c/support
░░ 
░░ An ExecStart= process belonging to unit speech-dispatcherd.service has exited.
░░ 
░░ The process' exit code is 'exited' and its exit status is 1.
Nov 10 21:42:32 wiley systemd[1]: speech-dispatcherd.service: Failed with result 'exit-code'.
░░ Subject: Unit failed
░░ Defined-By: systemd
░░ Support: https://forum.manjaro.org/c/support
░░ 
░░ The unit speech-dispatcherd.service has entered the 'failed' state with result 'exit-code'.
Nov 10 21:42:32 wiley systemd[1]: Failed to start Speech-Dispatcher an high-level device independent layer for speech synthesis..
░░ Subject: A start job for unit speech-dispatcherd.service has failed
░░ Defined-By: systemd
░░ Support: https://forum.manjaro.org/c/support
░░ 
░░ A start job for unit speech-dispatcherd.service has finished with a failure.
░░ 
░░ The job identifier is 1578 and the job result is failed. 

Советуют проверить командами:

>spd-say -O

^показывает список подключенных к speech dispatcher модулей

OUTPUT MODULES
flite
espeak

>spd-say -L

^получить список синтезируемых голосов

Логи:

/run/user/500/speech-dispatcher/log

Невозможно создать pid-файл

По команде просмотра логов:

# journalctl -u speech-dispatcherd.service

Видим строку:

Can't create pid file in /run/speech-dispatcher/speech-dispatcher.pid, wrong permissions?

Создаем каталог:

# mkdir /run/speech-dispatcher/

И даем всем права на rw:

# chmod -R 666 /run/speech-dispatcher/

/usr/lib/systemd/system/speech-dispatcherd.service

[Unit]
Description=Speech-Dispatcher an high-level device independent layer for speech synthesis. 

[Service]
Type=forking
ExecStart=/usr/bin/speech-dispatcher -d

[Install]
WantedBy=multi-user.target

RHVoice

Если в

/etc/speech-dispatcher/speechd.conf

-расскомментировать

#AddModule "rhvoice"                  "sd_rhvoice"   "rhvoice.conf"

-прописать в

DefaultModule rhvoice
LanguageDefaultModule "en"  "rhvoice"
LanguageDefaultModule "ru"  "rhvoice"

После прописывания ошибка:

error: Can't connect to unix socket /run/user/500/speech-dispatcher/speechd.sock: В соединении отказано. Autospawn: Autospawn failed. Speech Dispatcher refused to start with  error code, stating this as a reason: 

Согласно https://www.linux.org.ru/forum/general/15808827?ysclid=m1gc0536k614290331
 spd-say не умеет WAV в stdout вообще. Пользуй RHVoice-test. См. https://github.com/Olga-Yakovleva/RHVoice/issues/140
 └── https://github.com/RHVoice/RHVoice/issues/140
    Советуют:
    echo "привет" | RHVoice-test -p elena -o /dev/stdout 2>/dev/null | aplay /dev/stdin 2>/dev/null
    └── Yes, I can use speetch-despatcher. But how do I use external players in spd-say?
        └── oh sorry At first I did not understand your situation completely. Unfortunately, this is not possible at the moment. ticket in upstream. https://github.com/brailcom/speechd/issues/348
            └── Speechd/получать звук в виде бинарника https://github.com/brailcom/speechd/issues/348 
                └── Speech-dispatcher не работает с RHVoice https://github.com/RHVoice/RHVoice/issues/178 Это проблема не RHVoice, а SD.

Настройка Speechd для RHVoice

http://linux.tiflocomp.ru/docs/spd_rhvoice_festival.php?ysclid=m1gcfhzn1z592561148

Для Альта конфиг с корректными путями будет такой:

RHVoiceDataPath "/usr/share/RHVoice"
RHVoiceConfigPath "/etc/RHVoice/"
RHVoicePunctuationMode 
#RHVoicePunctuationList "@+_"
RHVoiceDefaultVoice "azamat"
#RHVoiceDefaultVariant "Pseudo-English"
Debug

Но с ним speech-dispatcher не работает.

Порывшись в других дистрибутивах, в том же Arch-е, откуда я брал отчасти инфу, обнаружил, что в пакете rhvoice есть модуль для speech-dispatcher-a. В новой последней версии RHVoice, собранной для P11 и Sisyphus она тоже есть.

https://packages.altlinux.org/ru/p11/binary/libRHVoice5/x86_64/files/

Искомое:

/usr/lib64/speech-dispatcher-modules/sd_rhvoice

Примечание: В ALT P10 - 0.7.1, P11/Sisyphus - 1.14.0

Тестирование

Вручную тесты работают

$ echo "Альт самый лучший. Я гарантирую!" | festival --tts --language russian
$ echo "привет" | RHVoice-test -p elena -o /dev/stdout 2>/dev/null | aplay /dev/stdin 2>/dev/null
$ echo "Тестируем sound" | RHVoice-test -p anna+clb | aplay

А через speech:

• после включения модуля rhvoice:

$ spd-say -o festival -l en hello
Failed to connect to Speech Dispatcher:
Error: Can't connect to unix socket /run/user/500/speech-dispatcher/speechd.sock: Нет такого файла или каталога. Autospawn: Autospawn failed. Speech Dispatcher refused to start with error code, stating this as a reason:

$ spd-say -o festival -l ru петя
Failed to connect to Speech Dispatcher:
Error: Can't connect to unix socket /run/user/500/speech-dispatcher/speechd.sock: Нет такого файла или каталога. Autospawn: Autospawn failed. Speech Dispatcher refused to start with error code, stating this as a reason:

$ spd-say -o rhvoice -l ru петя
Failed to connect to Speech Dispatcher:
Error: Can't connect to unix socket /run/user/500/speech-dispatcher/speechd.sock: Нет такого файла или каталога. Autospawn: Autospawn failed. Speech Dispatcher refused to start with error code, stating this as a reason:

• после выключения и реконфигурации на speech "работает" только festival и rhvoice на английском. Но, проверяем

>spd-say -O
OUTPUT MODULES
flite
espeak

Т.е. по сути, spd-say игнорирует -o и берет только английский язык из flite/espeak.

Те же самые flite и espeak отображаются в orca.

Результаты тестов

Тесты:

1. $ echo "Альт самый лучший. Я гарантирую!" | festival --tts --language russian
2. $ echo "Good morning, children!" | festival --tts --language english
3. $ echo "Альт самый лучший. Я гарантирую!" | RHVoice-test -p elena -o /dev/stdout 2>/dev/null | aplay /dev/stdin 2>/dev/null
4. $ echo "Good morning, children!" | RHVoice-test -p clb -o /dev/stdout 2>/dev/null | aplay /dev/stdin 2>/dev/null
5. $ echo "Good morning, пользователи Альта!" | RHVoice-test -p anna+clb | aplay
6. $ spd-say -o festival -l en "Good morning, children!"
7. $ spd-say -o festival -l ru "Альт самый лучший. Я гарантирую!"
8. $ spd-say -o rhvoice -l ru "Альт самый лучший. Я гарантирую!"
9. $ spd-say -o rhvoice -l en "Good morning, children!"
10. $ spd-say -O

Результаты
	P10	Sisyphus
1	work, good	bad, см прим.1
2	work, good	work, good
3	work, good	work, good, см. прим.2
4	work, good	work, good, см. прим.2
5	work, good	work, good, см. прим.3
6	У spd его нет, используется первый из списка	У spd его нет, используется первый из списка
7	Звук не воспроизводится, используется первый из списка flite	У spd его нет, используется первый из списка
8	Звук не воспроизводится, используется первый из списка	work, good
9	Читает по английски, используется первый из списка	work, good
10	OUTPUT MODULES flite espeak	OUTPUT MODULES rhvoice flite espeak-ng-mbrola espeak-ng-mbrola-generic espeak-ng espeak-mbrola-generic

Примечания:

1. сначала, ругается что нет движка mbrola, ставишь, потом ищешь - а там нет русского языка
2. Нужно доустановить пакеты: apt-get install RHVoice-Russian-* RHVoice-English-* RHVoice-bin
3. Нужно вводить без части "| aplay"

Примечание: На Sisyphus после установки rhvoice, настройки speech dispatcher с помощью spd-conf и запуска orca -s заработал экранный диктор.

Ссылки

• Статья на Github по речи