Поддержка в телеграмм канале - https://t.me/mdmPiTerminal

Возможности

1. Запуск распознавания по любому ключевому слову (Привет Алиса, проснись дом, Ok Google и тд.)
2. Передача команды в МДМ
3. Ответ в терминал через sayReply

Внимание!!! На данный момент протестировано на платах:

• Orange Pi Zero - Armbian Ubuntu_xenial_default ядро 3.4

• Скачать и записать образ системы.

login: pi
password: qwertyui

После загрузки терминал скажет свой IP адресс который нужно будет указать в настройках МДМ.

Настройка терминала

• Скачать образ Armbian
• Записать образ на флешку и загрузиться с нее
• Дождаться обновление всех пакетов (проверить можно через команду htop, будет запущен процесс dkpg)
• Отредактировать или создать файл /etc/asound.conf

Заранее проверить на каком усройстве микрофон и динмаик через команду

aplay -l
arecord -l

и отредактировать если нужно hw:2,0

sudo nano /etc/asound.conf

Вставить код

pcm.!default {
type asym
playback.pcm "playback"
capture.pcm "capture"
}

pcm.playback {
type plug
slave.pcm "dmixed"
}

pcm.capture {
type plug
slave.pcm "array"
}

pcm.dmixed {
type dmix
slave.pcm "hw:0,0"
ipc_key 555555
}

pcm.array {
type dsnoop
slave {
pcm "hw:2,0"
channels 2
}
ipc_key 666666
}

сохранить и проверить вывод звука через команду

speaker-test

1. Откройте терминал и выполните команды

cd ~/
git clone https://github.com/devoff/mdmPiTerminal
cd mdmPiTerminal
chmod +x scripts/mdm-pi-installer.sh
./scripts/mdm-pi-installer.sh

Ждем пока установится SnowBoy и все зависимости.

chmod +x systemd/service-installer.sh
sudo ./systemd/service-installer.sh

sudo systemctl enable mdmpiterminal.service
sudo systemctl enable mdmpiterminalsayreply.service

sudo systemctl start mdmpiterminalsayreply.service

• Заходим в Панель управления MajorDomo > Система > Маркет дополнений > Оборудование > MDM VoiceAssistant и устанавливаем модуль.
• После заходим - в Настройки > Терминалы > Добавить новую запись > Добавляем название и IP адрес терминала
• Переходим в Устройства > MDM VoiceAssistant
• Выбираем терминал, который только, что создали.
• Выбираем Сервис синтеза речи

Если есть API ключ от Яндекса, лучше выбрать Yandex TTS, если нет то Google

• Чувствительность реагирования на ключевое слово

Чем больше тем лучше слышит, но будет много ложных срабатываней.

• Сервис распознования речи Goolge

Можно выбрать wit.ai или микрософт, но для них нужно получить API

• Сохраняем

Я бы рекомендовал записать образцы голоса сразу на терминале с тем микрофоном, который будет использоваться.

• В МДМ в настройках модуля, во вкладка запись ключевого слово нажимаем - ЗАПИСЬ
• На терминале включится запись на 5 секунд и автоматически завершиться
• Нужно повторить эту процендуру 3 раза после отправить на компиляцию
• Повторить для нужного колличества ключевых фраз (макс. 6 ключевых фраз) и нажать "Применить"

Либо записать на сайте snowboy

• Для этого нужно получиться пройти регистрация на сайте https://snowboy.kitt.ai/
• Зписать ключевое слово
• Скачать файл в формате pmdl
• Переименовать файл в model1.pmdl
• Перезаписать файл в папке

mdmPiTerminal/src/resources/models/

sudo systemctl start mdmpiterminal.service

Получить отладочную информацию

watch service mdmpiterminalsayreply status

или

watch service mdmpiterminal status

Для ручного запуска скриптом терминала

• Остановить сервисы

sudo service mdmpiterminal stop
sudo service mdmpiterminalsayreply stop

• Запустить требуемое

cd ~/
sudo mdmPiTerminal/env/bin/python -u mdmPiTerminal/src/snowboy.py // для запуская сервиса распознования ключевого слова
sudo mdmPiTerminal/env/bin/python -u mdmPiTerminal/src/sayreply.py // Сервис для ответов от МДМ получение и обработка настроек.

• Если не работает USB микрофон, попробуйте выдыренуть и вставить обратно, иногда это помогает.