[Модуль] [Железо] Голосовое управление по ключевому слову на базе Orange Pi Zero и аналогов

Разработка дополнительных модулей, подключение различных приложений.

Модератор: immortal

Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Сб июн 09, 2018 8:02 am


Ron писал(а):...

Может мне так же все распиать как сделать так сказать базовую модель на малине + камера и 4 микрофона и все это с PS3 eye (не дорогая и на данный момент самая хорошая, которые пробовал)?
То есть MDM со своим блоком микрофонов и камерой. Нагрузок на систему нет больших - все летает как Боинг (правда резервное питание на аккуме с камерой будет меньше жизни давать по времени. Малина с PS3 eye на аккуме живет теперь меньше часа...)

Работает на столько идеально, что просто клас! Чувствительность микрофонов и алгоритм сноубоя определять голоса хозяев и не ошибаться - просто круть! :)
Прикручивать ps3 eye к малине можно и нужно, потому как в подарок еще будет глаз для опознавания по лицу.
простыня будет большая, поэтому и спрашиваю - в эту тему все расписать, или отдельно диссертацию в виде блога так же писать?
Буковок и телодвижений будет много...
Ну так если у тебя готовое решение то наверное в блог написать.

Вот только вопросы есть.

На какой системе и плате у тебя работает?
Исходи из поста я так понял у тебя мдм и сноубой на одной малинке, то есть сноубой не как отдельный терминал?

Диалоги тоже реализованы?
Почему спрашиваю, потому что чтобы заработали диалоги надо либо добавлять в мдм терминал как мажордроид, либо вносить изменения в систему, либо модуль писать.

Отправлено с моего Redmi Note 4 через Tapatalk

Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
devoff
Сообщения: 181
Зарегистрирован: Пт апр 04, 2014 10:17 pm
Благодарил (а): 37 раз
Поблагодарили: 54 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение devoff » Сб июн 09, 2018 5:44 pm

fandaymon писал(а):
Пт июн 08, 2018 1:07 pm
devoff писал(а):
Пт июн 08, 2018 11:54 am

lanket есть возможность использовать миксер от dsnoop, но если останавливать snowboy на момент распознавания, то работает лучше.
это сделано для первого распознавания, но для ответов не могу побороть, есть нюансы с циклами и его повторным запуском.
А в чём лучшесть делать terminate сноубою? Тише говорить можно, лучше процент распознавания, лучше ловит окончание фразы? В начале своих эскперементов тоже пытался терминейт делать, а только потом распознавать гуглом, но вроде особой разницы не заметил...
Мне показалось лучше, когда только один сервис слушает микрофон и ему никто не мешает, так же мне показалось, что если микрофон занят сноубоем, то гугл распознает через встроенный микрофон, может быть это разные опыты с альсой, может еще что то ковырял.

Это все попытки сделать и описать последовательность, что бы встало все на разных системах и работало, например на одинаковой системе, на одинаковых микрофонах у меня работает у Lanket не работает, если начинаем ковырять то все конечно работает, но хочу что бы все и у всех работало сразу.
Аватара пользователя
Ron
Сообщения: 480
Зарегистрирован: Пт окт 27, 2017 6:44 pm
Благодарил (а): 144 раза
Поблагодарили: 70 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение Ron » Пн июн 11, 2018 2:23 pm

Ок, ребят. Распишу по 3м способам и как руками все прикручивать. Но несколько позже, просто нужно что бы консоль и Алиска была перед носом,а я от нее далековато )))
Не до модулей мне, проще все в ручную,а там посмотрим что выйдет из нашего каменного цветка :)
dmnd
Сообщения: 2
Зарегистрирован: Вс июн 25, 2017 11:29 am
Благодарил (а): 0
Поблагодарили: 0

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение dmnd » Вт июн 12, 2018 7:54 am

На данный момент есть ошибка при передаче настроек с модуля Мажора на Orange PI.На апельсинке в файле settings.ini затираються некоторые настройки.В результате вылетает snowboy.py с ошибкой так как использует их в переменных.
C_3AXAPOB
Сообщения: 510
Зарегистрирован: Ср июн 08, 2016 4:17 pm
Благодарил (а): 124 раза
Поблагодарили: 101 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение C_3AXAPOB » Ср июн 13, 2018 12:28 am

Постоянно твердит, что не создан файл конфигурации или ошибка в файле. Файл есть, ошибок вроде нет.
УПД. Есть ошибка в ини файле, похоже, что модуль выдает старый ини. На гитхабе лежит ини с большим количеством полей.
Orange pi pc plus, megaD-2561, Xiaomi
--------------------------------------------------
http://connect.smartliving.ru/profile/908
DimSun75
Сообщения: 318
Зарегистрирован: Вс янв 01, 2017 8:32 pm
Откуда: Москва
Благодарил (а): 7 раз
Поблагодарили: 44 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение DimSun75 » Ср июн 13, 2018 3:31 pm

Мне эта ошибка с ini-файлом целый вечер мозг выносила, пака не разобрался и не дописал ini руками. Потом вроде запустилась.

Дальше тоже не очень пошло и я на все это забил, модуль очень сырой
C_3AXAPOB
Сообщения: 510
Зарегистрирован: Ср июн 08, 2016 4:17 pm
Благодарил (а): 124 раза
Поблагодарили: 101 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение C_3AXAPOB » Ср июн 13, 2018 3:42 pm

Тестирую на орнаж пи зеро Н3 плюс. После плясок с ини файлом пришёл черед микрофона. Почему-то никак не хочет слушать юсб микрофон. Встроенный микрофон записывает звук с каким-то треском.
ЮСБ микрофон такой
СпойлерПоказать
us1784-8-4_600.jpg
us1784-8-4_600.jpg (21.25 КБ) 4083 просмотра
Orange pi pc plus, megaD-2561, Xiaomi
--------------------------------------------------
http://connect.smartliving.ru/profile/908
devoff
Сообщения: 181
Зарегистрирован: Пт апр 04, 2014 10:17 pm
Благодарил (а): 37 раз
Поблагодарили: 54 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение devoff » Ср июн 13, 2018 8:54 pm

Странно, я вроде с нуля все ставлю и не вижу проблем.
Вы все по инструкции из гита ? она там новая и файлы новые.
Напишите мне в телеграмм, давайте вместе проверим все это.
Аватара пользователя
djprizrak
Сообщения: 64
Зарегистрирован: Пн фев 12, 2018 10:58 am
Благодарил (а): 3 раза
Поблагодарили: 17 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение djprizrak » Чт июн 14, 2018 12:28 pm

Ron писал(а):
Пн июн 11, 2018 2:23 pm
Ок, ребят. Распишу по 3м способам и как руками все прикручивать. Но несколько позже, просто нужно что бы консоль и Алиска была перед носом,а я от нее далековато )))
Не до модулей мне, проще все в ручную,а там посмотрим что выйдет из нашего каменного цветка :)
когда будет инструкция дайте знать, хочу поставить на tinker board + ps3 eye.
Аватара пользователя
Ron
Сообщения: 480
Зарегистрирован: Пт окт 27, 2017 6:44 pm
Благодарил (а): 144 раза
Поблагодарили: 70 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение Ron » Вт июн 19, 2018 9:32 pm

Ok, но правда это не очень скоро, даже НЕ скоро совсем...
Мсесяца 2 наверное.
я от реального домашенго не делаю ничего, от слова меня занесло как всегда к е@еням (острова Вьетнама).
Ответить