[Модуль] [Железо] Голосовое управление по ключевому слову на базе Orange Pi Zero и аналогов

Разработка дополнительных модулей, подключение различных приложений.

Модератор: immortal

Аватара пользователя
Kvantos
Сообщения: 295
Зарегистрирован: Вт окт 31, 2017 1:05 pm
Благодарил (а): 26 раз
Поблагодарили: 49 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение Kvantos » Пт май 18, 2018 8:47 am

lanket писал(а):
Чт май 17, 2018 7:10 pm
Хотим сделать heartbeat, мажор будет видеть что ассистент живой
+1
нужная и полезная вещь!

ps может простые пинги решат проблему зависонов?
За это сообщение автора Kvantos поблагодарил:
TurburatoR (Вт май 22, 2018 6:03 pm)
Рейтинг: 1.16%
MDM живет на 4.9.0-8-amd64 #1 SMP Debian 4.9.130-2 (2018-10-27) x86_64 GNU/Linux
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Пт май 18, 2018 9:46 am

Kvantos писал(а):
lanket писал(а):
Чт май 17, 2018 7:10 pm
Хотим сделать heartbeat, мажор будет видеть что ассистент живой
+1
нужная и полезная вещь!

ps может простые пинги решат проблему зависонов?
Постоянный пинг это уже цикл ещё придётся делать или ручками в устройства онлайн прописывать . В принципе как эксперемент сейчас добавлю в устройства онлайн посмотрим на выживаемость.

Отправлено с моего Redmi Note 4 через Tapatalk

Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
Kvantos
Сообщения: 295
Зарегистрирован: Вт окт 31, 2017 1:05 pm
Благодарил (а): 26 раз
Поблагодарили: 49 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение Kvantos » Пт май 18, 2018 9:56 am

к стати, а выключение энергосберегающего режима вифи не пробовали?
iwconfig wlan0 power off
MDM живет на 4.9.0-8-amd64 #1 SMP Debian 4.9.130-2 (2018-10-27) x86_64 GNU/Linux
skysilver
Сообщения: 3006
Зарегистрирован: Чт авг 21, 2014 8:28 am
Откуда: Киров, Россия
Благодарил (а): 400 раз
Поблагодарили: 1753 раза
Контактная информация:

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение skysilver » Пт май 18, 2018 10:57 am

lanket писал(а):
Чт май 17, 2018 7:10 pm
Хотим сделать heartbeat, мажор будет видеть что ассистент живой
Верное решение. За одним в heartbeat передавать метрики аптайма апельсины и температуры проца. А на стороне модуля дать возможность привязать к этим метрикам свои свойства объектов для дальнейшей обработки данных.
MajorDoMo (GitHub) на Cubietruck. ОС Debian 7 (wheezy) (kernel 3.4.105) с переносом на HDD.
Мой CONNECT | Блоги | Telegram
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Пт май 18, 2018 10:36 pm

Немного вперёд.
Сегодня протестировал эксперементальную функцию.

Сноубою сгенирил 6 моделей ключевого слова. Свой, супруги и сына, каждому по 'Алиса послушай' и 'Слушай Алиса'. Настроил передачу голосовой команды мажору вместе с системным именем пользователя мажора.

Неплохой результат. Из примерно 15 попыток 2 раза ошиблась назвав Даню (моего сына) Настей (моя супруга). И то когда он говорил далековато, видимо потому что супруги записи были изначально тише остальных. Меня ни разу не спутала. Дальность с китайским микрофоном не очень, метра полтора. Распознование текста отличное.
СпойлерПоказать
Изображение

Изображение

Изображение

Изображение
Отправлено с моего Redmi Note 4 через Tapatalk

За это сообщение автора lanket поблагодарил:
Ron (Вт май 22, 2018 1:31 pm)
Рейтинг: 1.16%
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Аватара пользователя
djprizrak
Сообщения: 64
Зарегистрирован: Пн фев 12, 2018 10:58 am
Благодарил (а): 3 раза
Поблагодарили: 17 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение djprizrak » Сб май 19, 2018 9:15 am

После вопроса "Сколько времени" и ответа " Как скажите, сметану заказала" только дошло что скриншоты надо читать снизу в вверх)
Screamer_dot
Сообщения: 5
Зарегистрирован: Вт апр 03, 2018 10:51 am
Благодарил (а): 5 раз
Поблагодарили: 0

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение Screamer_dot » Сб май 19, 2018 12:01 pm

Эти вопросы задавались с одного терминала? Или с разных? Прошу прощения если не уследил параметры эксперимента.
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Сб май 19, 2018 1:30 pm

Screamer_dot писал(а):Эти вопросы задавались с одного терминала? Или с разных? Прошу прощения если не уследил параметры эксперимента.
С одного.

Отправлено с моего Redmi Note 4 через Tapatalk

Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
rom77
Сообщения: 28
Зарегистрирован: Вт май 15, 2018 12:16 pm
Благодарил (а): 1 раз
Поблагодарили: 1 раз

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение rom77 » Вт май 22, 2018 10:26 am

Привет. Есть какиенибудь новости? Про отваливающийся вайфай и работу на 3 а блоке питания? Не подскажите будет ли образ системы? Возможность подключить ps3 ай в качестве микрофона и на сколько это сложно? И как по качеству по сравнению с usb микрофоном?
Аватара пользователя
lanket
Сообщения: 1168
Зарегистрирован: Вт окт 14, 2014 11:27 pm
Откуда: Санкт-Петербург
Благодарил (а): 260 раз
Поблагодарили: 163 раза

Re: Голосовое управление по ключевому слову на базе Апельсинки Зеро

Сообщение lanket » Вт май 22, 2018 7:01 pm


rom77 писал(а):Привет. Есть какиенибудь новости?...
На данный момент мы оба отвлечены осоновной деятельностью. Но дело не стоит. Я по немногу пишу функционал обучения ключевым словам.
Чтобы можно было задавать несколько вариантов ключевых слов, и чтобы ассистент смог различать пользователей по голосу.
Модели голосов храниться должны на мажоре, чтобы не пришлось каждого ассистента обучать, а нового включил залил ему модели и он готов.
rom77 писал(а):... Про отваливающийся вайфай и работу на 3 а блоке питания?...
Пока неутишительно.
Пробовал с радиатором, с вентилятором, без корпуса и фирменным блоком питания и шнуром от ксиоми. Не помогло.
Умный человек предложил попробовать заведома мощный бп и ups. Мысль имеет право жизнь так как я живу загородом.

Но есть мысли что это глюк дров. Поэтому будем ещё пробовать heartbeat.

rom77 писал(а):... Не подскажите будет ли образ системы?...
Будет, конечно будет. Плсле решения 2х проблем. Первая с отваливанием wifi. Вторая это непонятная работа сноубоя с юзб микрофонами, хочется добиться чтобы он автоматом выбирал воткнутый микрофон.
rom77 писал(а):... Возможность подключить ps3 ай в качестве микрофона и на сколько это сложно? ...
Он же вроде как обычная вебкамера с микрофоном. Соответственно проблем не должно быть, вроде кто-то на форуме уде пользовался им для подобных целей.
rom77 писал(а):...И как по качеству по сравнению с usb микрофоном?

У меня нет ps3 eye поэтому мне не сравнить, но говорят что на порядок лучше чем usb микрофона за 0.4-3$

Сам хочу заказать для эксперементов.

Отправлено с моего Redmi Note 4 через Tapatalk

За это сообщение автора lanket поблагодарил:
Ron (Вт май 22, 2018 7:18 pm)
Рейтинг: 1.16%
Разработка голосового асистента для Мажордомо по любому ключевому слову.
:arrow: Обсужение
:arrow: gitHub 2й версии терминала
:arrow: GitHub модуля для МД
gitHub сырого модуля 2й версии
:arrow: Connect
Rasberry Pi 2, MDM, MySensors. И говорящий апельсин.
Ответить