Главная
>
Смешные картинки
>
голосовой помощник
голосовой помощник
Подписчиков: 0 Сообщений: 16 Рейтинг постов: 387.0
нейронные сети talk-llama-fast голосовой помощник github
Разработчик собрал видео-ассистента с поддержкой множественных персонажей.
" Работает на 3060 12 GB, Nvidia на 8 GB, скорее всего, тоже хватит.
Из-за записи экрана есть небольшие задержки.Без записи и на английском языке полная задержка от голосовой команды до видео ответа - всего 1.5 секунды! "
Код, exe, инструкция:https://github.com/Mozer/talk-llama-fast
Автор пишет: " Talk-llama-fast с поддержкой wav2lip:
- добавил поддержку XTTSv2 и wav-streaming.
- добавил липсинк с видео через wav2lip-streaming.
- уменьшил задержки везде где только мог.
- русский язык и UTF-8.
- поддержка множественных персонажей.
- остановка генерации при обнаружении речи.
- команды: Google, стоп, переделай, удали всё, позови.
Под капотом:
- STT: whisper.cpp large
- LLM: Mistral-7B-v0.2-Q5_0.gguf
- TTS: XTTSv2 wav-streaming
- lipsync: wav2lip-streaming
- Google: langchain google-serp "
Алёха голосовой помощник ФСИН ИА «Панорама» Инновации
ФСИН создаст голосовой помощник «Алёха»
Приложение сможет ответить на вопросы о правилах поведения в колонии, мастях заключённых, об основных положениях закона и не только.
«Алёха» будет тесно интегрирован с приложением «Мой донос», рассказал глава отдела программной разработки ФСИН Евгений Никифоренко. С 1 января граждане смогут отслеживать ход возбуждённого в их отношении уголовного дела с момента поступления доноса и до конца отбытия наказания в колонии.
Голосовой помощник сможет ответить на наиболее частые вопросы о правилах поведения в колонии, о мастях заключённых, об основных положениях закона и не только. Также «Алёха» будет помогать заключённым составлять обращения к администрации колонии, жалобы, благодарственные письма и заявления об УДО. Первой колонией, в которой в тестовом режиме будет введено использование «Алёхи», станет ИК-2 во Владимирской области.
«Конечно, по регламенту смартфоны заключённым не положены. Голосовой помощник начнёт с того, что разъяснит им это правило, – поясняет Евгений Никифоренко. - Пользоваться «Алёхой» они смогут в красном уголке в строго установленное время и под присмотром сотрудника колонии. Технология существенно повысит юридическую грамотность осуждённых и избавит работников ФСИН от необходимости бесконечно разъяснять одни и те же правила. Если эксперимент в ИК-2 будет призван удачным, «Алёха» появится и в других колониях на территории страны»
Отличный комментарий!