Перейти к содержанию
Все проекты

Платформы: Windows · Linux · macOS

Пока не опубликовано

Hyperscribe Companion

Переносит распознавание речи Hyperscribe на видеокарту компьютера — субтитры быстрее.

Доступность

Проект пока не доступен публично. Посмотрите демонстрацию и описание или напишите мне о нём.

Окно Hyperscribe Companion трижды: приветствие с загрузкой модели, живая расшифровка и настройки вычислений

Что это

Необязательный ускоритель Hyperscribe для компьютера. Телефон передаёт звук с микрофона очков на компьютер через Tailscale, Companion распознаёт речь на видеокарте и возвращает субтитры на телефон и линзу.

Одна модель на всех платформах: NVIDIA Nemotron 3.5 ASR, 32 языковые локали, включая русский, украинский, китайский, японский и корейский, с пунктуацией. Слова доходят до телефона примерно через десятую долю секунды.

Hyperscribe работает и без него: у телефона есть офлайн-запас, и он переподключается, когда компьютер снова в сети. Companion держит звук и живую расшифровку только в памяти; записи сохраняются на телефоне.

Что умеет

  • Любая видеокарта или без неё

    NVIDIA через CUDA, AMD через ROCm или Vulkan, Intel через Vulkan, Apple silicon через Metal. Без подходящей видеокарты работает на процессоре — на современном компьютере всё равно в реальном времени.

  • Потоковое распознавание

    Слово закрепляется примерно через 0,3 с после того, как его произнесли, и больше не переписывается.

  • Приватно по умолчанию

    Доступен только на этом компьютере и в вашей сети Tailscale по HTTPS, никогда — из открытого интернета. Незашифрованный доступ по локальной сети выключен, пока вы сами его не включите.

  • И на серверах без экрана

    На сервере с видеокартой без монитора он печатает адрес для подключения и QR-код прямо в терминале.

Экраны

Приветствие: «Этот компьютер слушает», модель речи и кнопка Download 751 MB and start
Live: расшифровка, которую получает телефон, с устройством и временем обновления
Настройки: модель, вычислительный бэкенд и сервер

Что понадобится

  • Windows 10 или 11, Linux (x86_64 или arm64) или Mac на Apple silicon
  • Желательна видеокарта (NVIDIA, AMD, Intel или Apple), но можно и без неё
  • Около 1 ГБ свободного места для модели речи
  • Tailscale на компьютере и телефоне и Hyperscribe в очках G2

Что нового

  1. В следующей версии

    • Одна модель везде: NVIDIA Nemotron 3.5 ASR с потоковым распознаванием, слова закрепляются примерно за 0,3 с.
    • Поддержка Windows и Linux: CUDA, ROCm, Vulkan, Metal и процессор.
    • Режим без окна для машин без монитора и самопроверка.
  2. 0.1.0

    • Первый выпуск в исходниках для Mac на Apple silicon, подключение по QR-коду через Tailscale.

Другие проекты

  • Hypernova

    Пульт для Claude Code: на телефоне, в строке меню Mac и в очках.

  • Hyperscribe

    Живые субтитры в очках G2. Речь распознаётся на ваших устройствах, а не в облаке.

  • Hypernavigate

    Офлайн 3D-навигация по Петербургу на линзе умных очков.