WhisperLib

🎤 WhisperLib

Мод для распознавания голоса на основе событий, использующий WhisperAI для преобразования аудио в текст. Форк VoskLib.

✨ Возможности

1. Офлайн-распознавание: Использует WhisperAI офлайн. Аудио не отправляется на серверы!
2. Полностью клиентский: Мод не запускает WhisperAI на каком-либо сервере Minecraft.
3. Встроенный менеджер моделей: Мод включает встроенный менеджер моделей.
4. Динамическая загрузка: Отображает доступные модели с HuggingFace.
5. Настраиваемые параметры микрофона: Добавлен экран настроек для регулировки параметров микрофона, которых ещё не было в VoskLib.
6. Функция безопасности: Мгновенно уведомляет вас, когда WhisperLib слушает.

📦 Установка для пользователей

1. Скачайте этот мод с Curseforge.
2. Запустите игру и нажмите кнопку Mods.
3. Найдите WhisperLib и нажмите Config.
4. Выберите свою модель и нажмите Download.
5. После загрузки нажмите на скачанную модель.
6. Нажмите Save & Exit.

Вот и всё.

🔨 Установка для разработчиков

1. Найдите build.gradle.

2. Добавьте следующее:

   dependencies {
       // ...your dependencies
       // Make sure it's in our Runtime (Do not shade these libraries)
       implementation 'io.github.givimad:whisper-jni:1.7.1'
       runtimeOnly 'io.github.givimad:whisper-jni:1.7.1'
   
       // Include the dev mod jar
       implementation fg.deobf(files("libs/whisperlib--dev.jar"))
   }

3. Соберите проект и проверьте, нет ли проблем.

4. Если они есть, свяжитесь со мной через личные сообщения на Curseforge или через issues на GitHub.

🔌 API WhisperLib

// Start Listening
VoiceManager.startListening();

// Stop Listening
VoiceManager.stopListening();

WhisperLib и VoskLib публикуют свои результаты в Forge Event Bus на стороне клиента.

@Mod.EventBusSubscriber(modid = "examplemod", bus = Mod.EventBusSubscriber.Bus.FORGE, value = Dist.CLIENT)
public class VoiceEvents {
    @SubscribeEvent
    public static void onResult(WhisperVoiceResult event) {
        // Get the full text. 
        String result = event.getText();

        if (result.toLowerCase().contains("hello")) {
            System.out.println("Hi!");
        }

        // Use the following method to exclude messages like:
        // [MUSIC], [upbeat music], etc. (does not exclude *laughing*)

        String filteredText = event.getSpokenText();
        // do more processing...
    }
}

📜 Благодарности

• Форк: VoskLib от InfinityTwo.
• WhisperAI API: OpenAI (WhisperAI)