RobotVRM Initial Model Mina für PC

Diese Anwendung dient einem einfachen Test der „Initial Model Mina“-Version des Open-Source-RobotVRM, das darauf abzielt, Smartphones in LLM-Roboter zu verwandeln.
https://github.com/saten-private/RobotVRM

Aufgrund der Kosten für die Wartung des RobotVRM-Servers und anderer Umgebungen ist diese App leider etwas kostenpflichtig. Sie können sie jedoch kostenlos ausführen, wenn Sie die oben genannte Open Source selbst einrichten.

********** Wichtig **********
Um diese App nutzen zu können, benötigen Sie einen separaten API-Schlüssel wie Anthropic oder OpenAI. (Anthropisch wird empfohlen).
Die API-Gebühr ist in dieser App nicht enthalten.
* Bitte beachten Sie, dass sich die API-Gebühr erhöhen kann, wenn Sie die Anwendung über einen längeren Zeitraum ausführen.
Die API-Gebühr, um RobotVRM auf Claude 3 Haiku laufen zu lassen (die Sprachsynthese ist auf dem Heimserver kostenlos), betrug weniger als 5 US-Dollar pro Stunde, wie im Video gezeigt. (Die von uns getestete Umgebung war die Version von „RobotVRM Initial Model Mina“ vom 19.11.2024)
* Gemini wird in der Store-Version nicht unterstützt, bitte verwenden Sie die OSS-Version.

Wenn Sie Audio wiedergeben möchten, benötigen Sie eine separate Umgebung zur Audiogenerierung, z. B. einen Style-Bert-VITS2-Server usw.
Mit dem API-Schlüssel von ElevenLabs können Sie ganz einfach Sprache generieren, die API-Gebühr ist jedoch nicht in dieser Anwendung enthalten.
********** Wichtig **********

Das Roboterauto im Video wurde für etwa 50 US-Dollar mit dem folgenden Arduino OSOYOO-Roboterauto gekauft und zusammengebaut, mit dem unten enthaltenen Bluetooth-Gerät verbunden und die App steuert das Roboterauto.
Diese App unterstützt auf der Seite des Roboterautos nur HC-02 (das im Folgenden enthaltene Bluetooth-Gerät).
https://osoyoo.com/2020/05/22/osoyoo-model-3-v2-0-robot-learning-kit/

Das Programm zur Installation von Arduino kann hier heruntergeladen werden
https://github.com/saten-private/RobotVRM/tree/first/Arduino

Das Telefon wird am Roboterauto befestigt, indem die L-förmige Halterung mit dem mitgelieferten Klebeband am Roboterauto befestigt und dann mit einem Gummiband befestigt wird, wie im Video gezeigt.
* Alles funktioniert, solange es repariert werden kann.
https://watts-online.jp/products/17539?srsltid=AfmBOorxREF7DXRADdJxEtMRO_0XfOGa0fC-jbt4V3DFVtg1LPHPnbcg

Diese App basiert auf dem Open-Source-Aituber-Kit von Nike-chan (ungefähr zur Zeit der MIT-Lizenz, vor dem 25.09.2024) und basiert auf ChatVRM von pixiv.

Nike-chans X-Konto
https://x.com/tegnike

aituber-kit (zum Zeitpunkt der MIT-Lizenz, vor dem 25.09.2024)
https://github.com/tegnike/aituber-kit/tree/5c1be3dae7e38871839f37857e550b8f7387f718

ChatVRM
https://github.com/pixiv/ChatVRM


Die Betriebsumgebung für die Videos ist wie folgt

LLM: Claude 3 Haiku
Sprachgenerator: ElevenLabs/Jesica

Die Charaktere von „Initial Model Mina“ sind kostenlos und können von Einzelpersonen und Unternehmen für kommerzielle Zwecke genutzt werden, sofern die Nutzung nicht gegen die öffentliche Ordnung und die guten Sitten verstößt. Auch Änderungen und Weiterverbreitungen sind möglich, also nutzen Sie diese bitte! Eine Bonitätsauskunft ist nicht erforderlich.
Weitere Einzelheiten finden Sie in den folgenden „Nutzungsbedingungen für Charaktere in diesem Repository“.
https://github.com/saten-private/RobotVRM