RobotVRM Initial Model Mina เวอร์ชั่น PC

แอปพลิเคชันนี้มีไว้สำหรับการทดสอบอย่างง่าย ๆ ของ RobotVRM โอเพ่นซอร์สเวอร์ชัน "Initial Model Mina" ซึ่งมีจุดมุ่งหมายเพื่อเปลี่ยนสมาร์ทโฟนให้เป็นหุ่นยนต์ LLM
https://github.com/saten-private/RobotVRM

ขออภัย แอปนี้มีค่าใช้จ่ายเล็กน้อยเนื่องจากค่าใช้จ่ายในการบำรุงรักษาเซิร์ฟเวอร์ RobotVRM และสภาพแวดล้อมอื่นๆ แต่คุณสามารถใช้งานได้ฟรีหากคุณตั้งค่าโอเพ่นซอร์สข้างต้นด้วยตนเอง

********** สำคัญ **********
หากต้องการใช้แอพนี้ คุณจะต้องมีคีย์ API แยกต่างหาก เช่น Anthropic หรือ OpenAI (แนะนำให้ใช้มานุษยวิทยา)
ค่าธรรมเนียม API ไม่รวมอยู่ในแอพนี้
* โปรดทราบว่าค่าธรรมเนียม API อาจเพิ่มขึ้นหากคุณใช้งานแอปพลิเคชันเป็นเวลานาน
ค่าธรรมเนียม API เพื่อให้ RobotVRM ทำงานบน Claude 3 Haiku (การสังเคราะห์เสียงฟรีบนโฮมเซิร์ฟเวอร์) น้อยกว่า US $5 ต่อชั่วโมง ดังที่แสดงในวิดีโอ (สภาพแวดล้อมที่เราทดสอบคือเวอร์ชันของ “RobotVRM Initial Model Mina” ณ วันที่ 11/11/2024)
* Gemini ไม่รองรับในเวอร์ชันร้านค้า โปรดใช้เวอร์ชัน OSS

หากคุณต้องการเล่นเสียง คุณจะต้องมีสภาพแวดล้อมแยกต่างหากสำหรับการสร้างเสียง เช่น เซิร์ฟเวอร์ Style-Bert-VITS2 เป็นต้น
คุณสามารถสร้างเสียงได้อย่างง่ายดายโดยใช้คีย์ API ของ ElevenLabs แต่ค่าธรรมเนียม API จะไม่รวมอยู่ในแอปพลิเคชันนี้
********** สำคัญ **********

รถหุ่นยนต์ในวิดีโอถูกซื้อและประกอบกับรถหุ่นยนต์ Arduino OSOYOO ต่อไปนี้ในราคาประมาณ 50 ดอลลาร์สหรัฐ โดยเชื่อมต่อกับอุปกรณ์บลูทูธด้านล่าง และแอปจะควบคุมรถหุ่นยนต์
แอพนี้รองรับเฉพาะ HC-02 (อุปกรณ์ Bluetooth ที่รวมอยู่ในรายการต่อไปนี้) ที่ฝั่งรถหุ่นยนต์
https://osoyoo.com/2020/05/22/osoyoo-model-3-v2-0-robot-learning-kit/

สามารถดาวน์โหลดโปรแกรมติดตั้ง Arduino ได้จาก
https://github.com/saten-private/RobotVRM/tree/first/Arduino

โทรศัพท์ถูกยึดเข้ากับรถหุ่นยนต์โดยติดฉากยึดรูปตัว L เข้ากับรถหุ่นยนต์ด้วยเทปที่มาพร้อมกับรถหุ่นยนต์ แล้วรัดด้วยหนังยางดังที่แสดงในวิดีโอ
* สิ่งใดจะทำได้ตราบเท่าที่สามารถแก้ไขได้
https://watts-online.jp/products/17539?srsltid=AfmBOorxREF7DXRADdJxEtMRO_0XfOGa0fC-jbt4V3DFVtg1LPHPnbcg

แอปนี้อิงตามโอเพ่นซอร์ส aituber-kit ของ Nike-chan (ประมาณระยะเวลาของใบอนุญาต MIT ก่อนปี 2024/9/25) อิงจาก ChatVRM ของ pixiv

บัญชี X ของ Nike-chan
https://x.com/tegnike

aituber-kit (ณ เวลาที่ได้รับอนุญาตของ MIT ก่อน 2024/9/25)
https://github.com/tegnike/aituber-kit/tree/5c1be3dae7e38871839f37857e550b8f7387f718

แชท VRM
https://github.com/pixiv/ChatVRM


สภาพแวดล้อมการทำงานของวิดีโอมีดังนี้

LLM: คลอดด์ 3 ไฮกุ
เครื่องกำเนิดเสียง: ElevenLabs/Jesica

ตัวละครของ “Initial Model Mina” นั้นไม่มีค่าใช้จ่าย และสามารถใช้เพื่อวัตถุประสงค์ทางการค้าโดยบุคคลและองค์กรได้ ตราบใดที่การใช้งานไม่ขัดต่อความสงบเรียบร้อยและศีลธรรมอันดีของประชาชน การปรับเปลี่ยนและการแจกจ่ายซ้ำยังเป็นไปได้ ดังนั้นโปรดใช้มัน! ไม่จำเป็นต้องมีการบันทึกเครดิต
สำหรับรายละเอียดเพิ่มเติม โปรดดูที่ "ข้อกำหนดการใช้อักขระในพื้นที่เก็บข้อมูลนี้" ต่อไปนี้
https://github.com/saten-private/RobotVRM