โครงการนี้มุ่งพัฒนาระบบ AI แบบมีตัวตนรุ่นใหม่ซึ่งเน้นการโต้ตอบหลายรูปแบบ การแสดงออกทางศิลปะ และการรับรู้ที่ดีขึ้น โดยเสวียป้า 01 จะเรียนรู้การเคลื่อนไหว ท่วงท่า และเทคนิคการแสดงขั้นพื้นฐานของงิ้วจีนแบบดั้งเดิม
หุ่นยนต์ตัวนี้มีโครงสร้างไบโอนิกน้ำหนักเบา ใช้เทคโนโลยีใบหน้าคล้ายมนุษย์ สามารถทำการเคลื่อนไหวที่ละเอียดอ่อน แสดงสีหน้าเสมือนจริงกว่า 100 แบบ ตลอดจนโต้ตอบและปรับการแสดงตามฟีดแบ็กของผู้ชมได้แบบเรียลไทม์
ตอนนี้เสวียป้า 01 สามารถขับร้องเนื้อเพลงจากงิ้วเหอหนาน งิ้วเซี่ยงไฮ้ และงิ้วปักกิ่งได้แล้ว แต่การเคลื่อนไหวยังขาดความลื่นไหลและสุนทรียภาพ จึงจำเป็นต้องเรียนรู้จากนักแสดงมืออาชีพ โดยทีมงานใช้เทคโนโลยีจับการเคลื่อนไหว เพื่อบันทึกท่าทางและสีหน้า ของนักแสดงมนุษย์สำหรับนำไปสร้างชุดข้อมูลฝึกสอน ส่วนในอนาคต หุ่นยนต์อาจเรียนรู้โดยตรงจากวิดีโอ
เครดิต: สำนักข่าวซินหัว