สิทธิบัตรนวัตกรรมของ Sony มีวัตถุประสงค์เพื่อเพิ่มความสามารถในการเข้าถึงนักเล่นเกมคนหูหนวกโดยการแนะนำการแปลภาษามือในเกมแบบเรียลไทม์ เทคโนโลยีที่ก้าวล้ำนี้เชื่อมช่องว่างการสื่อสารระหว่างผู้เล่นที่ใช้ภาษาเซ็นที่แตกต่างกัน
Sony ได้ยื่นรายละเอียดสิทธิบัตรเมื่อเร็ว ๆ นี้เป็นระบบสำหรับการแปลภาษาลายเซ็นแบบเรียลไทม์ภายในวิดีโอเกม สิทธิบัตรที่มีชื่อว่า "การแปลภาษามือในสภาพแวดล้อมเสมือนจริง" มุ่งเน้นไปที่การแปลระหว่างภาษาลายมือเช่นภาษามืออเมริกัน (ASL) และภาษามือญี่ปุ่น (JSL)
ระบบที่มองเห็นช่วยอำนวยความสะดวกในการสื่อสารในเกมสำหรับนักเล่นเกมคนหูหนวกโดยให้การแปลภาษามือทันที อวตารหรือตัวบ่งชี้บนหน้าจอจะแสดงท่าทางภาษามือที่แปลได้แบบไดนามิก กระบวนการนี้เกี่ยวข้องกับการแปลสามขั้นตอน: ท่าทางลงชื่อจะถูกแปลงเป็นข้อความก่อนจากนั้นแปลเป็นภาษาเป้าหมายและในที่สุดก็แสดงเป็นท่าทางลงชื่อในภาษามือเป้าหมาย
ตามรายละเอียดในสิทธิบัตร "การใช้งานของการเปิดเผยข้อมูลในปัจจุบันเกี่ยวข้องกับวิธีการและระบบสำหรับการจับภาษามือจากผู้ใช้รายหนึ่งและแปลให้ผู้ใช้รายอื่นในภาษามือดั้งเดิมของพวกเขา" นี่เป็นความต้องการที่สำคัญสำหรับการแปลที่ถูกต้องเนื่องจากความแปรปรวนทางภูมิศาสตร์ในภาษาเซ็น
Sony เสนอการใช้ชุดหูฟัง VR หรือจอแสดงผลที่ติดตั้งบนหัว (HMDS) เป็นวิธีการป้อนข้อมูลหลัก HMDs เหล่านี้จะเชื่อมต่อกับอุปกรณ์ผู้ใช้ (พีซีคอนโซลเกม ฯลฯ ) เพื่อให้สภาพแวดล้อมเสมือนจริงที่ดื่มด่ำ สิทธิบัตรเพิ่มเติมแนะนำระบบเครือข่ายซึ่งอาจใช้แพลตฟอร์มเกมคลาวด์ซึ่งอุปกรณ์ผู้ใช้สื่อสารกับเซิร์ฟเวอร์เกมเพื่อแชร์และซิงโครไนซ์สถานะเกมทำให้สามารถโต้ตอบระหว่างผู้เล่นได้อย่างราบรื่น
วิธีการที่ใช้เซิร์ฟเวอร์นี้อาจรวมเข้ากับการเล่นเกมคลาวด์ช่วยให้การแสดงผลที่มีประสิทธิภาพและการสตรีมของภาษามือที่แปลระหว่างผู้ใช้ในสภาพแวดล้อมเสมือนจริงที่ใช้ร่วมกัน เทคโนโลยีที่เป็นนวัตกรรมนี้สัญญาว่าจะปฏิวัติการเข้าถึงในเกมออนไลน์สำหรับชุมชนคนหูหนวกทั่วโลก