بكين، 16 أكتوبر 2023 – أعلنت شركة WiMi Hologram Cloud Inc. (NASDAQ: WIMI) (“WiMi” أو “الشركة”)، مقدم عالمي رائد لتقنية الواقع الافتراضي المعزز بالهولوغرام (“AR”)، أنها طورت نظام متعدد الوسائط للتحكم بالدماغ عبر الجمع بين إشارات SSVEP وإشارات صور الحركة، بالإضافة إلى إدخال وحدة الخدمة البصرية لتحسين أداء الروبوت في تنفيذ مهام الإمساك. من خلال الجمع بين أنواع مختلفة من إشارات EEG، يمكن للمستخدمين التحكم في الروبوت بشكل أكثر حرية وبصيرة لتنفيذ أفعال متنوعة، مما يوفر تجربة خدمة أكثر إرضاء.

يشتمل نهج نظام التحكم بالدماغ متعدد الوسائط عبر الجمع بين إشارات SSVEP وإشارات صور الحركة مع وحدة الخدمة البصرية أساسًا على تصميم اكتساب الإشارة ومعالجتها وتوليد أوامر التحكم ووحدة الخدمة البصرية.

1. اكتساب الإشارة: يحتاج النظام أولاً إلى اكتساب إشارة EEG للمستخدم وإشارة التغذية الراجعة البصرية. من أجل تحقيق التحكم متعدد الوسائط، يقوم النظام باكتساب كل من إشارات SSVEP وإشارات صور الحركة.

اكتساب إشارات SSVEP: من خلال وضع قطب تخطيط كهربية الدماغ على جمجمة المستخدم، يمكن للنظام اكتساب إشارات SSVEP للمستخدم. SSVEP هي نوع من الجهد البصري المستحث بالموجات المتقاطعة، حيث يولد الدماغ إشارات كهربائية بتردد محدد عندما يركز بصر المستخدم على تردد محدد من منبهات الموجات المتقاطعة.

اكتساب إشارات صور الحركة: بالإضافة إلى إشارة SSVEP، يحتاج النظام إلى اكتساب إشارات صور الحركة للمستخدم. ويتحقق ذلك من خلال اكتساب إشارات صور الحركة للمستخدم عبر قطب تخطيط كهربية الدماغ في منطقة محددة. عندما يتخيل المستخدم حركة الإمساك، تُلتقط الإشارات المرتبطة بصور الحركة وتُستخدم لتوجيه الروبوت لتنفيذ عملية الإمساك.

معالجة الإشارة: بعد اكتساب الإشارة، يتعين معالجة وتحليل الإشارات EEG الخام المكتسبة لاستخلاص المعلومات المفيدة وإجراء عملية استخلاص الميزات والتصنيف للتعرف على نية المستخدم.

معالجة إشارات SSVEP: بالنسبة لإشارات SSVEP، يحتاج النظام أولاً إلى تصفية ومعالجة مسبقة للإشارة الأصلية للتخلص من الضوضاء والتداخلات. ثم، من خلال استخلاص الميزات الطيفية، يتم التعرف على أي تردد يركز عليه بصر المستخدم حاليًا، لتحديد ما إذا كانت نية المستخدم هي التحرك إلى الأمام أو اليسار أو اليمين.

معالجة إشارات صور الحركة: بالنسبة لإشارات صور الحركة، يحتاج النظام إلى معالجة مسبقة للإشارات الخام للتخلص من الضوضاء والتداخلات. ثم يتم التعرف على حركات المستخدم المتخيلة، مثل حركة الإمساك، من خلال استخلاص الميزات والتصنيف.

في نظام WiMi متعدد الوسائط للتحكم بالدماغ عبر الجمع بين إشارات SSVEP وإشارات صور الحركة مع وحدة الخدمة البصرية، يعد توليد أوامر التحكم الجزء الرئيسي من النظام بأكمله. يشتمل توليد أوامر التحكم على تحليل الإشارات المعترف بها من EEG وربطها بالأفعال المقابلة للروبوت.

3. توليد أوامر التحكم: بعد التعرف على نية المستخدم، يقوم النظام بتوليد أوامر تحكم مقابلة وفقًا للنتائج المحصل عليها، للتحكم في أفعال الروبوت.

توليد أوامر تحكم SSVEP: بالنسبة لإشارات SSVEP، يستخدم النظام تحليل الطيف لمعالجة الإشارات. يستخلص التحليل الطيفي أي تردد يركز عليه بصر المستخدم حاليًا. ترتبط منبهات مختلفة مقدمة على الواجهة البصرية بحركات مختلفة للروبوت، مثل التحرك إلى الأمام أو اليسار أو اليمين. من خلال التعرف على التردد الذي يركز عليه بصر المستخدم، يكون النظام قادرًا على تحديد نية المستخدم وتوليد أوامر تحكم مقابلة على النحو المناسب.

توليد أوامر تحكم صور الحركة: بالنسبة لإشارات صور الحركة، يستخدم النظام تقنيات استخلاص الميزات والتصنيف للتعرف على حركات المستخدم المتخيلة. عندما يتخيل المستخدم حركة الإمساك، تُلتقط إشارات صور الحركة المحددة. يقوم النظام بالتعرف على هذه الميزات من خلال تدريب خوارزميات التعلم الآلي ويولد أوامر تحكم مقابلة وفقًا لنتائج التعرف لتوجيه الروبوت لتنفيذ حركة الإمساك.

4. تصميم وحدة الخدمة البصرية: تم تصميم وحدة الخدمة البصرية لتحسين أداء ودقة الروبوت في تنفيذ مهمة الإمساك. يمكن لهذه الوحدة تعديل موقف وقوة الإمساك للروبوت على الفور، مما يجعل عملية الإمساك أكثر دقة وموثوقية. تقوم وحدة الخدمة البصرية بالتقاط التغذية الراجعة البصرية الفورية من الروبوت أثناء تنفيذه لمهمة الإمساك من خلال الكاميرا ودمجها مع إشارة صور الحركة للمستخدم للتعديل الديناميكي.

مع وحدة الخدمة البصرية، يمكن لنظام WiMi متعدد الوسائط للتحكم بالدماغ عبر الجمع بين إشارات SSVEP وإشارات صور الحركة مع وحدة الخدمة البصرية التكيف بشكل أكثر مرونة مع سيناريوهات الإمساك المختلفة ونوايا المستخدم، مما يوفر تجربة خدمة ذات جودة أعلى. يعزز إدخال هذه الوحدة الاستقلالية والقدرة على التكيف للروبوت لتنفيذ مهام الإمساك، مما يمكّن النظام من تحقيق التحكم متعدد الوسائط بشكل أكثر تعقيدًا وطبيعية.

عادة ما توفر أنظمة التحكم بالدماغ التقليدية عددًا محدودًا فقط من أوامر التحكم، ما يقيّد طريقة تفاعل المستخدم مع الروبوت. يجمع نظام WiMi متعدد الوسائط للتحكم بالدماغ عبر الجمع بين إشارات SSVEP وإشارات صور الحركة مع وحدة الخدمة البصرية بين أنواع مختلفة من إشارات EEG لتمكين أوامر تحكم أكثر غنى وتنوعًا، مما يسمح للمستخدمين بتصور حركات مختلف