لا يحب مستخدمو أجهزة الواقع المعزز (AR) لوحات المفاتيح الافتراضية. فالكتابة عليها بطيئة ومليئة بالأخطاء، كما أن رفع يدك باستمرار في الهواء يسبب شدًا عضليًا، وهو ما يسمى في البيئة الناطقة باللغة الإنجليزية بـ “متلازمة الغوريلا”.

في جامعة تكساس في دالاس لقد طورنا واجهة فريدة تسمح لك بتحويل أي عنصر يومي إلى لوحة مفاتيح افتراضية في الواقع المعزز. تسمى هذه التقنية PropType، وقد تم تقديم طلب للحصول على براءة اختراع.

أي عنصر

وأوضح جين ريونغ كيم من قسم علوم الكمبيوتر في كلية إريك جونسون للهندسة وعلوم الكمبيوتر: “من خلال دمج الكائنات حول المستخدم، يفتح PropType نهجًا جديدًا لإدخال النص في الواقع المعزز، مما يخلق اتصالًا سلسًا بين العالمين المادي والافتراضي. ويستخدم PropType الأحاسيس اللمسية للأشياء نفسها، مما يوفر تأكيدًا صحفيًا أكثر وضوحًا ويقلل الاعتماد على الإشارات المرئية”.

توفر هذه التقنية بديلاً لحلول الكتابة بالواقع المعزز الشائعة، مثل لوحات المفاتيح الفعلية الخارجية، التي تقلل من التجربة الغامرة للبيئات الخالية من الأجهزة.

“يستفيد PropType من عادتنا الطبيعية المتمثلة في الإمساك بالأشياء في أيدينا ويصبح بديلاً أكثر سهولة وسهولة في الوصول إلى لوحات المفاتيح التقليدية – خاصة عندما تكون في حالة تنقل أو تكون يداك ممتلئتين وتكون طرق الإدخال التقليدية غير مجدية،” قال كيم.

كان PropType قدم في المؤتمر الرائد عالميًا حول التفاعل بين الإنسان والحاسوب، ومؤتمر ACM CHI حول العوامل البشرية في أنظمة الحوسبة في يوكوهاما (وفاز بجائزة هناك)، وفي ندوة ACM السنوية الثامنة والثلاثين حول تقنيات برمجيات واجهة المستخدم في بوسان.

واجه مطورو PropType عددًا من التحديات، مثل تكييف الواجهة مع كائنات ذات أشكال وأحجام مختلفة. لقد درسوا كيفية تفاعل 16 مشاركًا مع الأشياء لفهم حركات الكتابة والإيماءات. وبناءً على ذلك، قمنا بإنشاء تخطيطات خاصة للوحة المفاتيح لكائنات مختلفة. يتضمن النظام أيضًا محررًا يسمح للمستخدمين بتخصيص التخطيطات والمؤثرات المرئية.

الواقع الملموس

تركز أبحاث مختبر كيم على اللمس، وهو حاسة اللمس والتغذية الراجعة المادية في الأنظمة الرقمية.

وقال: “يحمل اللمس الكثير من المعلومات، وهو شكل آخر من أشكال الاتصال لم يتم استكشافه بعد في الواقع الافتراضي والواقع المعزز”.

تشمل إنجازات الفريق جوائز للعمل على الإخفاء الحراري والتكامل الحراري، الذي يستخدم الظواهر الإدراكية لخداع الدماغ. في التجربة، تم وضع مشغل حراري وملموس على يد الشخص المعني، وعندما تم تفعيلهما في وقت واحد، شعر بالحرارة في كلا المكانين.

واختتم كيم حديثه قائلاً: “من خلال فهم كيف يمكن للإشارات اللمسية أن تغير الإدراك الحراري، سنكون قادرين على إنشاء واجهات غامرة تمامًا. وهذا يفتح آفاقًا رائعة للواقع الافتراضي والمحاكاة الطبية والتطبيقات الأخرى حيث يكون من المهم خلق تأثير اللمس الكامل تقريبًا”.