نظارات ذكية تقدم مساعدة افتراضية للأشخاص ذوي الإعاقة البصرية عبر الذكاء الاصطناعي أطلقتها Envision ، التي تبتكر التقنيات المساندة للأشخاص ذوي الإعاقة البصرية . ميزة جديدة قوية في نظارات ذكية تعمل بالذكاء الاصطناعي، التي توفر مساعدة افتراضية لمن يرتديها حول العالم من حولهم.
لعبة Ask Envision
تشتمل نظاراتها على ميزة “تغيير اللعبة” تسمى Ask Envision ، والتي تستفيد من الذكاء الاصطناعي GPT-4 لتقديم مساعدة افتراضية لمن يرتديها للوصول بشكل أفضل إلى المعلومات والتنقل في البيئة المحيطة بهم.
GPT-4
هو ذكاء اصطناعي متعدد الوسائط يقبل مدخلات النص والصورة ويصدر مخرجات نصية حيث يفهم نموذج اللغة المتقدم هذا أسئلة اللغة الطبيعية ويجيب عليها.
يمكن استخدامه لمجموعة واسعة من التطبيقات بما في ذلك حل المشكلات بدقة كبيرة ؛ كمساعدة المستخدمين في مهام الكتابة الإبداعية والتقنية ؛ إنشاء تعليقات وتصنيفات وتحليلات للصور ؛ إنشاء محتوى طويل ؛ البحث عن المستندات وأكثر بكثير.
تساعد Ask Envision الأشخاص ذوو الإعاقة البصرية من الوصول إلى أي محتوى نصي بسهولة باستقلالية ودون مساعدة. و توفر الميزة معلومات في الوقت الفعلي ، مما يسهل القراءة وطرح الأسئلة وجمع المعلومات. كما أنها تعزز الاستقلالية ، وتخلق تجارب ممتعة للمستخدمين دون الحاجة إلى الاعتماد على الآخرين في ذلك .
الذكاء الاصطناعي GPT-4
وباستخدام الذكاء الاصطناعي GPT-4 ، تسمح ميزة Ask Envision لمستخدمي نظاراتها بطرح مجموعة أسئلة حول جزء من النص الذي قاموا بمسحه ضوئيًا. كقائمة طعام مثلا ، فاتورة كهرباء ، تعليمات طبخ ، وغيرها . و يمكن لمرتدي النظارة بعد ذلك طرح أسئلة حول المحتوى وعلى سبيل عن الخيارات النباتية المتاحة في قائمة الطعام حيث يتم الرد بعد معالجة السؤال مثلا بأن هنالك ثلاث خيارات نباتية متاحة في القائمة ” مخبوز الفطر ، فطيرة السبانخ ، وسلطة التوفو المقلية ” .
حيث تم تضمين Ask Envision في “قارئ” نصوص ، ويمكن الوصول إليه بعد استخدام ميزة مسح النص و بمجرد معالجة النص وفتحه في “القارئ” ، يحتاج المستخدم إلى الضغط مع الاستمرار على زر المفصلة في النظارات الخاصة به حتى يسمع صوت الرنين بعدها يمكنه طرح أسئلته ببساطة منتظرا إجابة المساعد الافتراضي.
للمزيد من المعلومات حول التقنية الحديثة تصفح الموقع المصدر
اقرأ ايضا : مشروع “وجهتي” يُمكن الأشخاص ذوي الإعاقة باستخدام الواقع الإفتراضي
By Sarah Sarsby
Published in AT TODAY 19th April 2023
Envision, which creates wearable assistive technology for people who are blind or have vision impairments, has launched a powerful new feature on its smart glasses that provides virtual assistance to the wearer about the world around them.
The Envision Glasses now incorporate a “game-changing” feature called Ask Envision, which leverages GPT-4 by OpenAI to provide virtual assistance to the wearer to better access information and navigate the environment around them.
GPT-4 is multimodal AI that accepts text and image inputs and emits text outputs. This advanced language model understands and answers natural language questions. It can be used for a wide range of applications including solving problems with great accuracy; generating, editing, and iterating with users on creative and technical writing tasks; generating captions, classifications, and analyses for images; creating long-form content; document searching; and much more.
With Ask Envision, people who are blind or have vision impairments can access any text-based content easily, eliminating the need for human assistance. The feature provides real-time information, making it easier to read, ask questions, and gather information. It further enhances independence, creating enjoyable experiences for users without having to rely on others.
Now using GPT-4, the Ask Envision feature allows Envision Glasses users to ask questions about a piece of text or document they have just scanned. This could be a menu, electricity bill, cooking instructions, and much more. The user can then ask questions about the content.
For example, after scanning a menu, the wearer could Ask Envision: “What vegetarian options are available?” Envision then tells the wearer that it is answering their question. After processing the question, the glasses could reply, for instance: “There are three vegetarian options on the menu, mushroom risotto, spinach pie, and fried tofu salad.”
Ask Envision is built into the Envision Glasses text ‘Reader’, which can be accessed after using the ‘Scan Text’ feature. Once text is processed and opened in the ‘Reader’, the user needs to press and hold the hinge button on their Envision Glasses until they hear a chime. They then simply ask their question and wait for the virtual assistant to answer.
Another example of how Ask Envision could be used is when paying an electricity bill. The wearer could ask “When is the due date?” or “How much do I need to pay?” to get the information they need.
See the Ask Envision feature in action in the video below:
Earlier this year, Envision introduced three new versions of its smart glasses to meet the needs of different users. The upgrades offer the same hardware as the original smart glasses but provide a choice of feature sets at a range of price points. Find out more about the different smart glasses
ترجمة أ.وائل أحمد علام ، أ.هشام محمد كتامي
[email protected] ; [email protected]
