قارئ شاشة ومتحكم يعتمد على الصوت لمستخدمي أندرويد المعرضين للخطر
مالانغ AI يقرأ شاشتك، ويحدد الأزرار، وينفذ النقرات باستخدام الكلام الطبيعي لإكمال المهام بدون استخدام اليدين. تم تطويره بواسطة فلوإيز لنظام أندرويد، يجمع التطبيق بين التعرف الضوئي على الحروف في الوقت الحقيقي، وتنفيذ المهام بواسطة الصوت، وشخصية الذكاء الاصطناعي المحادثة. يبرز الإرشادات خطوة بخطوة، وتتبع التقدم البصري للأفعال، والتشغيل عبر التطبيقات الخارجية. الجمهور المستهدف هو كبار السن، والأشخاص ذوي الإعاقات البصرية أو الحركية، وأي شخص يحتاج إلى التنقل الصوتي أولاً على الهاتف الذكي.
كيف يتفاعل Malang AI مع التطبيقات الأخرى؟
يقوم Malang AI بفحص الشاشة النشطة ويتفاعل مع العناصر المرئية. يستخدم التطبيق تقنية التعرف الضوئي على الأحرف لقراءة النصوص وتحديد الأزرار، ثم يقوم بتنفيذ النقرات، والتمرير، وإدخال النصوص دون الحاجة إلى الوصول إلى واجهة برمجة التطبيقات الخلفية. تتيح هذه الطريقة غير التدخلية له العمل عبر تطبيقات الخدمة العامة مثل Wrist Doctor 9988 وCall Taxi for the Disabled وTtota Subway، بحيث يمكن للمستخدمين إكمال المهام متعددة الخطوات داخل واجهات الطرف الثالث من خلال الأوامر الصوتية.
هل يؤثر على أداء الجهاز أثناء التشغيل؟
يعمل التطبيق فقط عندما يطلب المستخدم المساعدة، مما يحد من النشاط في الخلفية. لأنه يعتمد على تحليل الشاشة بدلاً من الروابط السحابية المستمرة، لا يتطلب Malang AI تشغيلًا مستمرًا. يطلب التطبيق أذونات واجهة برمجة التطبيقات الخاصة بخدمة الوصول لقراءة والتفاعل مع الشاشة، وينفذ الإجراءات فقط بعد بدء المستخدم، مما يقلل من استخدام وحدة المعالجة المركزية والذاكرة مقارنةً بالمستمعين الذين يعملون دائمًا.
هل Malang AI آمن للاستخدام على جهاز شخصي؟
يتطلب Malang AI أذونات وصول صريحة ويعمل عند الطلب. يستخدم التصميم واجهة برمجة التطبيقات الخاصة بخدمة الوصول لقراءة الشاشة وتنفيذ اللمسات، ويعمل التطبيق فقط عندما يطلبه المستخدم. يخلق هذا النموذج حدود إذن واضحة ويتجنب التكامل الخلفي، بينما يظهر تتبع تقدم التطبيق المرئي كل إجراء مدعوم بالذكاء الاصطناعي على الشاشة حتى يرى المستخدمون ما يفعله الأداة في الوقت الحقيقي.
هل يحتاج المستخدمون إلى معرفة تقنية لتشغيل التطبيق بفعالية؟
يستهدف التطبيق المستخدمين غير التقنيين من خلال تقديم سير عمل يعتمد على الصوت ومساعدة خطوة بخطوة. يقوم Malang AI بصياغة الأوامر بلغة طبيعية ويوفر تسلسلات موجهة للمهام المعقدة مثل الحجز أو الطلب. تقدم شخصية "AI Pocket Friend" المحادثة الرفقة إلى جانب تنفيذ المهام، مما يمكن أن يقلل من منحنى التعلم للمستخدمين المسنين الذين يواجهون صعوبة مع النصوص الصغيرة أو إدخال اللمس الدقيق.
رفيق عملي للتحكم في الهواتف الذكية عبر الصوت، موصى به للمستخدمين الضعفاء
يعمل Malang AI بشكل جيد للأشخاص الذين يحتاجون إلى التحكم الصوتي لأداء المهام اليومية على الهواتف المحمولة، خاصة عندما تكون تكاملات الخلفية غير متاحة. يقلل نهج التطبيق في القراءة من الشاشة عند الطلب من النشاط في الخلفية ويعطي المستخدمين تأكيدًا مرئيًا لكل إجراء. موصى به. يُفضل منح أذونات الوصول فقط عند الحاجة واستخدام مؤشر التقدم المرئي خلال الجلسات الأولى لتأكيد السلوك.
