اتخذت جوجل خطوة كبيرة نحو جعل المساعدات الذكية أكثر وعيًا بصريًا من خلال دمج قدرات مشروع أسترا في خدمة Gemini Live، كما أُعلن في مؤتمر Google I/O 2025 بتاريخ 20 مايو.
مشروع أسترا، الذي تم الكشف عنه لأول مرة في Google I/O 2024، يُجسد رؤية Google DeepMind لمساعد ذكاء اصطناعي عالمي يمكن أن يكون مفيدًا حقًا في الحياة اليومية. الهدف النهائي هو تحويل تطبيق Gemini إلى مساعد ذكاء اصطناعي شامل يؤدي المهام اليومية، ويتولى الأعمال الإدارية الروتينية، ويقدم توصيات شخصية لجعل المستخدمين أكثر إنتاجية وإثراء حياتهم. ويبدأ ذلك بقدرات تم استكشافها أولاً في مشروع أسترا، مثل فهم الفيديو، ومشاركة الشاشة، والذاكرة.
أعلنت جوجل أن مشروع أسترا — تجربة الذكاء الاصطناعي متعددة الوسائط والمنخفضة التأخير — سيغذي مجموعة من التجارب الجديدة في البحث، وتطبيق Gemini AI، ومنتجات المطورين الخارجيين. والأهم من ذلك، أن مشروع أسترا يدعم ميزة Search Live الجديدة في بحث جوجل. عند استخدام وضع الذكاء الاصطناعي أو عدسة Lens، يمكن للمستخدمين الضغط على زر "Live" لطرح الأسئلة حول ما يرونه من خلال كاميرا هواتفهم الذكية. يقوم مشروع أسترا ببث الفيديو والصوت مباشرة إلى نموذج الذكاء الاصطناعي ويستجيب بالإجابات بسرعة شبه فورية.
في تطبيق Gemini، تقول جوجل إن قدرات الفيديو الفوري ومشاركة الشاشة لمشروع أسترا ستتوفر لجميع المستخدمين. وبينما كان مشروع أسترا يدعم بالفعل المحادثات السريعة في Gemini Live، إلا أن الإدخال البصري كان سابقًا مقتصرًا على المشتركين المدفوعين فقط. يحب المستخدمون Gemini Live، حيث أن متوسط مدة المحادثات أطول بخمس مرات من التفاعلات النصية، لأنه يوفر طرقًا جديدة للحصول على المساعدة، سواء في إصلاح جهاز معطل أو الحصول على نصائح تسوق شخصية. ولهذا السبب، بدءًا من اليوم، تتيح جوجل Gemini Live مع الكاميرا ومشاركة الشاشة للجميع على أندرويد وiOS مجانًا.
التطبيقات العملية لهذه التقنية مثيرة للإعجاب. استعرضت جوجل قدرات مشروع أسترا من خلال فيديو يُظهر Gemini Live وهو يساعد في أنشطة يومية مثل إصلاح الدراجة. في الفيديو، يطلب المستخدم من مشروع أسترا البحث عن دليل الدراجة التي يقوم بإصلاحها. يتصفح الذكاء الاصطناعي الإنترنت، ويجد المستند، ويسأل المستخدم عما يريد رؤيته بعد ذلك. ثم يطلب المستخدم من مشروع أسترا التمرير في المستند حتى يجد قسمًا عن الفرامل. وتظهر شاشة هاتف أندرويد قيام مشروع أسترا بذلك والعثور على المعلومات المطلوبة. هذا النوع من السلوك الذاتي يشير إلى أن مشروع أسترا سيكون قادرًا على الوصول إلى معلومات محددة عبر الإنترنت، حتى داخل المستندات.
خلال العام الماضي، كانت جوجل تدمج هذه القدرات في Gemini Live ليتمكن المزيد من الأشخاص من تجربتها. وتواصل الشركة تطوير وتحسين الابتكارات الجديدة، بما في ذلك تحسين إخراج الصوت ليصبح أكثر طبيعية باستخدام الصوت الأصلي، وتحسين الذاكرة، وإضافة التحكم في الحاسوب. تجمع جوجل الآن آراء المستخدمين الموثوقين حول هذه القدرات وتعمل على توفيرها في Gemini Live، وتجارب جديدة في البحث، وواجهة برمجة التطبيقات Live للمطورين، وأشكال جديدة مثل النظارات الذكية.
يمثل هذا الدمج تقدمًا كبيرًا في جعل المساعدات الذكية أكثر وعيًا بالسياق وأكثر فائدة في السيناريوهات اليومية، مما يسمح للتقنية بفهم بيئة المستخدمين بشكل أفضل وتقديم مساعدة أكثر ملاءمة.