أعلنت شركة جوجل أنها ستسمح بالبحث باستخدام مقاطع الفيديو إضافة إلى الصور الثابتة من خلال Google Lens.
كما ستسمح أيضاً بالبحث عما يريده المستخدم من خلال الصوت، وذلك بالاعتماد على الذكاء الاصطناعي، حيث ستعرض نتائج البحث بناءً على محتويات الفيديو وسؤال المستخدم.
ويتم طرح الميزة في Search Labs على كل من Android و iOS بدءاً من اليوم.
وعرضت الشركة مثالاً تقول فيه إنّ الشخص الذي لديه فضول بشأن الأسماك التي يراها في حوض السمك يمكنه رفع الهاتف أمام المعرض، وفتح تطبيق Google Lens، ثم الضغط باستمرار لتسجيل الفيديو.
بمجرد أن تبدأ Lens في التسجيل، يمكن للمستخدم طرح سؤاله: “لماذا يسبحون معًا؟” تستخدم Google Lens بعد ذلك نموذج Gemini AI لتقديم استجابة مشابهة لما تراه في صورة GIF أدناه.
عند الحديث عن التقنية الكامنة وراء هذه الميزة، قال راجان باتيل، نائب رئيس الهندسة في جوجل، لموقع The Verge إن جوجل تلتقط الفيديو “كسلسلة من إطارات الصور ثم تطبق نفس تقنيات الرؤية الحاسوبية” المستخدمة سابقًا في Lens.
لكن جوجل تأخذ الأمور خطوة إلى الأمام من خلال تمرير المعلومات إلى نموذج Gemini “مخصص” تم تطويره “لفهم إطارات متعددة بالتسلسل.
تعمل Google Lens أيضًا على تحديث ميزة البحث عن الصور مع القدرة على طرح سؤال باستخدام الصوت.
لتجربتها يجب توجيه الكاميرا نحو الهدف، والضغط باستمرار على زر التسجيل، ثم طرح السؤال.
قبل هذا التغيير، لم يكن بإمكان المستخدمين سوى كتابة السؤال في Lens بعد التقاط صورة.
يتم طرح ميزة الأسئلة الصوتية عالميًا على نظامي التشغيل Android وiOS، ولكنها متاحة باللغة الإنجليزية فقط في الوقت الحالي.