Google Lens เปิดให้ค้นหาด้วยวิดีโอ รวมถึงถามสิ่งที่มองเห็น

Google Lens เปิดให้ผู้ใช้ทดสอบฟีเจอร์ถ่ายวิดีโอเพื่อหาข้อมูล รวมถึงใช้เสียงถามเกี่ยวกับสิ่งที่กำลังดูได้ด้วย โดยฟีเจอร์นี้จะผสาน AI Overviews และผลการค้นหา อิงตามเนื้อหาของวิดีโอและคำถามที่เราป้อนเข้าไป

Google ได้เปิดตัวฟีเจอร์นี้ไปในงาน Google I/O เมื่อเดือนพฤษภาคมที่ผ่านมา พร้อมสาธิตการใช้งานบนเวที เช่น ถ้าเราไปเที่ยวที่พิพิธภัณฑ์สัตว์น้ำสามารถยกมือถือขึ้นมา กดปุ่มชัตเตอร์ค้างไว้ เพื่อให้ Google Lens เริ่มบันทึกภาพ จากนั้นก็เริ่มถามคำถามที่ต้องการได้ทันที แล้ว Gemini AI จะไปช่วยหาคำตอบมาให้

หลักการทำงานนั้น Google Lens จะบันทึกวิดีโอเป็น “เฟรมภาพเรียงต่อๆกัน” จากนั้นจึงใช้เทคนิคคอมพิวเตอร์วิชัน โดยให้ Gemini ทำการวิเคราะห์สิ่งที่อยู่ในภาพตามลำดับเฟรม ด้วยการส่งข้อมูลไปยังโมเดล Gemini “แบบกำหนดเอง” ที่พัฒนาขึ้นเพื่อ “ทำความเข้าใจเฟรมหลายเฟรมตามลำดับ… จากนั้นจึงตอบสนองกลับมา” ส่วนข้อจำกัดตอนนี้คือ ยังไม่สามารถวิเคราะห์เสียงที่อยู่ในวิดีโอได้ ซึ่งตอนนี้ทาง Google ยังอยู่ในระหว่างทำการทดลอง

ในส่วนของภาพนิ่งนั้น Google Lens ยังได้อัปเดตฟีเจอร์ค้นหาภาพด้วยความสามารถในการถามคำถามโดยใช้เสียง หากต้องการลองใช้ ให้เล็งกล้องไปที่วัตถุ กดปุ่มชัตเตอร์ค้างไว้ จากนั้นก็เริ่มถามคำถามที่ต้องการได้ ต่างจากเดิมที่เราต้องพิมพ์คำถามเข้าไปเองหลังถ่ายภาพเสร็จ

ทั้งสองฟีเจอร์นี้เปิดตัวใน Search Labs บน Android และ iOS แล้วทั่วโลกวันนี้ ใครอยากใช้งานต้องไปเปิดการทำงานก่อน โดยจะรองรับเฉพาะภาษาอังกฤษก่อน

ที่มา theverge

dailygizmo

นักเขียนสาย Introvert ที่ชื่นชอบเรื่องนวัตกรรมและความคิดสร้างสรรค์ ใช้เวลาว่างกับ มังงะ, เสียงเพลงและ idol