ส่อง 5 ฟีเจอร์ AI ใหม่ ที่จะมาในระบบปฏิบัติการ Android

Google ประกาศชัดใน Google I/O ว่า Gemini นั้นจะเป็นหัวใจสำคัญของระบบปฏิบัติการแอนดรอยด์เพื่อให้ใช้งานได้ฉลาดขึ้น ซึ่งงานเมื่อคืนนี้ก็มีการเผย 5 ฟีเจอร์ที่เราจะได้ใช้งานกัน

Circle to Search

ฟีเจอร์ Circle to Search แบบเดียวกับที่เปิดตัวในสมาร์ตโฟนของซัมซุงจะเปิดให้ใช้งานบนระบบปฏิบัติการแอนดรอยด์ ซึ่งเราเราสามารถค้นหาทุกอย่างที่อยู่บนหน้าจอได้ ด้วยการใช้ gesture เช่น วงตรงส่วนที่ต้องการ กดค้างที่รูปภาพ โดยไม่ต้องออกจากแอปที่ใช้งานอยู่ ทำได้ตั้งแต่หาข้อมูล แปลภาษา ช่วยทำการบ้าน มาวันนี้ได้ขยายการใช้งานไปยังผู้ใช้สมาร์ตโฟนแอนดรอยด์กว่า 100 ล้านเครื่องทั่วโลก

นักเรียนนักศึกษาสามารถใช้ประโยชน์จาก Circle to Search มาช่วยทำการบ้านและทำความเข้าใจไดเดีขึ้น เช่น การแก้โจทย์เลขหรือฟิสิกส์ บอกวิธีทำเป็นขั้นตอน ส่วนปลายปีนี้จะอัปเกรดให้เข้าใจสัญลักษณ์ เครื่องหมายต่างๆ กราฟ แผนภูมิ เพื่อให้แก้ปัญหาที่ซับซ้อนยิ่งขึ้นได้

Gemini เข้าใจบริบทดีขึ้น

Gemini บน Android สามารถช่วยให้เราใช้ generative AI ทำงานได้อย่างสน้างสรรค์และมีประสิทธิภาพมากขึ้น โดยเข้าใจบริบทแวดล้อมที่อยู่บนหน้าจอ รู้ว่าเรากำลังใช้งานแอปอะไรอยู่

อีกไม่นาน เราจะสามารถนำ Gemini มาซ้อนที่ด้านบนของแอปที่ใช้งานอยู่เพื่อเรียกใช้งานได้ง่ายขึ้น เช่น ใช้ gemini สร้างรุปแล้วลากไปวางใน Gmail หรือ Google Messages , มีฟีเจอร์ “Ask this video” เพื่อถามข้อมูลของคลิปที่กำลังดูบน YouTube หรือใช้ Gemini Advanced เพื่อถามคำถามข้อมูลในไฟล์เอกสาร PDF โดยฟีเจอร์เหล่านี้จะเปิดให้อัปเดตในอีกไม่กี่เดือนข้างหน้า

ความสามารถ multimodal เต็มรูปแบบ

Android เป็นระบบปฏิบัติการบนมือถือระบบแรกที่มีโมเดล AI พื้นฐานใส่มาให้ในอุปกรณ์ นั่นก็คือ Gemini Nano ช่วยให้ทำงานได้อย่างรวดเร็วและรักษาข้อมูลให้เป็นส่วนตัว ในสมาร์ตโฟน Pixel ที่จะเปิดตัวในในปลายปีนี้จะมาพร้อมเ Gemini Nano รุ่นล่าสุด ที่มาพร้อม Multimodality นั่นหมายความว่าโทรศัพท์ของเราจะไม่เพียงแต่สามารถประมวลผลการป้อนข้อความเท่านั้น แต่ยังเข้าใจข้อมูลเพิ่มเติมในบริบทต่างๆ เช่น ภาพ เสียง และภาษาพูดอีกด้วย.

TalkBack ให้คำอธิบายชัดเจนขึ้น

ปีที่แล้วทาง Google ได้เพิ่มความสามารถของ Gemini Nano ไปใส่ในฟีเจอร์ TalkBack เพื่อช่วยให้คนที่มีปัญหาทางการมองเห็นหรือผู้พิการทางสายตา สามารถได้รับคำอธิบายสิ่งที่อยู่ในรุปภาพได้ดีขึ้น โดยเฉลี่ยแล้วผู้ใช้ TalkBack จะพบว่ารูปภาพกว่า 90 รูปต่อวันที่ไม่มีป้ายกำกับ ซึ่งการอัปเดตนี้จะมาช่วยเติมเต็มช่องว่างนี้ได้ สามารถอธิบายรายละเอียดในรูปภาพจองคนในครอบครัวหรือเพื่อนที่อยู่ในรูป รวมถึงค้นเสื้อผ้าสไตล์เดียวกันเพื่อช้อบออนไลน์ได้ นอกจากนั้น Gemini Nano ใช้การประมวลผลผ่านชิปบนอุปกรณ์จึงทำให้ใช้งานได้โดยไม่ต้องต่ออินเทอร์เน็ต

แจ้งเตือนสายโทรเข้าจากมิจฉาชีพ

ตามรายงานล่าสุด ในช่วง 12 เดือน ผู้คนสูญเสียเงินมากกว่า 1 ล้านล้านดอลลาร์จากการฉ้อโกง ทาง Google จึงนำ AI มาช่วยป้องกันการหลอกลวง โดย Gemini Nano จะแจ้งเตือนแบบเรียลไทม์ระหว่างการคุยสายโทรศัพท์ หากตรวจพบรูปแบบการสนทนาที่มักเกี่ยวข้องกับ การหลอกลวง ตัวอย่างเช่น คุณจะได้รับการแจ้งเตือนหาก “ตัวแทนธนาคาร” ขอให้คุณโอนเงินอย่างเร่งด่วน ชำระเงินด้วยบัตรของขวัญ หรือขอข้อมูลส่วนบุคคล เช่น PIN หรือรหัสผ่านของบัตร ซึ่งเป็นเรื่องที่ผืดปกติ โดยทุกอย่างจะใช้การประมวผลบนอุปกรณ์เพื่อให้การสนทนายังคงเป็นส่วนตัว โดยจะเปิดให้ใช้งานในช่วงปลายปีนี้

ทั้งหมดนี้เป็นแค่ส่วนหนึ่งเท่านั้นที่เปิดเผยข้อมูลออกมา ในอนาคตน่าจะมีฟีเจอร์อื่นๆตามออกมาอีกเพื่อให้เราใช้งานระบบปฏิบัติการแอนดรอยด์ได้สะดวกและมีประสิทธิภาพมากขึ้น

ที่มา https://blog.google/products/android/google-ai-android-update-io-2024/#scam-detection