Gemini อัปเกรด Computer Use ใช้งาน Mac แทนคน สั่ง AI คลิกเมาส์ กรอกฟอร์ม จัดการไฟล์ ทำงานเบื้องหลังได้

THE SUMMARY:

Google เพิ่ม Computer Use ความสามารถใหม่ให้ Gemini บน Mac เปิดให้ AI สามารถควบคุมแอปพลิเคชันและเว็บไซต์บนคอมพิวเตอร์ เพื่อจัดการงานหลายขั้นตอนแทนผู้ใช้ได้โดยอัตโนมัติ ไม่ว่าจะเป็นการคลิกเมาส์ พิมพ์ข้อความ เลือกเมนู หรือกรอกแบบฟอร์ม ช่วยลดเวลาจากงานซ้ำ ๆ ที่ปกติต้องลงมือทำเองหลายสิบขั้นตอน

จุดเด่นของฟีเจอร์นี้คือ Gemini สามารถทำงานผ่านหน้าต่างเบื้องหลังที่แยกออกมาต่างหาก โดยผู้ใช้ยังสามารถใช้งานหน้าจอหลักของ Mac ได้ตามปกติ ไม่ว่าจะพิมพ์งาน ออกแบบ หรือคุยโทรศัพท์ โดยไม่ต้องหยุดรอ AI ทำงานให้เสร็จ ขณะเดียวกันยังสามารถติดตามความคืบหน้าการทำงานของ Gemini ได้แบบเรียลไทม์ผ่านหน้าต่างแชท

Gemini ช่วยจัดการงานได้ตั้งแต่ต้นจนจบ

Google ยกตัวอย่างการนำ Computer Use ไปใช้งานจริงได้หลายรูปแบบ เช่น

  • งานออกแบบ: ปรับแต่งสีรูปภาพจำนวนมากผ่านโปรแกรมออกแบบ หรือจัดการฉาก 3D ที่มีความซับซ้อน
  • กรอกเอกสารอัตโนมัติ: อ่านข้อมูลน้ำหนัก ขนาด และที่อยู่จากไฟล์ PDF ในเครื่อง แล้วนำไปกรอกแบบฟอร์มใบเสนอราคาค่าจัดส่ง
  • สร้างสไลด์นำเสนอ: ดึงตัวเลขและภาพหน้าจอจากแดชบอร์ดหลายภูมิภาค เพื่อนำมาสร้างงานนำเสนอใน Google Slides
  • จัดการประกาศขายสินค้า: วิเคราะห์รูปภาพเสื้อผ้าจากโฟลเดอร์ในเครื่อง ค้นหาราคา บันทึกรายละเอียด และเตรียมข้อมูลสำหรับลงขายบนแพลตฟอร์มต่าง ๆ

คุมการทำงานได้ พร้อมให้ความสำคัญกับความเป็นส่วนตัว

แม้ Gemini จะสามารถลงมือทำงานแทนผู้ใช้ได้ แต่ Google ยังออกแบบระบบควบคุมเพื่อความปลอดภัย โดยผู้ใช้สามารถเลือกได้ว่าจะอนุญาตให้ AI เข้าถึงแอปพลิเคชันใดบ้าง ตรวจสอบทุกขั้นตอนแบบเรียลไทม์ และสั่งหยุดการทำงานได้ทุกเมื่อ

นอกจากนี้ หากเป็นการดำเนินการสำคัญ Gemini จะต้องขออนุมัติจากผู้ใช้ก่อนลงมือทำจริงด้วย

สำหรับฟีเจอร์ Computer Use เริ่มเปิดให้ใช้งานแล้วผ่านแอป Gemini บน Mac โดยในช่วงแรกยังรองรับเฉพาะภาษาอังกฤษและผู้ใช้ในสหรัฐอเมริกา ใครที่สนใจสามารถดาวน์โหลดแอปได้ที่ gemini.google/mac

ที่มา hblog.google/

นักเขียนสาย Introvert ที่ชื่นชอบเรื่องนวัตกรรมและความคิดสร้างสรรค์ ใช้เวลาว่างกับ มังงะ, เสียงเพลงและ idol

Sidebar Search
Popular Now
Loading

Signing-in 3 seconds...

Signing-up 3 seconds...