Apple เผยงานวิจัย ใช้ AI ยกระดับภาพถ่ายในสภาพแสงน้อยขั้นสุด !

เชื่อว่าหลายคนน่าจะมีประสบการณ์ถ่ายภาพในที่แสงน้อยด้วยสมาร์ตโฟน แล้วได้ภาพที่มี noise หรือสัญญาณรบกวนหรือไม่ก็ถูกฟีเจอร์ Noise Reduction ทำให้ดีเทลต่าง ๆ ในภาพหายไป เละเป็นวุ้น

ล่าสุดมีผลงานวิจัยจากทีมของ Apple และมหาวิทยาลัยเพอร์ดู (Purdue University) ที่มาแก้ปัญหานี้โดยเฉพาะ ด้วยการใช้โมเดล AI ที่ชื่อว่า ‘DarkDiff’ เข้ามาช่วยประมวลผลโดยตรงตั้งแต่ระหว่างขั้นตอนการประมวลผลภาพหรือ Image Signal Processing Pipeline (ISP) แทนที่จะใช้ AI ในภายหลังหรือ post-processing แบบที่เคยทำมา

หลักการของ DarkDiff คือ การนำเอาโมเดล Stable Diffusion ซึ่งเป็นโมเดลโอเพนซอร์สที่ถูกฝึกด้วยภาพหลายล้านภาพ มาปรับบทบาทใหม่ให้ทำงานร่วมกับ ISP ของกล้องโดยตรง ทำให้สามารถวิเคราะห์ได้ว่าในส่วนมืดควรมีรายละเอียดแบบใดบ้าง ไม่เละเป็นภาพวาดสีน้ำมันแบบที่เคยเป็นมา

นอกจากนี้ ทีมวิจัยยังทำให้ AI มองภาพเป็นส่วน ๆ แทนที่จะมองทั้งภาพรวดเดียว โดยให้มันโฟกัสเป็นบริเวณย่อย ๆ ของภาพ ซึ่งวิธีนี้ช่วยให้ AI สามารถรักษารายละเอียดในแต่ละจุดไว้ได้ดีขึ้น และช่วยลดโอกาสที่ AI จะสร้างรายละเอียดขึ้นมาเองจนผิดเพี้ยนไปจากภาพต้นฉบับ

นอกจากนี้ เทคโนโลยี DarkDiff ยังสามารถทำงานร่วมกับกระบวนการประมวลผลขั้นต้นของกล้องได้โดยตรง ไม่ว่าจะเป็นการปรับ White Balance หรือการแปลงข้อมูล Bayer ให้เป็นภาพสี จากผลการทดสอบกับกล้อง Sony a7S II พบว่าสามารถสร้างภาพถ่ายกลางคืนที่มีคุณภาพน่าพึงพอใจ แม้จะใช้เวลาเปิดรับแสงเพียง 0.033 วินาที โดยให้คุณภาพใกล้เคียงกับภาพอ้างอิงที่ถ่ายด้วยขาตั้งกล้องที่ใช้เวลาเปิดรับแสงยาวกว่าถึง 300 เท่า เลยทีเดียว

แม้ผลลัพท์จะอาจดูดี แต่ก็มีข้อจำกัดบางอย่างเช่นกัน ด้วยวิธีนี้ทำให้ต้องใช้เวลาประมวลผลมากกว่าปกติ รวมไปถึงหากนำมาใช้บนสมาร์ตโฟนจริง ๆ อาจทำให้กินพลังงานมากขึ้น และอาจต้องใช้การประมวลผลบน cloud ร่วมด้วย รวมไปถึงมีปัญหาด้านดีเทลตัวอักษรที่ไม่ใช่ภาษาอังกฤษภายในภาพ

ในตอนนี้ยังไม่มีรายงานว่า DarkDiff จะถูกนำมาใช้บน iPhone เร็ว ๆ นี้ แต่ก็สะท้อนให้เห็นว่า Apple มีความมุ่งมั่นในการยกระดับภาพถ่ายด้วย computational photography มากเพียงใด ซึ่งจะกลายเป็นปัจจัยสำคัญมากขึ้นเรื่อย ๆ ในตลาดสมาร์ตโฟน เนื่องจากผู้ใช้คาดหวังคุณภาพกล้องที่สูงเกินกว่าข้อจำกัดของเซนเซอร์รับภาพเล็กจิ๋วบนสมาร์ตโฟนจะสามารถให้ได้

ที่มา: 9to5mac

บดินทร์ ตันวิเชียร

'ช่างภาพ' ที่เขียนคอนเทนต์ได้ หาเงินซื้อเปียกให้แมว 3 ตัว ที่บ้าน