ข้ามไปยังเนื้อหา

Apple เผยงานวิจัย DarkDiff ใช้ AI กู้ชีพภาพถ่ายแสงน้อย คมชัดระดับ Raw Data

เทคโนโลยี
4 ครั้ง
0 ความเห็น
2 นาที
Apple เผยงานวิจัย DarkDiff ใช้ AI กู้ชีพภาพถ่ายแสงน้อย คมชัดระดับ Raw Data
By Suphansa Makpayab
TL;DR

นักวิจัย Apple และ Purdue University เปิดตัว DarkDiff โมเดล AI ใหม่ที่ใช้เทคโนโลยี Diffusion ผสานเข้ากับกระบวนการ ISP ของกล้องโดยตรง เพื่อแก้ปัญหาภาพถ่ายแสงน้อยที่เป็นวุ้นหรือมี Noise เยอะ โดยสามารถกู้รายละเอียดจาก Raw Data ได้ดีกว่าวิธีเดิมๆ แม้จะยังกินทรัพยากรสูงและอาจยังไม่มาลง iPhone เร็วๆ นี้ แต่ก็แสดงให้เห็นทิศทาง Computational Photography ในอนาคต

ปัญหาโลกแตกของการถ่ายภาพกลางคืนด้วยสมาร์ทโฟนคือ "Noise" หรือจุดรบกวนยิบยับ ครั้นจะใช้ซอฟต์แวร์ลบ Noise ก็มักจะได้ภาพที่เนียนจนเป็นวุ้น (Oil-painting effect) รายละเอียดหายเกลี้ยง ล่าสุดทีมนักวิจัยจาก Apple ร่วมกับ Purdue University ได้นำเสนอทางออกใหม่ในชื่อ "DarkDiff" โมเดล AI ที่เคลมว่าจะเข้ามายกระดับการถ่ายภาพในที่แสงน้อยให้คมชัดแบบก้าวกระโดด

ความเจ๋งของ DarkDiff คือการไม่ได้ทำงานแค่ในขั้นตอน Post-Processing เหมือนแอปแต่งรูปทั่วไป แต่ถูกออกแบบให้เข้าไปแทรกตัวอยู่ในกระบวนการประมวลผลสัญญาณภาพ (ISP) ของกล้องโดยตรง โดยนำโมเดลประเภท Diffusion (เทคโนโลยีเดียวกับที่ใช้สร้างภาพ AI) มาปรับจูนใหม่ให้ทำงานร่วมกับข้อมูลดิบ (Raw Data) จากเซนเซอร์ วิธีนี้ช่วยให้ AI เข้าใจบริบทของภาพและกู้คืนรายละเอียดในส่วนที่มืดมิดได้สมจริงยิ่งขึ้น โดยไม่ "มโน" ภาพขึ้นมาเองจนเพี้ยนเหมือน AI บางตัว

ในเชิงเทคนิค DarkDiff ใช้เทคนิคที่เรียกว่า Classifier-Free Guidance เพื่อควบคุมความสมดุลระหว่างการลด Noise กับการรักษา Texture ของวัตถุ ผลการทดสอบเมื่อเทียบกับภาพถ่าย Long Exposure จากกล้องโปรอย่าง Sony A7SII พบว่า DarkDiff สามารถขุดรายละเอียดและสีสันกลับมาได้อย่างน่าทึ่ง ชนะขาดลอยเมื่อเทียบกับอัลกอริทึมลด Noise แบบเดิมๆ ที่มักจะเกลี่ยภาพจนแบนราบ

อย่างไรก็ตาม อย่าเพิ่งรีบหวังว่าจะได้เห็นฟีเจอร์นี้ใน iPhone รุ่นถัดไปทันที เพราะทีมวิจัยยอมรับตรงๆ ว่ากระบวนการนี้กินทรัพยากรเครื่องมหาศาลและประมวลผลช้ากว่าวิธีปกติมาก หากรันบนมือถือแบตเตอรี่คงไหลเป็นน้ำ อาจต้องพึ่งพา Cloud Computing เข้ามาช่วย แต่อย่างน้อยนี่ก็เป็นสัญญาณที่ชัดเจนว่า Apple ยังคงเดินหน้าเดิมพันกับ Computational Photography เพื่อก้าวข้ามขีดจำกัดของฮาร์ดแวร์กล้องมือถือต่อไป

ความเห็น (0)

เข้าสู่ระบบเพื่อแสดงความเห็น

เข้าสู่ระบบ

ยังไม่มีความเห็น

เป็นคนแรกที่แสดงความเห็นในบทความนี้