AI Upscaling จะทำให้ภาพถ่ายดีขึ้นได้อย่างไร

สารบัญ:

AI Upscaling จะทำให้ภาพถ่ายดีขึ้นได้อย่างไร
AI Upscaling จะทำให้ภาพถ่ายดีขึ้นได้อย่างไร
Anonim

ซื้อกลับบ้านที่สำคัญ

  • ความก้าวหน้าครั้งใหม่ในการขยายภาพสามารถช่วยได้ทุกอย่างตั้งแต่ภาพถ่ายครอบครัวไปจนถึงภาพทางการแพทย์
  • นักวิจัย Google ประกาศว่าพวกเขาได้สร้างความก้าวหน้าในการใช้ AI เพื่อเพิ่มความละเอียดของภาพ
  • แต่ผู้เชี่ยวชาญคนหนึ่งบอกว่าซอฟต์แวร์อัปสเกลอาจไม่จำเป็นสำหรับช่างภาพนิ่ง
Image
Image

เทคนิคใหม่ที่ขยายภาพโดยใช้ AI สามารถปรับปรุงทุกอย่างตั้งแต่รูปภาพไปจนถึงกราฟิกวิดีโอเกม ผู้เชี่ยวชาญกล่าว

เมื่อเร็วๆ นี้นักวิจัยของ Google ได้พูดคุยถึงความก้าวหน้าที่พวกเขาได้สร้างขึ้นในการเพิ่มความละเอียดของภาพ นักวิทยาศาสตร์ใช้โมเดลแมชชีนเลิร์นนิงเพื่อเปลี่ยนภาพถ่ายความละเอียดต่ำให้เป็นภาพความละเอียดสูงที่มีรายละเอียด เป็นส่วนหนึ่งของแนวโน้มที่เพิ่มขึ้นของการใช้ AI เพื่อปรับปรุงภาพ

เราเห็นการเพิ่มขึ้นของการอัปสเกลที่ขับเคลื่อนด้วย AI โดยเฉพาะในเกมที่เทคโนโลยีอย่าง NVIDIA DLSS ใช้การเรียนรู้ของเครื่องเพื่อสร้างภาพที่มีความละเอียดสูงกว่ามาก ซึ่งต่างไปจากคู่แข่ง และบางครั้งก็มีคุณภาพเกินคุณภาพของภาพดั้งเดิม ผู้เชี่ยวชาญด้านภาพ Ionut-Alexandru Popa บอกกับ Lifewire ในการสัมภาษณ์ทางอีเมล

"การอัปสเกลประเภทนี้ใช้งานได้ดีในเกมคอมพิวเตอร์ ซึ่งใช้ทรัพยากรน้อยกว่าการเรนเดอร์ภาพโดยตรงคุณภาพสูงกว่า"

การสร้างพิกเซล

Google ได้สำรวจวิธีการเพิ่มขนาดรูปภาพโดยใช้วิธีการที่เรียกว่าโมเดลการแพร่กระจาย

บริษัทอ้างว่าเทคนิคนี้ช่วยปรับปรุงเทคโนโลยีที่มีอยู่เมื่อขอให้มนุษย์ตัดสินผลลัพธ์ วิธีหนึ่งที่ Google ใช้เรียกว่า SR3 หรือ Super-Resolution ผ่านการกลั่นซ้ำๆ

"SR3 เป็นโมเดลการกระจายความละเอียดสูงที่รับภาพที่มีความละเอียดต่ำเป็นอินพุต และสร้างภาพความละเอียดสูงที่สอดคล้องกันจากสัญญาณรบกวนบริสุทธิ์" นักวิจัยของ Google เขียนไว้ในบล็อกโพสต์"ตัวแบบได้รับการฝึกอบรมเกี่ยวกับกระบวนการสร้างความเสียหายของภาพซึ่งมีการเพิ่มจุดรบกวนในรูปภาพความละเอียดสูงอย่างต่อเนื่องจนกว่าจะเหลือเพียงสัญญาณรบกวนที่บริสุทธิ์เท่านั้น"

เทคนิคการเพิ่มขนาดไม่ใช่เรื่องใหม่ และมักใช้ในแอปพลิเคชั่นแก้ไขภาพ Popa กล่าว

"มีหลายสถานการณ์ที่คุณต้องการภาพที่มีความละเอียดสูงขึ้น ดังนั้นจึงใช้การลดอัตราการสุ่มสัญญาณเพื่อสร้างพิกเซลระหว่างภาพที่มีอยู่" เขากล่าวเสริม "คนส่วนใหญ่ไม่รู้ แต่เมื่อพวกเขาดูทีวีบนหน้าจอ 4K สัญญาณวิดีโอ 1080p จะถูกเพิ่มสเกลโดยอัตโนมัติเพื่อให้ครอบคลุมทั้งหน้าจอ ชุดทีวีของคุณจะทำโดยอัตโนมัติ"

มีการใช้เทคนิคหลายอย่างในปัจจุบันเพื่อ 'เดา' เนื้อหาของพิกเซลใหม่เพื่อให้ภาพที่ออกมาดูดี Popa กล่าว

"ปัจจุบัน อัลกอริธึมที่ใช้มากที่สุดสำหรับการเพิ่มสเกลภาพคือวิธี bilinear และ bicubic ซึ่งทำให้แน่ใจได้ว่ามีการเปลี่ยนสีอย่างต่อเนื่องระหว่างพิกเซลที่อยู่ติดกัน โดยค่อยๆ เปลี่ยนสี แต่วิธีนี้มักส่งผลให้สูญเสียความคมชัด" เขากล่าวเสริม"สิ่งนี้ได้รับการชดเชยบางส่วนโดยใช้การลับคมบนรูปภาพที่ขยายแล้ว"

มีหลายสถานการณ์ที่คุณต้องการภาพที่มีความละเอียดสูงขึ้น ดังนั้นจึงใช้การลดอัตราการสุ่มสัญญาณเพื่อสร้างพิกเซลระหว่างภาพที่มีอยู่

การปรับขนาดภาพมีความสำคัญต่อการทำงานของความบันเทิง สื่อ และอินเทอร์เน็ต ช่างภาพ Sebastien Coell บอกกับ Lifewire ในการสัมภาษณ์ทางอีเมล

"ตัวอย่างเช่น แทนที่จะต้องมีหลายขนาดรูปภาพสำหรับหน้าเว็บ เช่น ขนาดหนึ่งสำหรับใช้ในโทรศัพท์ อีกอันสำหรับแท็บเล็ต " เขากล่าว "หากคุณสามารถขยายภาพ 1080p นั้นเป็น 2k หรือ 4k และรูปภาพจากโทรศัพท์นั้นไปยังแท็บเล็ตและ 1080p คุณได้ลดจำนวนรูปภาพที่ต้องการจาก 6 ลงเหลือ 2 อย่างกะทันหัน"

"คุณยังประหยัดพื้นที่ไฟล์ที่ต้องการจากไฟล์ 2k และ 4k ขนาดใหญ่ ดังนั้นจะลดขนาดไฟล์โดยรวมที่ต้องการลงประมาณ 70-90%"

ไม่ใช่แค่ทีวี

การลดขนาดภาพยังช่วยเพิ่มคุณภาพของภาพถ่ายและยังช่วยในเรื่องการถ่ายภาพทางการแพทย์ได้อีกด้วย นักพัฒนาซอฟต์แวร์กล่าวว่าการอัปสเกลสามารถเพิ่มความละเอียดของภาพได้โดยไม่ลดทอนคุณภาพใดๆ

แต่ Matic Broz ผู้ก่อตั้งเว็บไซต์การถ่ายภาพ Photutorial บอกกับ Lifewire ในการสัมภาษณ์ทางอีเมลว่าผลลัพธ์ที่แท้จริงขึ้นอยู่กับซอฟต์แวร์ที่ใช้

"เมื่อเร็วๆ นี้ AI ได้ค้นพบวิธีการลดอัตราการสุ่มสัญญาณภาพแล้ว ถึงแม้ว่าผมจะไม่ประทับใจกับมันจนถึงตอนนี้ก็ตาม" เขากล่าวเสริม

Broz กล่าวว่าซอฟต์แวร์เพิ่มสเกลที่ดีที่สุดที่เขาใช้คือ AI Image Enlarger โดย Vance AI

Image
Image

"แม้แต่ตัวอัปสเกลรูปภาพ 8x ของพวกเขาก็ไม่ทำให้เกิดสัญญาณรบกวนที่สำคัญ (นั่นคือความละเอียดที่เพิ่มขึ้น 64x)" เขากล่าว "ฉันคาดว่าอัลกอริธึมจะดีขึ้นในปีต่อๆ ไป ทำให้สามารถอัพสเกลใหญ่ขึ้นได้"

สำหรับช่างภาพนิ่ง Broz กล่าวว่าเป็นคำถามเปิดว่าจำเป็นต้องมีการอัพสเกลภาพหรือไม่

"นักพัฒนากล้องกำลังปรับปรุงความละเอียดของเซ็นเซอร์กล้องอย่างต่อเนื่อง ในตอนนี้ถึงแม้จะมีความละเอียด 100MP+" เขากล่าวเสริม "โดยส่วนตัวแล้ว ฉันใช้ 24MP และประมาณ 50MP และฉันไม่เคยรู้สึกว่าต้องการภาพที่ใหญ่ขึ้น แม้กระทั่งงานพิมพ์ขนาดใหญ่"