นักวิจัยสร้าง AI ปรับปรุงความละเอียดวิดีโอที่ปรับปรุงใหม่

สารบัญ:

นักวิจัยสร้าง AI ปรับปรุงความละเอียดวิดีโอที่ปรับปรุงใหม่
นักวิจัยสร้าง AI ปรับปรุงความละเอียดวิดีโอที่ปรับปรุงใหม่
Anonim

ทำไมถึงเป็นอย่างนี้

การปรับปรุงวิดีโอจะพัฒนาต่อไป โดยส่งผลกระทบอย่างใหญ่หลวงในด้านความบันเทิง การบังคับใช้กฎหมาย และวิดีโอสำหรับผู้บริโภค การทำให้เครือข่าย AI มีส่วนร่วมเร็วขึ้นและมีขนาดเล็กลงจะช่วยนำเครื่องมือเพิ่มประสิทธิภาพวิดีโอในอนาคตมาสู่เราทุกคน ซึ่งอาจอยู่ในอุปกรณ์ส่วนตัวของเราเอง

Image
Image

ปรับปรุงอย่างมาก ความละเอียดของวิดีโอได้รับความสนใจเมื่อเร็วๆ นี้ ด้วยการแปลงโฉมภาพยนตร์เก่าให้เป็นความละเอียด 4K ที่ทันสมัยอย่างไม่น่าเชื่อ เทคโนโลยีที่ทำได้ก็พัฒนาขึ้นอย่างรวดเร็วเช่นกัน นักวิจัยจาก Purdue University, University of Rochester และ Northeastern University ได้คิดค้นวิธีเพิ่มความละเอียดของวิดีโออย่างมากด้วยความเร็วสามเท่าของวิธีการปัจจุบันโดยใช้เครือข่าย AI ที่เล็กกว่าถึงสี่เท่า

การทดลองอย่างกว้างขวางแสดงให้เห็นว่าเฟรมเวิร์กแบบขั้นตอนเดียวของเรามีประสิทธิภาพมากกว่าแต่มีประสิทธิภาพมากกว่าเครือข่ายแบบสองขั้นตอนที่มีอยู่

State of the Art: กระบวนการที่นักวิจัยเหล่านี้กำลังเสนอคือ Space-Time Video Super-Resolution (STVSR) ใช้การประมวลผลแบบขั้นตอนเดียวแทนสองขั้นตอน เช่นเดียวกับวิธีอื่นๆ ที่ใช้กันอยู่ในปัจจุบัน (เรียกว่าเครือข่าย VFI)

กระบวนการใหม่นี้จะแทรกเฟรมวิดีโอที่ "ขาดหายไป" ตามเฟรมที่มีอยู่ แล้วรวมเข้าด้วยกันในเวลาเดียวกัน ขณะที่กำลังดำเนินอยู่ เครือข่าย AI จะคาดการณ์เฟรมวิดีโอสโลว์โมชั่นและใส่ลงในวิดีโอด้วย

สิ่งที่พวกเขาพูด: นักวิจัยทำการทดลองหลายครั้งเพื่อดูว่าแบบจำลองของพวกเขาจะให้ผลลัพธ์ที่ดีกว่าและเร็วกว่าเครือข่าย VFI ปัจจุบันหรือไม่ ระบบของพวกเขาได้แสดงให้เห็นถึงการปรับปรุงอย่างมากในด้านความเร็วของการประมวลผลและขนาดที่เครือข่าย AI จำเป็นต้องใช้

ทำไมคุณถึงสนใจ: เนื่องจากความสามารถในการปรับปรุงความละเอียดของวิดีโอและภาพยนตร์ที่เก่ากว่านั้นยังคงเร็วขึ้นและใช้พื้นที่น้อยลง คุณจึงสามารถจินตนาการถึงภาพระยะใกล้ได้อย่างง่ายดาย ระบบในอนาคตบนแล็ปท็อปหรือสมาร์ทโฟนของคุณเองลองนึกภาพโฮมเธียเตอร์ของคุณทั้งหมดจากยุคที่มีความละเอียดมาตรฐาน บันทึกทั้งเรื่องส่วนตัวและมีประโยชน์ต่อประวัติศาสตร์ รับการรักษาระดับ 4K ลองนึกถึงสารคดีที่นำแสงและข้อมูลเชิงลึกใหม่ๆ มาสู่เอกสารภาพยนตร์เก่า และปรับปรุงศักยภาพในการบังคับใช้กฎหมายและฟุตเทจการเฝ้าระวัง อีกไม่นาน ปุ่ม "ปรับปรุง" ของฮอลลีวูดอาจเป็นของจริง และอาจอยู่ที่ iPhone ของคุณด้วย