Та бодож байна уу, одоо зүгээр л текст бичээд, амьд видео зургийнхаа хэв маягийг аниме, киберпанк зэрэгт өөрчлөх боломжтой болсон байна! Тэгвэл энэ нь үнэн болчихоод байна!

Шинэ хиймэл оюун ухааны хэрэгсэл болох Mirage нь амьд видео зургийг бодит цаг хугацаанд нь өөрчлөх боломжийг олгож байна. Израилийн стартап Decart-ийн бүтээл юм. Тус компанийн зүгээс 'ямар ч сааталгүйгээр, мөн хязгааргүй бодит цаг хугацааны видео үйлдвэрлэх анхны систем' гэж баталсан.

Mirage нь 768×432 нарийвчлалтай, 20 кадр/секундын хурдтайгаар ажилладаг MirageLSD нэртэй AI видео загвар дээр ажилладаг. Decart-ийн багийнхан блогоороо 'бодит цаг хугацаанд үйлдвэрлэхийн тулд хүнээс харагдаж чадахгүй байх хэмжээнд 40 миллисекундын дотор үйлдвэрлэх шаардлагатай' гэж тайлбарлав.

Decart-ийн видео жишээнүүд нь Minecraft тоглоомын тоглолтыг цасны гайхамшигтай орчинд хувиргах, Call of Duty тоглогчдыг ягаан модтой тайван талбайд дүрслэх, мөн One Direction-ийн 'What Makes You Beautiful' дууг олон төрлийн аниме хэв маягаар дахин төсөөлөх зэргээр гайхамшигтай боломжуудыг харуулдаг. Тус систем нь текстийн заавар ба өмнөх кадрыг ашиглан дараагийн кадрыг дараалалтайгаар генерчилдэг.

Mirage нь Discord эсвэл TikTok дээр амьд урсгал хийх, видеоконференц зохион байгуулах, мөн урьдчилан бичигдсэн телевизийн шоу, кино, клипүүдийг энгийнээр тоглуулахад ашиглагдах боломжтой. Decart нь дээд HD болон 4K дэмжлэгийг ирээдүйд нэвтрүүлэхээр төлөвлөж байна.

Бодит цагийн AI хувиргалтыг хэрхэн олж авсан бэ?

Маш олон видео-ээс видео рүү AI хэрэгслүүд урсгалын видео үйлдвэрлэхэд ихэнхдээ бэрхшээлтэй байдаг. Учир нь эдгээр загварууд нь өмнөх кадраас мэдээллүүдийг ашиглан шинэ кадрыг генерчилдэг. Энэ нь алдаануудыг өвлүүлж, 30 секундын дараа видео чанар удаан муудах шалтгаан болдог.

Mirage энэ асуудлыг хоёр шинэчлэлээр шийдсэн. Нэгдүгээрт, diffusion forcing нь загварыг дуу чимээг цэвэрлэхэд тусалдаг. Хоёрдугаарт, түүхийн нэмэгдэл нь загварыг өөрийнхөө өнгөрсөн гаргалгаанаас алдааг таних ба засах чадвар олгодог.

Ихэвчлэн AI видео-ээс видео инструментийн хувьд удаан хугацаа шаардагддаг, хэдхэн хоромын гаргалгаанд минутын турш боловсруулалт хийх шаардлагатай. Гэвч Mirage нь оруулах болон гаргах хооронд 100 миллисекундын хоцрогдолтой байна.

Decart нь кадр бүрийг үйлдвэрлэхэд шаардлагатай алхмуудыг бууруулж, загварыг илүү үр дүнтэй ажиллуулахад тохирсон. Тус систем нь NVIDIA Hopper чипсийн хувьд тусгайлан тохируулагдсан бөгөөд хурдны нэмэлт, саатал багасгахад тусалдаг.

Mirage-ийг ашиглан YouTube видео урладаг стримерүүд санаа зовох шаардлагагүй; платформ нь AI контент нь 'мэдээллийн үнэн зөв биш' бол асуудалгүй гэж мэдэгдэв.