PixVerse video yaratish platformasi ishlab chiquvchi AIsphere kompaniyasi PixVerse R2 ni chiqarib berdi. Ushbu model anʼanaviy kliplarni yaratish oʻrniga, uzluksiz interaktiv audio-vizual dunyolarni yaratadigan universal real vaqtli dunyo tizimini ifodalaydi.
R2 23-sentabrda taqdim etildi va kompaniya yanvar oyida eʼlon qilgan R1 versiyasini davom ettiradi. Endi foydalanuvchilar world.pixverse.video saytida oʻyinlar, interaktiv filmlar va raqamli odamlar uchun namoyish maydonlarini ochishi mumkin.
R2 yordamida foydalanuvchilar matn tavsiflari yoki tasvirlar asosida dunyolar yaratishlari mumkin. Keyin ular WASD tugmalari yordamida personajni boshqarishlari, kamera burchagini oʻzgartirishlari va personajlarni almashtirish, obʼektlar qoʻshish yoki muhitni oʻzgartirish uchun soʻrovlar kiritishlari mumkin, shu bilan birga sahna ishlashda davom etadi. Kompaniya avvalgi kiritilgan maʼlumotlar saqlanib qolishini taʼkidlaydi: har qanday harakat yoki soʻrov dunyoning holatini yangilaydi va voqealar keyingi rivojlanishini belgilaydi, faqat joriy lahzaga taʼsir qilmaydi.
Xiaolongbao muallifi tomonidan yaratilgan Zero Mark nomli interaktiv oʻyin filmi doirasida mavjudot yoʻlni toʻsib qoʻyadi va sovgʻa talab qiladi; daryo yoki barg tanlovi jonli ravishda hosil qilinadigan turli natijalarga olib keladi. Boshqa muallif, Jade Wu, koʻplab oʻzaro aloqalar davomida doimiy identifikatsiya va xotiraga ega boʻlgan Eve nomli raqamli personaj atrofida hikoya yaratdi.
AIsphere R2 ni uzoq vaqtdan beri mavjud boʻlgan kompromisni hal qilish sifatida joylashtiradi: odatda real vaqtda yaratish kichik va tezkor modelni talab qiladi, ammo keng imkoniyatlar kattaroq modelni talab qiladi. R2 bu vazifani ikki darajaga ajratadi. Sabab-avtoregressiv yadro boʻlgan asosiy Omni Causal AR modeli uzluksiz oʻrganadi va qisqa va uzun videolarni, multimodal havolalarni, audio va harakat buyruqlarini oʻzlashtiradi, besh yoʻnalish boʻyicha miqyoslanadi: model, maʼlumotlar, vazifalar, boshqaruv signallari va vaqt oraligʻi.
Bundan tashqari, real vaqtda tezlashtirish qatlami shu asosiy modelni oladi va uni alohida tezkor modelni oʻqitish oʻrniga, real vaqt rejimida ishlaydigan ultra tezkor versiyaga aylantiradi. Yordamchi texnologiyalarning orasida turli vaqt miqyoslarida faol boʻladigan signallarni dinamik bloklarga ajratish, dunyo qoidalarini, yaqinda harakat va obʼektlar holatini saqlash uchun uchta xotira kanali hamda oʻquv paytidagi modelning oʻzining buzilishlarini qayta tiklovchi Xato Banki mavjud.
AIsphere xabar berishicha, Xato Banki ichki sinovlar davomida uzoq oraligʻdagi yorqinlik sirpanishi metrikasini 35,8% ga kamaytirdi, shu bilan birga, sekin diqqat 90% dan yuqori sekinlik darajasida sifati deyarli oʻzgarmagan holda saqlab qoladi.
Kompaniya cheklovlar haqida samimiy gapiradi: real vaqt va kechikish boʻyicha qatʼiy cheklovlar ostida R2 ning bitta oʻtkazish natijasining sifati hali ham mustaqil video yetakchi modellaridan ortda qolmoqda. Iyul oyida birinchi marta ishga tushirilgan PixVerse oʻyin dvigateli endi R2 asosida ishlaydi. Boshliq va Bosh ijrochi Wang Changhu real vaqtda interaktiv video dunyo modellashtirishning butun sohasi emasligini, lekin bu insonlarning tajriba olishi mumkin boʻlgan eng dastlabki yoʻl ekanligini hisoblaydi. U R2 ning kontent yaratish vositasidan istalgan vaqtda foydalanuvchilar kirishi mumkin boʻlgan muhitga aylanishini kutmoqda.