EdenLive Faoliyat yuritmoqda

EdenLive — VAST tomonidan ishlab chiqilgan real vaqtli generativ renderlash tizimi bo‘lib, uning dunyo modeli loyihasi Project Eden’ning bosqichma-bosqich natijasidir. EdenLive Proxy soddalashtirilgan tasvir yoki referens videoni boshqaruv signali sifatida ishlatib, maqsadli birinchi kadr va matnli prompt bilan birgalikda fotorealistik yoki stilizatsiyalangan tasvirlarni uzluksiz, real vaqtda yaratadi. Bitta RTX 5090’da 720P va 24 FPS’dan yuqori tezlikka erishadi, kechikish esa atigi yuz millisekundni tashkil etadi. EdenLive’ning asosiy dizayni dunyo holatini saqlash va vizual renderlashni ajratib qo‘yadi: to‘liq grafik aktivlar kerak bo‘lmasdan interaktiv tasvirlar yaratish mumkin. Tizim to‘liq ochiq manbali bo‘lib, o‘yinlar, animatsiya va embodied intelligence ma’lumotlarini yaratish kabi sohalarda qo‘llanadi.

Real vaqtli generativ renderlash: Proxy soddalashtirilgan tasvir yoki referens videoni boshqaruv signali sifatida ishlatib, 720P’da 24 FPS’dan yuqori tezlikda batafsil yoki stilizatsiyalangan tasvirlarni uzluksiz, real vaqtda yaratadi.
Istalgan vizual uslubga o‘tish: faqat maqsadli birinchi kadr va matnli promptni taqdim etish orqali bir xil tasvirni anime, moybo‘yoq, fotorealistik va boshqa uslublarga aylantirish mumkin.
Istalgan referens kiritish: 2D animatsiya, 3D sahna, real video va boshqa manbalarni struktura hamda harakat referensi sifatida qo‘llab-quvvatlaydi, muayyan renderlash pipeline’iga bog‘liq emas.
Proxy-to-Fine generatsiya: qo‘pol sahna strukturasidan bevosita yuqori sifatli yakuniy tasvir yaratadi, oldindan to‘liq grafik aktivlar tayyorlash talab qilinmaydi.
O‘yin interaksiyasiga ulanish: yuqori darajadagi interaksiya tizimi bilan ajratilgan holda ishlaydi, o‘yin UI’i va boshqaruv mexanizmlarini saqlaydi hamda holatni saqlash va real vaqtli renderlashning to‘liq zanjirini ta’minlaydi.
Ochiq manbali ekotizim: model og‘irliklari, inference kodi va texnik hisobotni taqdim etadi. Game Prototype Turbo yordamida tabiiy tildan bir zumda o‘ynash mumkin bo‘lgan Proxy o‘yin yaratish mumkin.
Embodied intelligence ma’lumotlarini yaratish: asl harakat trayektoriyasi va sahna strukturasini saqlagan holda vizual ko‘rinishni o‘zgartirib, robotlarni o‘qitish uchun xilma-xil ma’lumotlar yaratadi.

WeChat’da kuzatib, “开源” deb javob yuboring va AI ochiq manbali loyihalar guruhiga qo‘shiling.
Holat va renderlashni ajratuvchi arxitektura: EdenLive dunyo holatini saqlash va vizual generatsiyani ajratadi: o‘yin qoidalari, personajlar joylashuvi, to‘qnashuvlarni aniqlash kabi vazifalar yuqori darajadagi interaksiya tizimi tomonidan aniq qayd etiladi va yangilanadi. Video modeli endi yashirin holatni taxmin qilmaydi, shu sababli generatsiya davomiyligi oshgani sari xatolarning to‘planishi oldi olinadi va model tasvir sifati hamda real vaqtli ishlashga e’tibor qaratadi.
Proxy-to-Fine generatsiya paradigmasi: model Proxy soddalashtirilgan referens tasvirdan olingan sahna joylashuvi, kamera harakati va qo‘pol dinamikani shart sifatida ishlatadi. Referens tasvir muayyan geometrik aniqlikka ega bo‘lishi shart emas, model esa batafsil maqsadli tasvirni yaratishi mumkin.
Multimodal shartli boshqaruv: generatsiya uch turdagi kiritma bilan boshqariladi: referens video oqimi struktura va harakat ma’lumotlarini beradi, maqsadli birinchi kadr umumiy vizual ko‘rinish va uslubni belgilaydi, matnli prompt esa uslub hamda tafsilotlarni to‘ldiradi. Ularning hamkorligi istalgan referens va istalgan uslubni moslashuvchan boshqarish imkonini beradi.
Real vaqtli oqimli generatsiya: model butun videoni oflayn yaratish o‘rniga oqimli inference’dan foydalanadi, dinamik o‘zgaruvchi referens tasvirlarni uzluksiz qabul qiladi va renderlash natijasini kadrma-kadr chiqaradi. Bitta RTX 5090, 5B parametr va 720P konfiguratsiyasida 24 FPS’dan yuqori tezlik hamda yuz millisekund darajasidagi end-to-end kechikishni ta’minlab, bir necha daqiqa davomida uzluksiz generatsiya qila oladi.

Kodni olish: GitHub’dan https://github.com/VAST-AI-Research/EdenLive ochiq manbali repozitoriyasini klonlang.
Og‘irliklarni yuklab olish: Hugging Face’dan https://huggingface.co/VAST-AI/EdenLive kerakli o‘lcham va spetsifikatsiyadagi model og‘irliklarini yuklab oling.
Birinchi kiritmani tayyorlash, referens tasvir: Proxy soddalashtirilgan sahna yoki referens video oqimini taqdim eting. U mustaqil yaratilgan 2D/3D sahna, o‘yin dvigateli chiqishi yoki ekran yozuvidan olinishi mumkin.
Ikkinchi kiritmani tayyorlash, maqsadli birinchi kadr: umumiy vizual uslub va ko‘rinishni belgilaydigan birinchi kadr tasvirini tanlang.
Uchinchi kiritmani tayyorlash, matnli prompt: uslub va tafsilotlarni tavsiflovchi matnli prompt yozing.
Inference’ni ishga tushirish: inference kodini chaqiring. EdenLive referens tasvirni belgilangan uslubdagi batafsil tasvir yoki video oqimiga real vaqtda renderlaydi.
Interaksiya tizimiga ulash: yuqori darajadagi dvigateldan chiqadigan dinamik referens tasvirlarni modelga uzluksiz yuboring va o‘yinlar kabi real vaqtli interaktiv ssenariylar uchun renderlash siklini yarating.
End-to-end demoni sinash: ochiq manbali Game Prototype Turbo’dan foydalanib, tabiiy til orqali o‘ynash mumkin bo‘lgan Proxy o‘yin yarating, so‘ng uni EdenLive bilan real vaqtda renderlang.

Yuqori real vaqtli ishlash: bitta RTX 5090 720P va 24 FPS’dan yuqori tezlikda bir necha daqiqa davomida uzluksiz generatsiyani ta’minlaydi, end-to-end kechikish esa yuz millisekund atrofida.
Barqaror ajratilgan arxitektura: dunyo holati interaksiya tizimi tomonidan aniq boshqariladi, video modeli esa renderlashga e’tibor qaratadi. Bu holatni yashirin taxmin qilish natijasidagi xatolar to‘planishining oldini oladi.
Kiritma talabi past: Proxy referensi batafsil geometriya yoki muayyan renderlash pipeline’ini talab qilmaydi, qo‘pol sahnaning o‘zi ham tayyor mahsulot darajasidagi tasvir yaratish uchun yetarli.
Uslubni erkin almashtirish: bir xil referens tasvirdan fotorealistik, anime, moybo‘yoq va boshqa istalgan uslubdagi tasvirlarni yaratish mumkin, har bir uslub uchun aktivlarni qayta tayyorlash shart emas.
Istalgan referensga moslashuv: 2D animatsiya, 3D sahna, real video va boshqa manbalarni qo‘llab-quvvatlab, generativ renderlashni yagona tizimda amalga oshiradi.

Loyiha sayti: https://vast-eden.ai/?p=edenlive
GitHub repozitoriyasi: https://github.com/VAST-AI-Research/EdenLive
Hugging Face model kutubxonasi: https://huggingface.co/VAST-AI/EdenLive
Texnik maqola: https://assets.vast-eden.ai/assets/edenlive/EdenLive-tech-report.pdf

AI o‘yinlarini ishlab chiqish: EdenLive yordamida tayyor mahsulot darajasidagi tasvirlarni real vaqtda renderlash orqali mustaqil ishlab chiquvchilar 3D o‘yinlarni kam xarajat bilan yaratishi mumkin.
Film va animatsiya preproduction’i: rejissyor oddiy tasvirlar orqali kompozitsiya, kamera harakati va personajlar yo‘nalishini belgilagach, bir zumda fotorealistik, multfilm, moybo‘yoq va boshqa uslubdagi variantlarni yaratib, badiiy yo‘nalishni tezda tanlashi mumkin.
Real vaqtli uslublashtirilgan jonli efir/video: real inson videosini referens sifatida ishlatib, inson ijrosini real vaqtda anime yoki boshqa uslubdagi tasvirga aylantiradi. Bu virtual boshlovchilar va qisqa videolar yaratishda qo‘llanadi.
Embodied intelligence uchun o‘quv ma’lumotlarini yaratish: robot harakat trayektoriyasi va sahna strukturasini saqlagan holda vizual ko‘rinishni o‘zgartirib, robotlarni o‘qitish uchun xilma-xil simulyatsiya ma’lumotlarini tezda yaratadi.
Interaktiv ta’lim va virtual tajriba: ta’lim va namoyish ilovalaridagi soddalashtirilgan 3D sahnalarni real vaqtda yuqori sifatli tasvirlarga aylantirib, foydalanuvchilarga brauzer yoki yengil qurilmalarda immersiv interaktiv tajriba taqdim etadi.