9: Kapja e aktrimit me IA dhe dizajnimi i karaktereve
- Kapja e lëvizjeve dhe shprehjeve të një aktori njerëzor dhe aplikimi i tyre te një karakter IA.
- Harmonizimi i stilit, përbërjes dhe dizajnit të aktorit virtual për të ruajtur një identitet unik.
- Dizajnimi i karaktereve, përfshirë pamjen, lëvizjet dhe personalitetin me IA.
Objektiva të matshme
Çfarë do të arrini sot
Në fund të sesionit do të jeni në gjendje të:
Regjistroni një driving performance
Regjistroni një driving performance (video e aktorit "drejtues") që transfertohet mirë te një karakter. (Runway)
Përgatisni një character input
Përgatisni një character input (imazh ose video e karakterit) me identitet të qëndrueshëm. (Runway)
Gjeneroni animim me Runway Act-Two
Gjeneroni animim me Runway Act-Two dhe kontrolloni gestures + facial expressiveness. (Runway)
Gjeneroni animim me Kling Motion Control
Gjeneroni animim me Kling Motion Control duke kopjuar lëvizjen/shprehjet nga një video reference te karakteri. (Imagine.Art)
Përdorni upscaling modern
Përdorni upscaling modern (2026) për të rritur cilësinë e character plates pa prishur identitetin.L
Terminologji
0) Fjalor minimal (terminologji që do përdorim)
Performance capture
Performance capture (kapje performance): Nxjerrja e lëvizjeve/shprehjeve nga video e aktorit dhe përdorimi i tyre për animimin e një karakteri (pa kostum mocap). (Runway)
Driving performance
Driving performance: Video e aktorit që "drejton" animimin (mimikë, buzë, duar, gjeste). (Runway)
Character input
Character input: Imazh ose video e karakterit që do të animoni. (Runway)
Retargeting
Retargeting (transferim i lëvizjes): Aplikimi i lëvizjeve të aktorit te karakteri (jo rig klasik; IA e bën transferin).
Gestures
Gestures (gjeste): Transferimi i pozave/duarve/trupit nga aktori te karakteri (në Act-Two është setting). (Runway)
Facial expressiveness
Facial expressiveness: Sa fort transferohet mimika (rrezikon artefakte në vlera të larta). (Runway)
Upscaling
Upscaling: Rritja e rezolucionit + rikonstruksion detajesh (me rrezik "hallucination" në mjetet gjenerative). (Magnific AI)
1) Parakushtet (përpara se të nisë demo)
Asetet që duhet t'i keni gati
- 1 video "driving performance" (5–15 sek për prova; më pas deri 30s ku lejohet). (Runway)
- 1 imazh "hero" i karakterit (waist-up; duart në kornizë nëse doni gjeste). (Runway)
- (Opsionale) 1 video e karakterit (nëse doni të ruani kamerën/ambientin e videos origjinale). (Runway)
Standard regjistrimi (që rrit suksesin e transferimit)
Për driving performance (aktori):
- Një subjekt i vetëm; pa prerje (no cuts). (Runway)
- Fytra e dukshme gjithë kohën; ndriçim i mirë; shprehje të lexueshme. (Runway)
- Kadrim waist-up (maksimumi); duart në kornizë që në fillim për gjeste. (Runway)
- Lëvizje natyrale; shmang lëvizje shumë të shpejta/abrupt (shkakton "warping"). (Runway)
2) Strategjia e identitetit të karakterit
Qëllimi është të ruani identitet unik gjatë animimit (pamje + stil + personalitet).
2.1 "Identity Kit" (minimumi praktik)
Krijoni një dosje me:
- Hero image (front 3/4) – imazhi kryesor.
- 2–4 reference angles (profil, 3/4 tjetër, neutral).
- Palette & material notes (ngjyra dominante, tekstura, material veshje).
- 3 "Do / Don't" rregulla (p.sh. "mos ndrysho formën e hundës", "sytë gjithmonë kafe të errët", "stili: pencil texture").
2.2 Prompt-blloqe për dizajn karakteri
Përdorni këtë strukturë (e shkurtër, por e fortë):
A) Identiteti (i pandryshueshëm)
mosha/energjia, forma e fytyrës, tipari kryesor, ngjyra e syve/flokëve, veshja bazë.
mosha/energjia, forma e fytyrës, tipari kryesor, ngjyra e syve/flokëve, veshja bazë.
B) Stil & render
medium (p.sh. "hand-drawn colored pencil"), kontrasti, grain, lens/camera (nëse synoni film-look).
medium (p.sh. "hand-drawn colored pencil"), kontrasti, grain, lens/camera (nëse synoni film-look).
C) Kompozim
waist-up, duart në kornizë, background i thjeshtë.
waist-up, duart në kornizë, background i thjeshtë.
D) "Negative constraints"
"no extra fingers", "no face morph", "no style shift", "no heavy motion blur".
"no extra fingers", "no face morph", "no style shift", "no heavy motion blur".
3) Upscaling modern (2026) – çfarë përdorim dhe pse (shumë praktik)
Kur ju duhet upscaling në këtë ligjëratë?
- Kur hero image është i butë/low-res dhe transferimi i mimikës krijon "mush" në sy/gojë.
- Kur doni të eksportoni në pipeline montazhi me prerje/zoom.
3.1 Rregulli kryesor
Upscale "restorative"
për identitet (ruan tiparet)
Upscale "generative/creative"
vetëm kur keni nevojë për detaj artistik dhe pranoni devijime
Praktikë e rekomanduar në klasë:
Filloni me Adobe Super Resolution ose Topaz për "hero" (identitet). Pastaj, nëse kërkohet "stil detail", testoni Magnific/Krea vetëm mbi background/veshje, jo mbi fytyrë.
4) Demo 1 — Runway Act-Two (workflow i pastër për performance transfer)
Act-Two animon karakterin duke transferuar movement + expressions + speech/audio + gestures nga driving performance. (Runway)
4.1 Spec-e që duhen ditur (që ndikojnë planifikimin)
- Deri 30 sek; minimum 3 sek; 24 fps; rezolucione sipas aspect ratio. (Runway)
- Ka setting Gestures dhe Facial expressiveness. (Runway)
4.2 Hapat (studentët i ndjekin një-për-një)
Zgjidh modelin/mode
Hap session → zgjidh Gen-4 Video → Act-Two mode. (Runway)
Ngarko driving performance
Ngarko driving performance (ose regjistro brenda platformës). (Runway)
Generate → Review → Iterate
Nëse identiteti "drift": ul facial expressiveness, përdor character image më të qartë, ose rixhiro driving performance me pozë fillestare më të afërt me karakterin. (Runway)
4.3 Checkpoint (si ta dini që jeni "OK")
- Sytë/ goja nuk deformohen në frame kyçe.
- Duart nuk "shkrihen" në gjeste bazë (p.sh. përshëndetje).
- Nuk ka "jump cuts" të gjeneruara.
5) Demo 2 — Kling Motion Control (kopjim veprimi + kontroll lëvizjeje)
Motion Control përdoret për të "map" (transferuar) motion nga video reference te një karakter nga imazh, duke synuar të ruajë shprehje/gestures. (Imagine.Art)
5.1 Si mendoni për Kling (model mendor)
Ju keni:
- Karakterin (një imazh i fortë, i pastër)
- Motion reference (video e aktorit ose video tjetër me veprimin)
- Prompt i lëvizjes (çfarë po bën subjekti + si lëviz kamera)
5.2 Prompting (shumë i shkurtër, por efektiv)
Në Kling (image-to-video), përdorni formulë të tipit "Subject + Movement" (subjekti + lëvizja) dhe pastaj shtoni kamera/ritëm. (KlingAI)
Shembull (template):
Subject: "A single character, waist-up, hands visible, [style]"
Movement: "matches the reference performance: subtle head turns, natural blinking, expressive mouth shapes, small hand gestures"
Camera: "static tripod / subtle handheld / slow push-in"
Constraints: "no face morph, keep identity, no extra fingers, no wardrobe change"
5.3 Hapat praktikë
- Zgjidh Motion Control. (KlingAI)
- Ngarko character image (idealisht e upscaled paraprakisht).
- Ngarko motion reference video (driving performance).
- Vendos motion strength (nis mesatar; rrit vetëm kur keni identitet stabil).
- Gjenero 2–3 variante: (A) motion i ulët, identitet i lartë (B) motion mesatar (C) motion i lartë (vetëm për test)
- Zgjidh variantin më stabil dhe e përdor si bazë për shot-in final.
Shënim praktik: Për prompt-e më sistematike, përdorni strukturimin "scene setting + motion directives + technicals" (si praktikë e rekomanduar për Kling 2.6). (Fal.ai)
6) Harmonizimi i stilit, përbërjes dhe "personality" (për identitet unik)
Ky është segmenti ku shumica e projekteve dështojnë: animimi del mirë, por karakteri nuk ndihet "i njëjti".
6.1 Tre "locks" që duhet t'i vendosni
Style lock
njësoj brush/medium, njësoj kontrast, njësoj grain
Design lock
3 tipare unike që nuk ndryshojnë (p.sh. vetullat, forma e hundës, nishani)
Behavior lock
2–3 sjellje të vogla (p.sh. "flet me duar", "kthen kokën pak para se të buzëqeshë")
6.2 Rregulla kompozimi për transferim më të pastër
- Mbani waist-up për dialog/aktrim (IA punon më mirë). (Runway)
- Shmangni sfonda "busy" në character image (rrit deformime në edges).
- Nëse doni gjeste: duart në frame që në start. (Runway)
7) Troubleshooting (shkaqe → zgjidhje të shpejta)
Problemi: fytyra "melt" / tiparet ndryshojnë
- Upscale hero image me mjet restorativ (Adobe/Topaz). (Adobe Help Center)
- Ul facial expressiveness (Act-Two). (Runway)
- Ndrysho driving performance: më pak lëvizje të shpejta; ndriçim më i mirë. (Runway)
Problemi: duart deformohen
- Siguro duart në frame që në fillim (Act-Two gestures). (Runway)
- Krijo character image ku duart janë të lexueshme (jo të mbuluara).
- Redukto motion strength (Kling) ose bëj gjeste më të thjeshta në driving video.
Problemi: kamera lëviz pa e kërkuar
Në Act-Two me character image, platforma shton environmental/camera motion automatikisht; nëse s'ju pëlqen, provoni character video për të ruajtur motion-in origjinal. (Runway)
8) Etikë dhe siguri (minimumi i domosdoshëm)
Pëlqim i qartë
Merrni pëlqim të qartë nga aktori për përdorim/transformim të performancës.
Respektim i politikave
Mos përdorni materiale që shkelin privatësi, copyright, ose politika të platformave (Runway e referon Trust & Safety). (Runway)
Detyrë
9) Detyrë e shkurtër (deliverable i qartë)
Brenda 48 orëve:
1
Përgatitni materialet bazë
1 driving performance (10–20s) + 1 character hero image (upscaled).
2
Gjeneroni me Act-Two
1 video output nga Act-Two me:
- Gestures ON
- 2 vlera të ndryshme facial expressiveness (p.sh. default dhe më e ulët) (Runway)
3
Gjeneroni me Kling
1 video output nga Kling Motion Control me 2 nivele motion strength. (Imagine.Art)
4
Reflektim i shkurtër
150–200 fjalë reflektim: "çfarë e prishi identitetin dhe si e korrigjova".
Burime kryesore (për referencë gjatë punës)
Runway Act-Two
Runway Help Center — "Creating with Act-Two" (spec, best practices, settings). (Runway)
Kling Motion Control
Kling (ekosistem + modele) dhe praktika prompting (Kling models overview; prompt guide). (Scenario)
Upscaling Tools
Upscaling (2026): LetsEnhance për overview të përditësuar; Topaz dhe Adobe për dokumentacion/feature. (LetsEnhance)
Platforma/hube
Platforma/hube: Freepik Upscaler; OpenArt Upscale. (Freepik)
Open-source
Open-source: Upscayl (Real-ESRGAN). (GitHub)
Nëse dëshiron, në mesazhin tjetër më jep 1–2 fjali për karakterin (moshë, stil vizual, 2 tipare unike) dhe unë do të kthej: (a) një prompt "character hero image", (b) një prompt "performance direction" për aktorin, dhe (c) një checklist teknike për xhirimin që minimizon deformimet.