3D bir yüzü canlandır: 51 ifade, hazır klipler ve kendi kameran
“Yüzü canlandır”, yaptığın bir kafayı göz kırpan, gülümseyen ve konuşan bir karaktere nasıl dönüştürür: fotoğraftan konuşan büste gerçek bir örnek, beş adımda içeride olanlar, web kamerası ya da telefonla “Canlı yüz”, dosyanın içeriği ve dürüst sınırlar.
Wandy3D ekibi8 dk okuma

Yalnızca boş boş bakan bir 3D kafa, yarım bir karakterdir. Yüzü canlandır özelliği, Wandy3D'de yaptığın bir kafaya göz kırpmayı, gülümsemeyi, kaş çatmayı ve konuşmayı öğretir. Model kendi mesh'ini ve dokusunu korur; hareket eden gözler, dişler ve ağzın içi, standart ARKit adlarıyla 51 ifade şekli ve 11 hazır klip kazanır. Canlı yüz ile modeli web kameran ya da telefonun üzerinden kendi yüzünle yönetirsin. Aşağıda: fotoğraftan konuşan kafaya gerçek bir örnek, içeride olup bitenler ve elde ettiklerin.
Bu yazıdaki kafayla dene
Aşağıda animasyonlu sürümün kendisi var, 3D olarak. Oynatmak için bir klibe dokun, her ifadeyi tek tek hareket ettirmek için 51 şekil sekmesini aç ya da Kamera sekmesini seçip yüzünü şekilden şekle sok: kafa seni taklit eder. Kamera görüntüsü cihazında işlenir ve cihazdan hiç çıkmaz.

Boyutu 13 MB olan bir 3D model yüklenir. Sen açana kadar kamera kapalı kalır.
Örnek: fotoğraftan konuşan kafaya
Kimsenin gerçek yüzünü göstermek istemedik, bu yüzden bu örnekteki kişi gerçek değil: portreyi, görsel üreten bir yapay zekâ kısa bir açıklamadan oluşturdu. Açıklama şuydu: beyaz arka planda siyah tişörtlü, sakallı bir adam; ağzı kapalı, kameraya bakıyor. Sonrası tam olarak her kullanıcıda olduğu gibi ilerledi:
- Fotoğraftan 3D model. Portreyi varsayılan model sürümü Wandy 2 ile Oluştur bölümüne yükledik. Dokulu büst yaklaşık iki dakikada hazırdı.
- Yüzü canlandır. Oluştur → Animasyon bölümünde (model sayfasında da var) Yüzü canlandır düğmesine bastık. Ücret bir kez alınır; yüz canlandırılamazsa otomatik olarak iade edilir.
- Yeni bir sürüm. 43 saniye sonra büstün Animasyonlu yüz adlı ikinci bir sürümü vardı ve sahnede bir İfadeler paneli belirdi. Orijinal model olduğu gibi kalır. Sunucumuz zaten çalışıyordu; normal süre 3–6 dakikadır.

İçeride neler oluyor: beş adım
1. Yüzü bul
Modelin yedi açıdan görüntüsü alınır (tam karşıdan, her iki yana 25° ve 45°, yukarıdan ve aşağıdan 15°) ve yüz takibi her görüntüde 478 nokta bulur: gözlerin, dudakların, kaşların, burnun ve çenenin hatları. Bir açıdan görünmeyen noktalar atılır, kalanlar 3D olarak birleştirilir. Aynı adımda yüzün canlandırılabilir olup olmadığı da kontrol edilir: insan yüzü olmalı, gözler açık, dudaklar kapalı olmalı.

2. Bir yüz şablonu oturt
Animasyon için buna uygun olarak kurulmuş bir yüz gerekir: göz kapaklarının nerede katlandığını, dudakların nasıl aralandığını ve çenenin nasıl hareket ettiğini bilen bir yüz. Biz böyle bir yüz şablonu kullanıyoruz: cilt, göz küreleri, dişler, diş etleri, dil ve ağzın içi; her ARKit ifadesi için de bir şekil. Önce şablonun oranları kafaya uydurulur, sonra şablon nokta nokta modelin yüzeyine doğru çekilir. Bu kafada şablon noktalarının yarısı yüzeye 0,21 mm'den, %90'ı ise 0,65 mm'den daha yakın bir yere oturdu.

3. İfadeleri modelin kendisine aktar
Şablon hiçbir zaman modelinin yerini almaz. Yüzün her noktası, uydurulmuş şablonun en yakın noktasını takip eder; böylece kafa kendi mesh'ini, dokusunu ve benzerliğini korur, yalnızca hareket etme yeteneği kazanır. Dudaklar, birleştikleri çizgi boyunca kesilerek ayrılır; böylece ağız cildi yırtmadan açılabilir. Sakal altındaki ciltle birlikte hareket eder; saçlar, kulaklar, boyun ve kıyafetler ise yerinde kalır. Bu büstte 181.262 noktanın 67.176'sı hareket ediyor: %37.

4. Gözler ve ağzın içi
Dokuya boyanmış gözler kırpılamaz, etrafa da bakamaz; bu yüzden yerlerine bunları yapabilen göz küreleri konur, iris rengi de modelin kendi gözlerinden alınır. Dişler, diş etleri, dil ve ağzın içi dudakların arkasına yerleştirilir ve ışığın ulaşmayacağı yerlerde gölgelendirilir; böylece açık bir ağız delik gibi değil, ağız gibi görünür.

5. Klipler ve dosya
Son olarak dosyaya 11 klip yazılır: Idle (döngüde nefes alma ve göz kırpma), Blink, Smile, Laugh, Surprise, Angry, Sad, Wink, Kiss, Look Around ve Talk. Sonuç yeni bir sürüm olarak kaydedilir: ifade şekilleri ve klipler eklenmiş orijinal model dosyası. İndirilecek dosya 45 MB; görüntüleyiciye akışla yüklenen kopya ise 13 MB.

Standart adlarla 51 ifade
Her ifade bir şekil olarak saklanır (blend shape; Blender'da shape key): örneğin çenesi açık aynı yüz. 0 ile 1 arasında bir değer bu şeklin ne kadar karışacağını belirler; şekillerin her karışımı yeni bir ifade oluşturur, klip dediğimiz de zaman içinde değişen bu değerlerden ibarettir. 51 şekil, Apple'ın ARKit yüz takibinin kullandığı adları taşır; bu adları pek çok araç anlar:
| Yüz bölgesi | Şekil | Örnekler |
|---|---|---|
| Gözler | 14 | eyeBlinkLeft, eyeLookOutRight, eyeWideLeft |
| Kaşlar | 5 | browInnerUp, browDownLeft |
| Çene | 4 | jawOpen, jawLeft |
| Ağız | 23 | mouthSmileLeft, mouthPucker, mouthFunnel |
| Yanaklar ve burun | 5 | cheekPuff, noseSneerLeft |
ARKit'te bir tane daha var: tongueOut; eksik olan tek şekil bu. Adlar standart olduğu için dosya, morph target desteği olan her yerde çalışır (Blender, Unity, Unreal, three.js) ve ARKit adlarıyla kayıt yapan yüz yakalama verileri dosyaya birebir oturur.

Canlı yüz: modeli yüzünle yönet
Sahnede animasyonlu bir sürüm olan her yerde (Oluştur'da, model sayfasında ya da kitaplığında) Canlı yüz özelliğini bulursun. Kamerayı aç düğmesine bas ve:
- Kalibrasyon. İlk seferde yüzünü gevşetip bir an ekrana bakman istenir. Bu nötr yüz, tüm ifadelerin sıfır noktası olur.
- Canlı. Yüz takibi her kamera karesinden 52 değer okur ve model bunları anında gösterir. Varsayılan olarak model yansıman gibi hareket eder (Ayna), büst ya da kafa da başınla birlikte döner; tam boy figür yerinde kalır. Diğer ayarlar altında yumuşatma ve ifade gücü bulunur.
- Kayıt. Klip kaydet, yaptığın mimikleri yeni bir animasyon olarak kaydeder; Bu klibi içeren GLB'yi indir ise modeli senin kaydınla birlikte verir. Video kaydet sahneyi videoya alır; istersen mikrofonun ve köşede kamera görüntün de eklenir.
Yüz takibi tarayıcında, kendi dosyalarımızla çalışır (yaklaşık 10 MB, yalnızca bir kez indirilir) ve kamera görüntüsü hiçbir zaman yüklenmez. Dürüst olmak gerekirse bir sınır var: web kamerasıyla yüz takibi yanak şişirmeyi, burun kırıştırmayı, çenenin yana kaymasını ve ağız kenarlarının aşağı inmesini ölçemez; bu yüzden canlı modda bu şekiller hareketsiz kalır. Klipler ve kaydırıcılar bu şekilleri yine de kullanır.

Telefonun kamera olsun
Web kameran yok mu ya da serbestçe hareket etmek mi istiyorsun? “Canlı yüz” bölümünün yanındaki Telefon kamerası düğmesine bas ve QR kodunu tara. Sayfa telefonda giriş yapmadan ve uygulama gerekmeden açılır; yüz takibini telefonun kendisi yapar. Bilgisayara yalnızca 52 ifade değeri ve başının dönüşü gider, video asla gitmez: iki cihaz aynı Wi-Fi ağındaysa doğrudan, değilse sunucumuz üzerinden; sunucumuz bunları yalnızca iletir ve hiçbir şey saklamaz. Kod, bir telefon bağlanana kadar 10 dakika geçerlidir.
Elde ettiklerin
| Sürüm | Modelinin yeni bir sürümü: Animasyonlu yüz. Orijinal olduğu gibi kalır; animasyonlu sürümü yeniden açmak ücretsizdir. |
| İfadeler | ARKit adlarıyla 51 şekil |
| Klipler | 11: Idle (döngüde), Blink, Smile, Laugh, Surprise, Angry, Sad, Wink, Kiss, Look Around, Talk |
| Gözler ve ağız | Dönebilen ve kırpılabilen göz küreleri; dişler, diş etleri, dil ve ağzın içi |
| Dosya | GLB: modelin kendi mesh'i ve dokusu, şekiller ve klipler |
| Canlı yüz | GLB'ye ek klip olarak eklenen kayıtların ve sahnenin videoları |
| Canlandırılamazsa | Krediler otomatik olarak iade edilir |
İyi bir sonuç için
- En iyi sonucu kafa ya da büst verir. Tam boy figür de olur, ama canlı modda başınla birlikte dönmez.
- Yüz kameraya bakmalı, ağız kapalı, gözler açık olmalı. Dişleri gösteren bir sırıtış ya da aralık dudaklar kabul edilmez: dudakların temiz bir şekilde ayrılabilmesi için kapalı olması gerekir.
- İnsan yüzü. Oranlar insana ait olduğu sürece gerçekçi ya da stilize olması fark etmez; bir canavar ya da hayvan kabul edilmez.
- Önce düzenle, en son canlandır. Orijinalin dokusunu yenile ya da onu düzenle, sonra sonucu canlandır; remesh ifadeleri siler.
- Yüzü açık bırak. Saçlar ve kıyafetler hareket etmez, sakal eder. Ağzın önünde tutulan bir el ya da telefon çeneyle birlikte hareket eder.
Bir yüz canlandırılamazsa (yüz bulunamazsa, ağız açıksa, gözler kapalıysa, oranlar insandan fazla uzaksa ya da yüz çok küçükse) iş durur ve krediler kendiliğinden iade edilir.
Sorular
Ne kadar sürer?
Bir sunucunun beklenmesi dahil genellikle 3–6 dakika; örneğimiz 43 saniye sürdü, çünkü sunucu zaten çalışıyordu. Bu sırada sayfayı kapatabilirsin: iş devam eder ve yeni sürüm kitaplığında görünür.
Ücreti ne kadar?
Model başına sabit sayıda kredi; başlamadan önce Yüzü canlandır düğmesinde gösterilir ve bir kez alınır. Animasyonlu sürümü yeniden açmak, kliplerini oynatmak ve Canlı yüz özelliğini kullanmak ücretsizdir.
Kameram kaydediliyor ya da bir yere yükleniyor mu?
Hayır. Yüz takibi cihazında çalışır; kayıtlar ise sen indirene kadar tarayıcı sekmende kalır. Telefon kamerasıyla yalnızca sayılar gider, görüntü asla gitmez.
Dosyayı bir oyun motorunda ya da Blender'da kullanabilir miyim?
Evet, sürümü GLB olarak indir. Blender ifadeleri ARKit adlarıyla shape key olarak içe aktarır; glTF içe aktaran motorlar bunları blend shape (morph target) olarak, klipleri de animasyon olarak okur.
Çizgi film karakterlerinde çalışır mı?
Yüz insan oranlarına sahipse evet: stilize bir insan kafası çalışır. İnsandan fazla uzak bir yüz, örneğin bir canavar ya da hayvan, kabul edilmez ve krediler iade edilir.
Dişleri görünecek şekilde gülümseyen bir yüzü canlandırabilir miyim?
Henüz değil: modelde ağzın kapalı olması gerekir. Kafayı sakin bir yüz ve kapalı bir ağızla yap; gülümsemeyi animasyon getirir.




