Google, yeni bir araştırma makalesinde, bu yılki I/O konferansından etkileyici Project Starline demosunun arkasındaki teknolojiyi ayrıntılı olarak açıkladı. Project Starline aslında bire bir 2D video konferans görüşmesini gerçek bir insanın önünde oturuyormuşsunuz gibi hissettiren bir deneyimle değiştirmeyi amaçlayan bir 3D görüntülü sohbet kabinidir.
Basit görünüyor, ancak Google’ın araştırma makalesi, beyninizi, sizden sadece birkaç metre uzakta oturan gerçek bir insan olduğunu düşünmesi için kandırmanın ne kadar çok zorluğunun altını çiziyor. Açıkçası görüntünün yüksek çözünürlüklü olması ve dikkat dağıtıcı unsurlardan arınmış olması gerekir, ancak aynı zamanda kabindeki göreceli konumunuzdan doğru görünmesi gerekir. Ses, bir başka zorluktur, çünkü sistemin, bir kişinin sözlerinin gerçek ağzından geliyormuş gibi ses çıkarması gerekir. Ve bir de küçük bir göz teması meselesi var.
Ama sonunda, Project Starline’ın kullanıcıların büyük kulaklıklar takmasına veya takmasına gerek kalmadan sanal veya artırılmış gerçeklikle benzer bir varlık hissi sunabileceği umut ediliyor. izleyiciler.
Görüntü birimi ve çeşitli izleme donanımı. Resim: Google
Kağıt, bu sorunları çözmeye başlamak için tam olarak ne kadar donanım gerektiğini ayrıntılarıyla anlatıyor. Sistem, 60 Hz’de çalışan 65 inçlik büyük bir 8K panelin etrafına inşa edilmiştir. Etrafında, Google mühendisleri hem renkli görüntüleri hem de derinlik verilerini yakalayabilen üç “yakalama bölmesi” yerleştirdi. Sistem ayrıca dört ek izleme kamerası, dört mikrofon, iki hoparlör ve kızılötesi projektör içerir. Toplamda, toplam yedi video akışı için dört bakış açısından renkli görüntüler ve üç derinlik haritası yakalanır. Ses, 44,1 kHz’de yakalanır ve 256 Kbps’de kodlanır.
Açıkçası tüm bu donanım, iletilmesi gereken çok fazla veri üretir ve Google, iletim bant genişliğinin 30 Mbps’den 100 Mbps’ye kadar herhangi bir yerde olduğunu söylüyor. “kullanıcının kıyafetlerindeki doku detayına ve jestlerinin büyüklüğüne” bağlı olarak. Bu nedenle, standart bir Zoom aramasından çok daha fazlasıdır, ancak metropol bölgesindeki tipik bir ofisin üstesinden gelemeyeceği hiçbir şey yoktur. Project Starline, tüm bu verileri kodlamak ve kodunu çözmek için dört üst düzey Nvidia grafik kartı (iki Quadro RTX 6000 kartı ve iki Titan RTX) ile donatılmıştır. Uçtan uca gecikmenin ortalama 105,8 milisaniye olduğu bildiriliyor.
