Konuşulan Sözcükleri Ekrana Yansıtan Çözüm: SwipeTalk Air

Sosyal medyada video paylaşımının popülerliğini giderek arttırdığı günümüzde kullanıcılar kendilerini videoyla daha iyi ifade etmek için yeni yöntemler arıyor. Dolayısıyla insanların başkalarıyla anında iletişim kurabilmek için video kaydetmelerini, düzenlemelerini ve paylaşmalarını sağlayan kullanıcı arayüzlerine yönelik talepte de artış gözlemleniyor. Mitsubishi Electric’in Endüstriyel Tasarım Merkezi tarafından bu konuyla ilgili olarak yürütülen araştırmalar kapsamında, hızlı video düzenleme ve paylaşma imkanı gibi en yeni kullanıcı ihtiyaçlarını tespit etmek üzere sosyal medya fenomenleriyle görüşmeler gerçekleştirildi. Yapılan ihtiyaç analizi sonrasında Mitsubishi Electric, parmağın tablet ya da telefon ekranındaki hareketlerini izleyerek konuşulan sözcükleri ekrana yansıtan dünyanın ilk ses aktivasyonlu çizim fonksiyonu SwipeTalk Air’i geliştirdi. Ekranda konumlandırılan metni anında bir yabancı dile çevirebilen ve çevrilen dilde yüksek sesle okunmasını sağlayan SwipeTalk Air, farklı dilleri konuşan kişiler arasındaki iletişimi kolaylaştırmak amacıyla canlı video kayıtlarında söylenenleri anında üç boyutlu metne dönüştürmek için dünyada ilk kez arttırılmış gerçeklik (AR-Augmented Reality) teknolojisinin kullanıldığı özel bir uygulama.

Ekranda konumlandırılan metin anında bir yabancı dile çevrilebiliyor

SwipeTalk Air teknolojisinde, kullanıcı sesli olarak ana dilinde konuşup parmağını cihaz ekranında dolaştırdığında metin söylenilen dilde ekranda konumlandırılıyor. Bu metin anında bir yabancı dile çevrilebiliyor ve çevrilen dilde yüksek sesle okunabiliyor. Konuşan kişi parmağına “AR marker” (Artırılmış Gerçeklik İşaretleyicisi) adı verilen kamerada tespit edilebilir özel imgeler taktığında metin kişinin parmağının çizdiği rotayı takip ediyor. Metnin etkisini arttırmak ve anlaşılmasını kolaylaştırmak için ok, desen veya karikatür tarzı illüstrasyonlar çizilerek videoya eklenebiliyor.

Söylenenleri ekranda çizilen rotaya 3D metin olarak yerleştiriyor

Görüntüleri kameraya alan kişinin parmağını cihaz ekranında dolaştırmasıyla birlikte kullanıcı arayüzü söylenenleri anında videoya 3D metin olarak yansıtıyor. Cihazın kamera özelliği açık konumdayken birkaç kelime söylendiğinde ve ekrana bir çizgi çizildiğinde metin anında çizilen alanda beliriyor. Video kayıt ve düzenleme özelliklerinin kusursuz entegrasyonu sayesinde anı canlı olarak aktarma deneyimi kesintiye uğramıyor. Hızlı metin konumlama özelliğiyle ise kullanıcılar hazırladıkları videolarla yaratıcılıklarını sergileyebiliyor.

Prototipi Texas’ta Dijital Teknoloji Fuarı’nda kullanıcılarla buluştu

Mitsubishi Electric, sosyal medyaya dinamizm katması beklenen ekstra etkili videolar için kullanıcı arayüzü, video kayıt ve diğer özellikleri içeren SwipeTalk Air app’ı iOS üzerinde geliştiriyor. Prototipi Mart ayında Texas’ta düzenlenen SXSW (South by Southwest) Dijital Teknoloji Fuarı’nda kullanıcılarla buluşan SwipeTalk Air teknolojisinin ticari ürün ve hizmetlerde lansmanı gerçekleştirilmeden önce operasyon kabiliyeti ve fonksiyonlar açısından ilave iyileştirmeler yapılması planlanıyor.

www.MitsubishiElectric.com