Tokyo (ANTARA/Business Wire)-- Hari ini NTT Communications Corporation, Toei Company, Ltd. dan NTT QONOQ, INC. bersama-sama mengumumkan akan segera meluncurkan demonstrasi layanan pelanggan dengan menggunakan manusia digital untuk berkomunikasi dengan manusia. Demonstrasi tersebut menggunakan manusia digital realistis bernama "CONN." CONN dibuat dengan menggabungkan visual mirip manusia hasil teknologi manusia digital¹ milik Toei Zukun Laboratory dan kepribadian mirip manusia (perilaku dan suara) yang dikembangkan dengan pembuatan gerak tubuh dan teknologi AI sintesis suara milik NTT Human Informatics Laboratories, dan akan berinteraksi dengan pengunjung ruang OPEN HUB Park² NTT Com. Hasilnya akan digunakan untuk menentukan kemungkinan penggunaan manusia digital sebagai titik kontak baru bagi layanan komersial.

CONN dikembangkan dari wajah sembilan manusia asli atau "katalisator" yang dipindai dengan versi terbaru LightStage³ milik Toei Zukun Laboratory, berdasarkan manusia realistis (manusia digital) yang dibuat dengan grafik komputer.

Untuk kepribadian CONN, termasuk perilaku dan suara, data tangkap gerak dan data suara para katalis digunakan untuk melatih mesin AI yang dikembangkan dengan NTT Human Informatics Laboratories, yang mereproduksi karakteristik perilaku dan suara manusia asli pada CONN.

Pada langkah akhir, perangkat lunak berpemilik yang dikembangkan oleh NTT Com mengonversi titik-titik fitur data wajah dan kepribadian yang ditangkap menjadi 3DCG.⁴ Kemudian perangkat lunak ini menghasilkan gerakan dan suara digital berdasarkan program yang dipelajari.

Saat orang-orang mengunjungi OPEN HUB Park, CONN akan berkomunikasi dengan mereka dalam gaya alami, dengan memperlihatkan berbagai ekspresi wajah, perilaku, dan nada suara, seolah-olah sedang berpikir, sambil memandu mereka melewati berbagai zona taman virtual.

Zona penerimaan: CONN akan memperkenalkan konsep OPEN HUB Park dengan menggunakan informasi yang ditampilkan di tujuh monitor LED yang akan dilihat pengunjung ketika mengenakan kacamata AR.

Zona presentasi: CONN akan terlihat di monitor LED seukuran aslinya untuk menjelaskan konten video yang ditampilkan di monitor, dan melakukan sesi tanya jawab interaktif singkat dengan para pengunjung.

Zona perpustakaan⁵: Hewan-hewan yang melambangkan inisiatif Smart World (Dunia Cerdas) akan terlihat di kacamata AR pengunjung untuk memandu mereka melewati zona perpustakaan.

Katalis digital CONN 3DCG akan dioptimalkan agar beberapa perangkat dapat bergerak tanpa kendala antara kacamata AR, tujuh monitor LED, dan monitor seukuran aslinya.

Setiap perusahaan memiliki peran khusus dalam demonstrasi ini:

• NTT Com: Menyediakan lokasi percontohan OPEN HUB Park, menyiapkan skenario evaluasi, arsitektur dan infrastruktur, serta manajemen kendali mutu
• Toei: Pengawasan, produksi, dan konstruksi sistem katalis digital
• QONOQ: Pengembangan perangkat lunak, konten demonstrasi, dan peluang bisnis masa depan

Ketiga perusahaan ini akan menggunakan pembelajaran dari demonstrasi tersebut untuk mengeksplorasi peluang menggunakan manusia digital dalam perusahaan mereka dan dalam solusi bagi pelanggan di berbagai industri dan sektor, misalnya petugas acara/ruang pamer, resepsionis perusahaan, dan pegawai toko pakaian.

Karena masalah kekurangan tenaga kerja dan kebutuhan peningkatan produktivitas menjadi kian serius di Jepang, berbagai perusahaan berusaha menciptakan solusi yang menggabungkan teknologi canggih seperti XR, metaverse, dan robotika. Misalnya, chatbot dan karakter virtual sudah digunakan secara luas di pusat panggilan dan toko. Tapi masih banyak orang lebih suka berinteraksi dengan manusia asli, atau setidaknya karakter virtual yang dapat bergerak dan berkomunikasi seperti manusia asli.

Berdasarkan latar belakang ini, ketiga perusahaan tersebut menciptakan CONN, manusia digital yang berperilaku seperti manusia alami. CONN menggabungkan teknologi penciptaan manusia digital dari Toei Zukun Laboratory dengan teknologi AI pembuatan gerak tubuh⁶ dan teknologi AI sintesis suara⁷ milik NTT Human Informatics Laboratories. CONN akan berfungsi sebagai katalis digital⁸ untuk menghadirkan layanan pelanggan di OPEN HUB untuk Smart World⁹; berdasarkan hal ini, berbagai peluang akan dieksplorasi untuk menggunakan manusia digital sebagai titik kontak baru bagi layanan perusahaan. Sejauh ini, manusia digital dikembangkan terutama untuk hiburan.

¹ Teknologi manusia digital menggunakan pemindaian dan tangkap gerak berdefinisi tinggi, digabungkan 3DCG untuk menciptakan sosok manusia yang fotorealistik.
² OPEN HUB Park adalah tempat kerja berteknologi canggih yang dibuka oleh NTT Com pada bulan Februari 2022.
³ LightStage adalah sistem pemindaian wajah manusia yang mampu mereproduksi bentuk dan tekstur berdefinisi tinggi dengan mengambil gambar sambil mengontrol sejumlah besar cahaya yang terpasang di bola langit.
⁴ Grafik komputer tiga dimensi adalah metode merepresentasikan objek sebagai objek 3G pada permukaan datar di ruang 3D.
⁵ Zona perpustakaan akan dijalankan di tahap demonstrasi selanjutnya.
⁶ NTT Human Informatics Laboratories sedang mengembangkan teknologi AI pembuatan gerak tubuh yang menggunakan model-model yang dirakit dari data ucapan dan data gerakan orang tertentu agar secara otomatis menghasilkan gerakan khas orang tersebut.
⁷ Teknologi AI sintesis suara yang dikembangkan oleh NTT Human Informatics Laboratories memanfaatkan teknologi Deep Neural Network dan basis data banyak suara pembicara untuk mensintesis ucapan yang jelas dan alami dengan tingkat kealamian tinggi dari sejumlah kecil data ucapan orang tertentu untuk mereproduksi keunikan karakteristik mereka.
⁸ Di OPEN HUB, para pakar internal dan eksternal yang membuat proyek bersama dengan para klien perusahaan disebut "katalis". Per Februari 2023, terdapat sekitar 400 katalis.
⁹ NTT Com meluncurkan program OPEN HUB bersama klien dan mitra pada bulan Oktober 2021 untuk bersama-sama menciptakan berbagai konsep bisnis baru dan pada akhirnya menjalankannya.

Kontak

Untuk informasi lebih jauh

NTT Communications
Perencanaan Bisnis, Divisi Solusi Bisnis
openhub-pr@ntt.com

Toei Company, Ltd.
Toei Zukun Laboratory
zukun@toei.co.jp

NTT QONOQ, INC
XR Commerce Representative
info-xr-commerce@ml.nttqonoq.com

Sumber: NTT Communications Corporation