Google menggunakan video youtube dari cabaran manikin untuk melatihnya

Isi kandungan:

Apa yang anda perlu ketahui
Dapatkan Lebih Banyak Piksel 3a
Google Pixel 3a

Apa yang anda perlu ketahui

Google melatih AI untuk membuat peta kedalaman mengasingkan subjek manusia di tempat kejadian menggunakan hanya satu kamera.
Sebagai titik permulaan, Google menggunakan 2000 video YouTube dari Challenge Mannequin untuk melatih AI.
Hasilnya akan membawa kepada keupayaan untuk menambah kesan kepada video, seperti mod potret, dan digunakan untuk Realiti Semula.

Dalam catatan blog baru-baru ini, Google terperinci bagaimana ia telah bekerja pada persepsi mendalam dalam video di mana kedua-dua kamera dan subjek bergerak. Sebagai titik permulaan, kajian ini memerlukan akses kepada sejumlah besar data untuk melatih AI, dan langkah logik pertama adalah melatihnya untuk mengesan orang-orang dalam keadaan di mana kamera bergerak tetapi orang-orang itu statik.

Ternyata, Google mempunyai sumber yang sempurna untuk data ini dalam bentuk video YouTube yang difilemkan untuk Cabaran Manekin. Dalam cabaran ini, seseorang atau kumpulan orang akan berdiri sepenuhnya sebagai kamera yang bergerak di sekitar kedudukan mereka. Google menggunakan 2000 video dari cabaran untuk membantu melatih AI untuk mengesan tokoh manusia dalam pelbagai adegan yang berbeza.

Sesuatu yang menjadikan kajian ini lebih menarik adalah hakikat bahawa Google mengajar AI untuk membuat peta kedalaman menggunakan rakaman yang telah ditembak menggunakan hanya satu kamera. Kebanyakan kali, pelbagai kamera mesti digunakan untuk merasakan maklumat kedalaman di tempat kejadian.

Google sudah menggunakan sesuatu yang serupa untuk imej pegun untuk mencipta kesan mod potretnya pada telefon Pixel. Walau bagaimanapun, ini hanya berkaitan dengan imej pegun. Kaedah baru Google telah berkembang adalah melatih AI untuk membuat peta kedalaman di mana kedua-dua kamera dan subjek bergerak dalam keadaan.

Dengan bercabang ke dalam video, ia akan membuka ciri-ciri di masa hadapan untuk membuat bokeh dalam adegan video sama seperti mod potret pada telefon anda. Satu lagi manfaat yang diperolehi daripada kajian ini akan meningkatkan hasil untuk realiti tambahan, seperti Playmojis dari Google Playground.

Kemungkinan lain ialah penjanaan imej 3D dari adegan 2D. Walaupun perkakasan kamera sentiasa penting untuk fotografi dan videografi, apa yang telah dilakukan oleh Google selama bertahun-tahun dengan perisian menunjukkan bahawa, pada masa akan datang, algoritma akan sama pentingnya dan membantu memberikan pengalaman baru.