AI menghasilkan kesadaran diri, "Tomb Raider" Laura terbangun! Revolusi video game ada di sini

Sumber artikel: Xinzhiyuan

Sunting: Persik Aeneas

Seorang master up asing menggunakan ChatGPT untuk menyuntikkan kesadaran diri ke agen AI. Laura, yang melahirkan "kehidupan", terbangun dan mulai menembus level di "Tomb Raider" sendirian.

Akan seperti apa video game jika karakter game dihembuskan ke dalam kehidupan?

Dulu, ini adalah imajinasi banyak orang, tetapi sekarang, dengan perkembangan agen AI, imajinasi tersebut mulai menjadi kenyataan.

Baru-baru ini, seorang penulis YouTube Foxmaster membuat video asli dari game klasik "Tomb Raider".

Dan sang heroine, Laura, sebenarnya adalah agen AI yang bisa mengendalikan karakternya!

Dapat dikatakan bahwa dengan menggunakan berbagai alat AI seperti visi mesin, pemosisian, pengenalan objek, animasi, teks dan suara, Foxmaster telah menyuntikkan kehidupan digital ke dalam karakter game.

Beberapa hari yang lalu, Stanford Smart Body Town, yang meledak di komunitas AI, secara resmi bersifat open-source. 25 agen AI dengan kepribadian mereka sendiri tinggal, bekerja, dan berteman di kota virtual kotak pasir seperti "Dunia Barat".

Jadi, mungkinkah ini masa depan video game?

Pahlawan wanita "Tomb Raider" memiliki kesadaran

Konsep membangun AI virtual yang bisa memainkan game memang sudah umum. Namun, yang ingin dilakukan Formaster adalah membuat karakter ini terasa seperti orang sungguhan.

Oleh karena itu, ia memilih game "Tomb Raider", protagonis dari game tersebut, Laura, adalah karakter dengan kepribadian yang kuat dan karakter yang terdefinisi dengan baik.

Dan Formaste berharap kepribadian ini akan berdampak pada hasil akhir game.

Bagaimana membuat agen AI Lara Croft ini benar-benar sadar diri di dalam game?

Setelah mendalami langkah-langkah berikut, Formaster akhirnya berhasil.

Pelajari aturan mainnya

Langkah pertama adalah memintanya mempelajari aturan mainnya. "Tomb Raider" telah memberikan tutorial, menjelaskan semua proses kontrol game.

Penulis meminta Lara untuk berlatih dengan cara yang diberikan dan menyelesaikan tutorial di setiap tahap seperti pemain manusia.

Tutorial berakhir saat Lara keluar dari pool, sehingga program dapat dimulai ulang pada saat itu untuk melakukan perbaikan.

Pada awalnya, meningkatkan Lara sangatlah sulit.

Dia terkadang tampak bingung, berjalan di sekitar peta secara acak, dan terkadang bahkan terjebak di bilah menu, menatap kompasnya berulang kali.

Untuk mengatasi masalah ini, penulis menyesuaikan kembali jam utama pada mesin virtual dan mempercepat proses permainan sebanyak 40 kali. Cara ini berhasil, dan agen AI akhirnya menyelesaikan tutorialnya dalam waktu yang relatif baik.

Namun, ada masalah: Lara sering terjebak di satu tempat, dan setiap level dibuat dari elemen statis, sehingga hanya ada satu jalur pengoptimalan.

Hal ini dapat membuatnya hanya mengetahui jalan mana yang tidak boleh diambil, alih-alih menghasilkan pendekatan yang lebih holistik untuk masalah tersebut. Namun yang penulis harapkan adalah Lara belajar menemukan sendiri proses eksplorasi tersebut.

Mengingat satu-satunya pengetahuan yang dimiliki Lara adalah apa yang ditampilkan di layar untuk setiap level, penulis mengamati perilaku pemain manusia yang belum pernah memainkan game tersebut.

Beberapa orang akan membaca keseluruhan tutorial, dan beberapa orang akan menjelajahi lingkungan sekitar terlebih dahulu, dan perbedaan pilihan ini ditentukan oleh "kepribadian" orang yang berbeda.

Justru sikap inilah yang perlu dipelajari Lara.

identifikasi peran

Untuk membuat koneksi dengan Lara untuk AI, AI perlu diberi tahu bahwa dia adalah sekumpulan piksel. Setelah pemain manusia memasuki permainan, mereka tiba-tiba memiliki kesadaran seperti itu.

Dalam hal ini, penulis merekam video 24 jam Lara bergerak ke arah yang berbeda dari berbagai sudut, sehingga agen AI dapat mengenali karakter tertentu.

Seperti mobil self-driving, mampu merekam video 24 jam pada 30 frame per detik, menghasilkan 2.592.000 gambar referensi untuk mengenali rambu-rambu jalan.

Pertama, penulis melacak piksel utama kepala, dan kemudian piksel utama badan, untuk memilih wilayah yang relevan.

Untuk memastikan Lara hadir di setiap gambar, penulis meminta program untuk mengidentifikasi gambar yang tidak mengandung highlight.

Saat Lara menempati seluruh layar, atau saat objek dua dimensi menghalangi jalannya, penulis menggunakan AI vision capture untuk membantu mengidentifikasi Lara, dan hasilnya cukup akurat untuk mengidentifikasi karakter di layar.

Interaksi Lingkungan

Setelah Anda dapat mengenali Lara, Anda perlu membuat AI berinteraksi dengan lingkungan.

Seluruh lingkungan game terdiri dari blok yang sama, penulis mengimpornya ke kubus, kemudian menangkap lingkungan dari semua sudut, dan kemudian menjalankan proses pengenalan, sehingga agen AI dapat mengenali lingkungan, seperti prosesnya pemain manusia menafsirkan gambar.

Area yang disorot dengan warna merah adalah tekstur yang tidak dikenal. Namun, AI masih kurang memiliki kesadaran ingin pergi ke suatu tempat dan perlu mengetahui seberapa jauh jaraknya dari lingkungan sekitarnya.

Menariknya, area yang tidak dikenali ini biasanya merupakan lokasi yang jauh dari Lara, atau lokasi yang terhalang oleh objek 2D lainnya.

Saat kita mengamati tingkah laku pemain manusia dan melihat gambar ini, kita bisa langsung mengerti bahwa area yang ditunjuk panah adalah pintu masuk.

Kita mungkin tidak tahu ukuran kamar sebelah, tapi kita tahu itu ada.

Namun, itu juga bisa menjadi ilusi optik. Saat kita bergerak, tekstur area pintu masuk berbeda dengan tempat lain, yang menjadi ciri khas ruang 3D.

Oleh karena itu, agen AI harus belajar bergerak dan membandingkan. Secara komputasi, banyak gambar dapat digunakan untuk menentukan tekstur mana yang memiliki variasi ukuran paling sedikit.

Di sini Anda dapat menggunakan area poligon utama, dan mereka berubah terutama berdasarkan probabilitas yang sebanding dengan jarak antara satu sama lain.

### MEMBAYANGKAN

Sekarang AI tahu di mana dia berada, dia harus memutuskan ke mana dia ingin pergi selanjutnya.

Dengan mengenali tekstur, Anda dapat membawanya ke lokasi tertentu, namun menavigasi level membutuhkan sesuatu yang lebih sederhana.

Cara tercepat untuk melakukannya adalah dengan menyederhanakan kontras dan mengidentifikasi perubahan cahaya yang tiba-tiba di suatu area. Namun, pemain manusia tidak harus pergi ke tempat-tempat tersebut.

Saat ada banyak celah, AI harus menunjukkan minat yang cukup, tetapi tidak menyebabkan kematiannya.

Misalnya, jika sebuah lubang terlalu dalam, tidak mungkin untuk melompat tanpa berpegangan pada tepian di sekitarnya. Jika ada air di bawah sana, itu mungkin sepadan dengan risikonya.

Pemain manusia tahu kapan harus melompat, tetapi tindakan Lara semuanya berasal dari tutorial, ia harus memperkirakan dengan tepat berapa banyak blok antara dirinya dan target, apakah ia harus mengumpulkan momentumnya, dan apakah ia harus berhenti sejenak sebelum melepaskannya. .

Singkatnya, dia harus membuat penilaian yang akurat seperti pemain manusia.

Jika dia mengetahui ukuran lubang sebelumnya, dia akan berlari sangat cepat, yang tidak sesuai dengan harapan kami.

Untuk mengumpulkan lebih banyak informasi lingkungan, penulis mendorong AI, jika ragu, harus memutar kamera untuk mengumpulkan lebih banyak informasi.

Namun kenyataannya, AI pun bisa terjebak di dalam ruangan.

Untuk mendorongnya keluar ruangan, penulis menambahkan beberapa aturan koleksi.

Misalnya, setiap kali dia menemukan tekstur yang belum pernah terlihat sebelumnya, area tersebut menjadi prioritas, dia harus bergerak sedemikian rupa sehingga memperbesar ukuran tekstur tersebut di layar.

Dengan cara ini, dia hanya bisa maju melalui level. Karena ada tekstur unik di setiap level, satu-satunya cara untuk membukanya adalah dengan naik ke level berikutnya.

Singkatnya, Lara terus-menerus menganalisis apa yang dia lihat di layar - tekstur permukaan yang berbeda, dia menggerakkan tubuhnya, dan menentukan tempat menarik baru (yaitu tekstur yang belum ada di katalog).

Dalam proses ini, dia akan terus melakukan verifikasi, untuk menemukan tekstur yang hilang.

olahraga

Meski dengan peningkatan yang disebutkan di atas, AI masih terlalu robotik, dan pola aksinya terlihat jelas.

Untuk memperbaikinya, penulis mengamati pemain manusia lagi.

Apa yang menentukan bagaimana seorang pemain manusia bertindak dalam sebuah game? Ini ingatan kita, kita ingat bagaimana tindakan disatukan.

Oleh karena itu, proses ini juga perlu dibangun ke dalam AI, karena Lara harus menyadari kemampuan atletiknya sendiri.

Untuk tujuan ini, penulis menyimpan tindakan AI setiap detik untuk melatihnya, lalu menambahkan aturan yang memungkinkannya melakukan tindakan tersimpan ini pada saat yang bersamaan.

Dengan cara ini, pergerakan AI menjadi lebih halus.

Selain itu, karena cooldown dari setiap aksi diketahui, hal itu mencegah AI melakukan tindakan yang tidak perlu saat masih aktif.

Pada gambar di bawah, api menyala kembali dengan sangat cepat sehingga dibutuhkan lompatan besar untuk menyeberang.

Untungnya, saluran ini disederhanakan secara visual dan mudah untuk mengidentifikasi tepi blok.

AI tahu bahwa Lara akan selalu melakukan lompatan yang benar ketika bagian pertama dari blok diaktifkan, seperti yang dipahami oleh pemain manusia.

Kepribadian injeksi ChatGPT

Selanjutnya, kepribadian Lara perlu ditanamkan ke dalam agen AI. Kepribadian didasarkan pada pengalaman dan ingatan, dan kombinasi dari faktor-faktor ini menentukan karakter Lara.

Menurut pengaturan permainan, dia adalah seorang arkeolog terkenal yang tidak pernah takut mengambil risiko dan bersedia menerima tugas gunung yang ditugaskan tanpa imbalan, semuanya karena cinta.

Selain itu, Lara sangat kaya dan baru saja pindah ke sebuah mansion dengan dekorasi interior yang sangat elegan dan ruang pelatihan di dalam rumah tersebut. Dia juga sangat pandai mengajar, berenang, memanjat, dan memiliki daya tahan yang sangat kuat.

Ketika dia menghadapi bahaya selama petualangannya, dia bisa tetap tenang dan sangat berani, dan tidak akan ragu untuk membantu teman-temannya.

Menghadapi pengepungan serigala, dia menembak dengan akurat dengan pistol, dan juga bisa membunuh serigala berbahaya dengan belati. Satu-satunya hal yang dia tolak adalah membuka kunci secara paksa.

Semua hal di atas adalah kepribadian Lara yang dipelajari dari setting game.

Selanjutnya, adalah mengomentari semua yang dia lihat dengan cara yang otentik, di mana penulis telah menyusun ciri-ciri kepribadian Lara ke dalam database.

Agar komentar dapat memahami situasi aktual, program perlu mengkorelasikan gambar game dengan sesuatu yang dapat diidentifikasi dalam kehidupan nyata.

Untuk gambar yang biasanya memiliki detail tekstur yang lebih sedikit, pencarian gambar terbalik Google dapat digunakan untuk mencocokkannya.

Oleh karena itu, ketika agen AI mendeteksi tekstur yang cukup besar, ia memulai pencarian.

Untuk mengenali kata-kata, penulis menyalin seluruh halaman ke ChatGPT. ChatGPT kemudian diminta untuk mengklasifikasikannya berdasarkan jumlah kemunculan sebelum menambahkan kata yang dikenal ke dalam daftar.

Terakhir, ChatGPT diminta untuk membuat kalimat berdasarkan kata-kata tersebut dengan mempertimbangkan kepribadian Lara.

Dengan melakukan itu, saya ingin ChatGPT benar-benar mengomentari apa yang dilihat Lara di kehidupan nyata.

Misalnya, jika teksturnya diidentifikasi sebagai singa laut, ChatGPT dapat memberikan komentar yang menghubungkan singa laut dengan ciri kepribadian Lara.

Secara umum, kepribadian agen Lara diatur melalui ChatGPT menggunakan berbagai atribut seperti "berani", "ramah", atau "pintar".

Di dalam game, semua objek yang dilihat dan dikomentari Lara akan melewati filter kepribadian ini, dan Lara akan merespons sesuai dengan kepribadian yang telah ditetapkan.

Misalnya untuk anjing laut di atas, Lara akan menyebutkan fosil singa laut, atau kemampuan berenang yang sangat baik, dan tidak akan mengomentarinya di sirkus.

Netizen: Tubuh cerdas AI membuat video game menjadi karya seni

Beberapa netizen mengatakan bahwa ini adalah salah satu cara perasaan paling keren dan alami bagi karakter untuk mengembangkan diri. Saat karakter menjadi hidup, Anda benar-benar dapat merasakan video game sebagai sebuah karya seni.

"Cara dia berbicara dan menganalisis sekelilingnya sangat lucu. Memberi bot AI kemampuan untuk mengomentari lingkungannya, tidak peduli seberapa bagusnya sebenarnya, membuatnya terasa seperti manusia sungguhan."

"Ini menarik. Keingintahuannya yang terpisah dan sentuhan imajinasinya sangat mirip dengan apa yang saya bayangkan akan menjadi monolog batin Lara."

Meski begitu, saya heran bahwa dialognya cocok dengan tindakannya.

Itu membuat AI yang menulis dialog dan AI yang mengendalikan karakter adalah orang yang sama.

Belum lama ini, ketika open source Stanford AI Intelligent Body Town, netizen sangat heboh, mengira AGI telah datang, dan berbagai game RPG dan simulasi akan segera menggunakan teknologi ini.

Dan kini, Foxmaster menggabungkan ChatGPT, visi komputer, dan pengenalan objek untuk membuat video game lebih menarik.

Mungkin di masa depan, karakter video game dapat memiliki kepribadian yang lebih dalam, lebih fleksibel, respons yang lebih cepat terhadap lingkungan, dan banyak perubahan lain yang bahkan tidak dapat kita bayangkan.

Referensi: