Pendiri Bersama AMI Labs Xie Saining: LLM Dalam Beberapa Hal Adalah "Anti-Bitter Lesson", Model Dunia Adalah Masa Depan

Berita Gate, pada 16 Maret, perusahaan model dunia AMI Labs yang berhasil mengumpulkan dana sebesar 1,03 miliar dolar AS dalam putaran pendanaan benih, Co-Founder sekaligus Chief Scientist, serta penulis bersama makalah Diffusion Transformer (DiT), Xie Saining, baru-baru ini memberikan wawancara panjang secara terbuka untuk pertama kalinya. Xie Saining secara sistematis mengkritik jalur AI yang saat ini berfokus pada model bahasa besar (LLM), dan berpendapat bahwa LLM bukanlah cerminan keberhasilan dari “Bitter Lesson” yang diusulkan Richard Sutton, bahkan “dalam beberapa hal bertentangan dengan Bitter Lesson”. Ia menunjukkan bahwa bahasa sendiri adalah struktur yang sangat dipadatkan dari peradaban manusia, seperti sebuah “jalan pintas”, dan ketergantungan berlebihan dapat membatasi kemampuan AI dalam belajar dari dunia nyata. Ia membedakan antara model dunia dan model bahasa: model bahasa memprediksi “token berikutnya”, sedangkan model dunia didasarkan pada prediksi “status berikutnya” berdasarkan tindakan, mampu meramalkan konsekuensi tindakan selama tahap penalaran, sehingga mewujudkan kecerdasan yang lebih aman dan terkendali. Ia juga menyatakan bahwa “AGI adalah sebuah mitos”, dan menciptakan agen cerdas yang mampu bertahan di dunia nyata jauh lebih sulit daripada menyelesaikan kompetisi matematika atau menulis kode. Xie Saining juga mengungkapkan bahwa ia dua kali menolak undangan Ilya Sutskever: pada 2018, ia memilih meninggalkan OpenAI dan bergabung dengan Meta FAIR, dan pada 2024, ia menolak undangan dari perusahaan barunya, SSI, karena perbedaan pandangan dalam jalur multimodal dan visual. Ia menyebutkan bahwa AMI Labs sengaja tidak memiliki kantor di Silicon Valley karena “Silicon Valley sudah terjerumus dalam jalur LLM”. Perusahaan berkantor pusat di Paris dan mengumpulkan data dunia nyata melalui mitra global. Ia berpendapat bahwa paradigma pelatihan AI sedang beralih dari “mengunduh internet” ke “mengunduh manusia”, dan skenario penerapan jangka pendek akan meliputi kacamata pintar AI dan robot.

Lihat Asli
Penafian: Informasi di halaman ini dapat berasal dari pihak ketiga dan tidak mewakili pandangan atau opini Gate. Konten yang ditampilkan hanya untuk tujuan referensi dan bukan merupakan nasihat keuangan, investasi, atau hukum. Gate tidak menjamin keakuratan maupun kelengkapan informasi dan tidak bertanggung jawab atas kerugian apa pun yang timbul akibat penggunaan informasi ini. Investasi aset virtual memiliki risiko tinggi dan rentan terhadap volatilitas harga yang signifikan. Anda dapat kehilangan seluruh modal yang diinvestasikan. Harap pahami sepenuhnya risiko yang terkait dan buat keputusan secara bijak berdasarkan kondisi keuangan serta toleransi risiko Anda sendiri. Untuk detail lebih lanjut, silakan merujuk ke Penafian.
Komentar
0/400
Tidak ada komentar