Meta inci menuju AI sumber terbuka dengan Llama 3.1 baru

Apakah model parameter 405 miliar Meta benar-benar open source? Tergantung pada siapa Anda bertanya. Inilah cara mencoba sendiri mesin baru tersebut.

Meta, perusahaan induk Facebook, telah mengumumkan program AI sumber terbuka baru yang disebut Llama 3.1 405B. Di balik nama yang hanya disukai oleh seorang programmer, terdapat model bahasa besar (LLM) baru yang lebih kuat yang akan mendukung asisten Meta AI, yang dimasukkan ke dalam banyak program pengguna akhir Meta.

CEO Meta Mark Zuckerberg meluncurkan Llama 3.1 dalam sebuah postingan di Threads, menyatakan, "AI sumber terbuka adalah jalan ke depan." Dalam sebuah wawancara dengan Rundown.ai, Zuckerberg menambahkan, "Model terbuka akan menjadi standarnya, dan menurut saya ini akan berdampak baik bagi dunia. Agak menyedihkan ketika Anda membuat fitur yang sesuai dengan apa yang Anda yakini. baik untuk komunitas Anda, dan kemudian Anda diberitahu bahwa Anda tidak dapat mengirimkannya karena beberapa perusahaan ingin memasukkan Anda ke dalam kotak sehingga mereka dapat bersaing lebih baik dengan Anda."

Apakah ini berarti Llama 3.1 benar-benar open source? Jawabannya penting. Seperti yang ditanyakan oleh Neal Gompa, seorang pengembang Linux di Mastodon, "Apakah itu berarti Llama 3 berada di bawah lisensi sumber terbuka yang disetujui OSI [Open Source Initiative], tidak seperti pendahulunya? Kami tidak dapat mengirimkan Llama 2 di Fedora karena kurangnya penggunaan lisensi sumber terbuka yang disetujui OSI."

Jawabannya adalah tidak. Dalam sebuah wawancara, direktur eksekutif OSI Stefano Maffulli mengatakan kepada saya, "Secara teori, kami setuju dengan semua yang ditulis dan dikatakan Zuck. Jika saja lisensi Meta dapat menghapus pembatasan tersebut, kami akan lebih sinkron."

"Saat ini," lanjut Maffulli, "Llama merupakan tanggung jawab pengembang mana pun; terlalu buram untuk aman digunakan dan memiliki lisensi yang pada akhirnya membuat Meta bertanggung jawab atas inovasi mereka."

Stephen O'Grady, analis industri RedMonk, setuju. “Merupakan kabar baik bahwa Meta telah menghapus beberapa batasan penggunaan pada Llama, namun selama Meta masih membatasi perusahaan mana yang dapat menggunakan perangkat lunak tersebut, seperti yang dilakukan oleh lisensi baru, maka jelas dan tidak dapat disangkal bahwa perangkat lunak tersebut bukan open source. Jika Linux, misalnya, dirilis di bawah lisensi ini, Meta berhak menggunakannya, namun perusahaan seperti Amazon, Google, dan Microsoft tidak bisa. Itu bukan open source, dan kami juga tidak akan menerimanya."

Menurut Zuckerberg, melampaui masalah sumber terbuka hingga ke teknologi, model baru ini dirancang agar lebih efisien dan bertenaga dibandingkan pendahulunya. Ia menawarkan peningkatan kemampuan untuk berbagai aplikasi, mulai dari pemrosesan bahasa alami hingga analisis data yang kompleks. Secara khusus, dia yakin cara Meta lebih baik daripada pendekatan AI Apple.

Llama baru memiliki model parameter 405 miliar, menjadikannya salah satu model AI tercanggih yang ada. Itu masih jauh lebih kecil dibandingkan ChatGPT 4.0, dengan 1,8 triliun parameternya. Meski begitu, ini masih merupakan peningkatan yang signifikan. Diharapkan dapat meningkatkan kinerja dalam penerjemahan bahasa, pembuatan konten, dan penelitian ilmiah.

Zuckerberg mengklaim Llama 3.1 "kompetitif dengan beberapa model tertutup terkemuka, dan di beberapa area, bahkan lebih unggul." Tolok ukur Meta menunjukkan bahwa Llama kompetitif dengan model fondasi terkemuka, termasuk GPT-4, GPT-4o, dan Claude 3.5 Sonnet, dalam berbagai tugas. Dia juga menyatakan, "Menurut perkiraan kami, menurut saya, biayanya akan 50% lebih murah dibandingkan GPT-4 untuk melakukan inferensi langsung pada model 405B."

Model baru ini tersedia saat ini di lebih dari 25 mitra, termasuk AWS, NVIDIA, Databricks, Groq, Dell, Azure, dan Google Cloud. Meta juga menyatakan bahwa ia sudah siap dengan dukungan untuk alat AI populer seperti vLLM, TensorRT, dan PyTorch, sehingga pengembang dapat segera mulai bekerja dengan Llama 3.1

Anda dapat mencoba sendiri mesin baru tersebut. Pengembang dapat memeriksa sendiri Llama 3.1 di sini.