Meta Llama 3 Mengklaim AI Generatif Open Source yang Terbaik, Kalahkan Gemini?

Rahmat Jiwandono
Senin 22 April 2024, 17:22 WIB
Logo Meta. (Sumber: Unsplash)

Logo Meta. (Sumber: Unsplash)

Techverse.asia - Meta telah merilis entri terbaru dalam seri model kecerdasan buatan atau Artificial Intelligence (AI) generatif terbuka Llama: Llama 3. Atau, lebih tepatnya, perusahaan telah meluncurkan dua model dalam keluarga Llama 3 barunya, dan sisanya akan hadir pada tanggal mendatang yang belum ditentukan.

Baca Juga: Spesifikasi dan Harga DJI Avata 2, Ditawarkan dalam 3 Opsi Paket

Llama 3 saat ini menampilkan dua bobot model, dengan parameter 8B dan 70B. Angka B di sini diperuntukkan bagi miliaran orang dan menunjukkan betapa kompleksnya suatu model dan seberapa banyak pelatihan yang dipahami model tersebut.

Sejauh ini Llama 3 hanya menawarkan tanggapan berbasis teks, tetapi Meta menyatakan bahwa ini adalah 'lompatan besar' dibandingkan model Llama generasi sebelumnya yakni Llama 2 8B dan Llama 2 70B, dari segi performanya.

Faktanya, Meta mengatakan bahwa untuk jumlah parameternya masing-masing, Llama 3 8B dan Llama 3 70B - yang dilatih pada dua 24.000 cluster GPU yang dibuat khusus - merupakan salah satu model AI generatif dengan performa terbaik yang ada saat ini.

Baca Juga: Selama Ramadan dan Idulfitri 2024, Aktivitas Mobile Gaming Melonjak Sampai 78%

Llama 3 menunjukkan lebih banyak keragaman dalam menjawab pertanyaan, memiliki lebih sedikit penolakan palsu, menolak menjawab pertanyaan, dan dapat memberikan alasan yang lebih baik. Meta juga mengklaim kalau Llama 3 memahami dapat lebih banyak instruksi dan menulis kode lebih baik dari sebelumnya.

Dalam postingan blongya, Meta mengklaim kedua ukuran Llama 3 mengalahkan model berukuran serupa seperti Gemma dan Gemini Google, Mistral 7B, dan Claude 3 dari Anthropic dalam pengujian benchmark tertentu.

Dalam benchmark MMLU, yang biasanya mengukur pengetahuan umum, kinerja Llama 3 8B jauh lebih baik daripada Gemma 7B dan Mistral 7B, sementara itu, Llama 3 70B sedikit mengungguli Gemini Pro 1.5.

Llama 3 70B yang dapat mengalahkan Gemini 1.5 Pro pada MMLU, HumanEval, dan GSM-8K, dan - meskipun tidak menyaingi model Anthropic yang paling berkinerja, Claude 3 Opus - Llama 3 70B mendapat skor lebih baik daripada model terlemah kedua di seri Claude 3, Claude 3 Sonnet, pada lima benchmark (MMLU, GPQA, HumanEval, GSM-8K dan MATH).

Baca Juga: Anthropic Meluncurkan Claude 2.1: Bisa Menganalisis 150.000 Kata di Satu Prompt, dan Lebih Sedikit Jawaban Salah

Meta mengatakan, penilai manusia juga menilai Llama 3 lebih tinggi dibandingkan model lain, termasuk GPT-3.5 milik OpenAI. Perusahaan milik Mark Zuckerberg ini menyebutkan pihaknya menciptakan kumpulan data baru bagi penilai manusia untuk meniru skenario dunia nyata di mana Llama 3 mungkin digunakan.

Kumpulan data itu mencakup kasus penggunaan seperti meminta saran, ringkasan, dan penulisan kreatif. Meta mengatakan tim yang mengerjakan model tersebut tidak memiliki akses ke data evaluasi baru ini, dan hal ini tidak memengaruhi kinerja model.

"Kumpulan evaluasi ini berisi 1.800 petunjuk yang mencakup 12 kasus penggunaan utama: meminta saran, bertukar pikiran, klasifikasi, menjawab pertanyaan tertutup, pengkodean, menulis kreatif, ekstraksi, menghuni karakter/persona, menjawab pertanyaan terbuka, penalaran, menulis ulang, dan meringkas," kata Meta.

Baca Juga: Video Streaming di Twitch Hadir dengan Tampilan Vertikal

Llama 3 diharapkan memiliki ukuran model yang lebih besar (yang dapat memahami rangkaian instruksi dan data yang lebih panjang) dan mampu memberikan respons yang lebih multimodal seperti, hasilkan gambar atau transkripsikan file audio.

Menurut Meta, versi model yang lebih besar ini, yang memiliki lebih dari 400 miliar parameter dan idealnya dapat mempelajari pola yang lebih kompleks dibandingkan versi model yang lebih kecil, saat ini sedang dalam tahap pelatihan, namun pengujian performa awal menunjukkan bahwa model ini dapat menjawab banyak pertanyaan yang diajukan melalui benchmarking.

Namun demikian, Meta tidak merilis pratinjau model yang lebih besar ini, dan tidak membandingkannya dengan model besar lainnya seperti GPT-4.

Baca Juga: Pembaruan GPT-4 Turbo, Lebih Pintar dan Banyak Data Masukan Baru

Follow Berita Techverse.Asia di Google News
Berita Terkait Berita Terkini
Lifestyle28 Agustus 2026, 15:17 WIB

Pertamina Eco RunFest 2026: Hadirkan 7 Inisiatif Keberlanjutan Lingkungan

Ajang yang memasuki tahun ke-13 pelaksanaannya ini menargetkan 14 ribu pelari dan 10 ribu pengunjung.
Pertamina Eco Run Fest 2026. (Sumber: istimewa)
Techno28 Agustus 2026, 15:16 WIB

Ditenagai Ryzen Z2 Extreme, ASUS ROG Xbox Ally 20 Bisa Dipesan Sekarang

Mennyambut hari jadi ke-20, ASUS ROG umumkan Xbox Ally X20 dengan performa AMD Ryzen AI Z2 Extreme dan dukungan kacamata Xreal R1.
ROG XBOX Ally X20. (Sumber: ASUS)
Startup28 Agustus 2026, 13:26 WIB

Asosiasi Blockchain Indonesia Gandeng Privy Perkuat Kepercayaan Digital

ABI bekerja sama dengan Privy untuk meningkatkan infrastruktur digital trust dan keamanan verifikasi identitas di industri blockchain Indonesia.
Asosiasi Blockchain Indonesia x Privy. (Sumber: ist)
Techno28 Agustus 2026, 13:23 WIB

SailPoint Hilangkan Blind Spot dengan Perlindungan Terpadu Identitas Manusia, non-human, dan AI agent

Solusi keamanan identitas yang dirancang untuk melindungi, mengelola, dan mendukung konvergensi tenaga kerja masa depan
SailPoint Identity Security. (Sumber: null)
Travel28 Agustus 2026, 11:58 WIB

Dragon Ball Z Bakal Punya Taman Hiburan Raksasa di Prancis, Gokunya Bisa Jadi Nyata!

Intip lokasi, konsep, dan detail lengkapnya di sini!
Taman hiburan bertemakan Dragon Ball Z. (Sumber: null)
Techno28 Agustus 2026, 11:57 WIB

Sony Meluncurkan Xperia 10 VIII dengan Fokus pada Peningkatan Kemudahan Penggunaan Sehari-hari

Handset ini menawarkan sedikit peningkatan dengan harga yang jauh lebih mahal.
Sony Xperia 10 VIII. (Sumber: Sony)
Automotive28 Agustus 2026, 09:40 WIB

Pendiri VeilSide Hironao Yokomaku akan Meriahkan Gelaran IMX 2026

Jangan lewatkan kesempatan langka bertemu sang legenda tuning dunia!
Pendiri VeilSide Hironao Yokomaku. (Sumber: istimewa)
Techno28 Agustus 2026, 09:40 WIB

Spesifikasi dan Harga Garmin Fenix 9 Series, Daya Tahannya Bisa Capai 57 Hari

Model Pro yang tangguh namun elegan ini menghadirkan casing jam tangan titanium pertama dan layar AMOLED terbesar pada seri Fenix.
Garmin Fenix 9 dan Fenix 9 Pro. (Sumber: Garmin)
Techno27 Agustus 2026, 14:49 WIB

Shokz OpenFit Air 2: Earbud Open-Ear Terringan dengan Hook yang Hampir Tak Terasa

Perangkat ini dirancang untuk kenyamanan ekstra tanpa menutup saluran telinga.
Shokz OpenFit Air 2. (Sumber: Shokz)
Techno27 Agustus 2026, 14:47 WIB

ASUS Hadirkan 2 Mouse Gaming yang Dapat Diskutomisasi

Mouse ROG Gladius IV Ace dan ROG Spatha X memadukan kontrol presisi dengan beragam opsi kustomisasi mendalam.
ROG Gladius IV Ace. (Sumber: ASUS)