| Istilah | Arti |
|---|---|
| Gemini 3.8 Flash | Model AI terbaru Google yang diulas di video ini, unggul di beberapa benchmark dan dijual dengan harga yang jauh lebih murah dari pesaingnya. |
| benchmark | Tes standar untuk membandingkan kemampuan model AI, misalnya Deep SWE untuk pemrograman atau GDPval untuk pekerjaan kantor nyata. |
| price | Biaya pemakaian model per juta token, yang menurut Berman menjadi keunggulan utama Gemini 3.8 Flash dibanding model lain. |
| Harvey | Penyedia benchmark agent hukum yang di video ini menempatkan Gemini 3.8 Flash di posisi pertama dengan skor 61,4 persen. |
| Terminal Bench | Benchmark yang menguji kemampuan model menulis kode secara mandiri di terminal, dengan versi 2.1 yang mudah dan versi 4.0 yang jauh lebih sulit. |
| cyber | Versi khusus Gemini 3.8 Flash untuk keamanan siber dengan pembatas yang dilonggarkan, hanya tersedia bagi pembela keamanan terpercaya. |
| Fable 5.1 | Model AI pesaing yang diuji Berman dengan tes yang sama, dan hasilnya dinilai lebih baik daripada Gemini 3.8 Flash dalam demo. |
| Terra | Varian GPT 5.6 yang lebih murah dari OpenAI, menjadi pembanding yang sepadan bagi Gemini 3.8 Flash dari segi kelas harga. |
| rubber duck | Bebek karet mainan yang menjadi tema salah satu halaman web uji, dan hasil buatan Gemini untuk tema ini ditaruh Berman di urutan bawah. |
| DJI | Ejaan dalam daftar istilah untuk produk yang dalam video disebut DGX Spark, komputer AI dari Nvidia yang dibuatkan halaman web uji oleh Gemini. |
| Everest | Gunung tertinggi di dunia yang dijadikan peta topografi 3D interaktif oleh Gemini 3.8 Flash dan menjadi demo paling memukau di video. |
| Tesla Model | Mobil listrik Tesla Model Y yang dibuatkan halaman web uji lengkap dengan pilihan warna dan simulasi penghematan bensin. |
Dalam video ini, Matthew Berman mengulas Gemini 3.8 Flash, model baru Google yang menurutnya benar-benar bagus terutama karena harganya. Ia memulai dengan konteks persaingan: Google tertinggal saat ChatGPT muncul, sempat memimpin lewat Gemini 2.5 Pro sekitar satu setengah tahun lalu, lalu kembali tersusul Anthropic dan OpenAI karena beberapa model Gemini terakhir bagus di benchmark tetapi mengecewakan saat dipakai. Gemini 3.8 Flash dirilis hanya beberapa minggu setelah Gemini 3.7. Berman menilai model ini sangat unggul di beberapa benchmark, biasa saja di benchmark lain, dan sangat murah. Pesan pentingnya bagi perusahaan adalah tidak cukup memilih model terbaru dari Anthropic atau OpenAI; mereka sebaiknya membuat benchmark internal sendiri dan menguji setiap model baru agar bisa memilih model yang paling cocok untuk pekerjaannya.
Di Deep SWE, Gemini 3.8 Flash meraih 73,7 persen, setara Claude Opus 5 dan di atas GPT 5.6 Soul, tetapi di GDPval hanya 1545, kira-kira setara GPT 5.6 Terra. Harga perkenalannya 0,75 dolar per juta token input dan 3,75 dolar per juta token output, lalu naik menjadi 1,50 dan 7,50 dolar setelah akhir tahun, sesuatu yang dikritik Berman karena tertulis kecil. Model ini juara benchmark hukum Harvey dengan 61,4 persen, Terminal Bench 2.1 dengan 89,4, dan Humanity's Last Exam dengan 55,9, tetapi hanya 19,1 persen di Terminal Bench 4.0 dan 59 persen di OSWorld. Ada juga versi cyber khusus peserta program Fair Wind yang mencetak 86,2 di CyberGym. Dalam uji coba, biome 3D dan halaman web untuk Apple, DGX Spark, perusahaan rubber duck, Galaxy Z Fold, dan Tesla Model Y dinilai setara GLM 5.3, di bawah GPT 5.6 Soul dan Fable 5.1. Peta topografi 3D Everest dan tiruan Doom justru sangat memukau.
Kata kunci
- Gemini 3.8 Flash
- Harvey
- Terminal Bench
- rubber duck
- Mengulas Gemini 3.8 Flash yang dianggap Google kembali bersaing, dengan konteks sejarah dari ChatGPT yang membuat Google tertinggal hingga Gemini 2.5 Pro.
- Membahas harga (sekitar 1,50 dan 7,50 dolar per juta token, lebih murah dari model Terra sebanding), benchmark seperti Harvey legal (peringkat satu 61,4%) dan Terminal Bench, serta program akses model siber.
- Menguji demo seperti bebek karet, DJI Spark, Gunung Everest, dan Tesla Model Y dengan hasil yang beragam.
Tulis catatan pribadimu untuk video ini. Catatan tersimpan di akunmu dan bisa dibuka dari perangkat mana pun.