DeepMind’s New AI Just Changed Science Forever

Dalam episode Two Minute Papers ini, Dr. Károly Zsolnai-Fehér tampil di depan kamera untuk membahas Aletheia, AI agent dari kelompok riset Quoc Le di DeepMind yang diklaim mampu melakukan riset dan menulis inti makalah ilmiah. Pertanyaan utamanya adalah apakah AI bisa menemukan sesuatu yang benar-benar baru dan mendorong kemajuan manusia. Menurut Károly, ini jauh lebih sulit daripada mathematical olympiad, karena soal olimpiade selalu bisa dipecahkan dengan pengetahuan inti yang terbatas, sedangkan masalah terbuka di dunia nyata belum tentu bisa dipecahkan sama sekali. Ada dua hambatan besar: AI masih berhalusinasi dengan mengarang makalah dan penulis palsu, serta tidak ada data latih untuk hal yang belum diketahui siapa pun. Sistem sebelumnya dari kelompok yang sama meraih performa setara medali emas olimpiade dan dirilis sebagai Deep Think untuk pelanggan Gemini Advanced.

Aletheia bekerja dengan generator yang membuat calon solusi dan verifier yang menyaring hasil buruk, lalu memolesnya dalam beberapa putaran. Tiga kuncinya adalah memeriksa proofs dalam natural English language alih-alih bahasa matematika formal sambil menyembunyikan alur pikir dari verifier, berpikir lebih lama dengan compute 100 kali lebih hemat dan skor naik dari sekitar 65 persen menjadi 95 persen bahkan tanpa internet, serta kemampuan mencari dan menggabungkan teknik dari banyak makalah. Hasilnya, Aletheia memecahkan empat problems Erdős secara mandiri, meski menurut teman matematikawan Károly soal itu tergolong mudah dan hanya lama diabaikan para ahli. Ia juga menulis inti makalah tentang konstanta dalam geometri aritmetika dan membantu empat makalah lain. Para experts independen memeriksa kebenaran dan kebaruannya, dan hasilnya lolos. AI ini kini mencapai level riset yang layak terbit, sementara level 3 dan 4 berupa terobosan besar belum terjangkau.