Jakarta, Dexpert.co.id – Chatbot yang dikembangkan salah satu perusahaan milik Elon Musk sukses mengalahkan ChatGPT. Dalam beberapa kali tes, Grok berhasil memiliki skor lebih tinggi dari chatbot yang dikembangkan OpenAI.
Grok yang telah dirilis beberapa waktu lalu mengumumkan telah mengalami upgrade dengan versi 1.5. xAI, pengembang chatbot itu, menjelaskan model terbarunya bisa memahami dokumen lebih panjang, perintah lebih kompleks, dan penalaran lebih maju.
Enterpreneur mencatat Grok 1.5 mendapatkan skor 74,1% pada benchmark HumanEval. Ini terdiri dari 164 masalah pemrograman dan tidak termasuk dalam pelatihan model AI.
Sementara GPT-4 mendapatkan 67%. Chatbot dari Google, Gemini Pro memiliki skor 71,9%.
Skor Grok mendekati Gemini (83,7%) untuk tes MMLU, untuk pengetahuan 57 mata pelajaran tingkat dasar hingga lanjutan. Model terbaru mengantongi skor 81,3%, dikutip Senin (1/4/2024).
Tes Matematika yang mencakup soal kompetisi pelajaran itu untuk sekolah dasar hingga SMA, mencatat Grok mendapatkan 50,6%. Untuk kategori ini, nilainya masih di bawah GPT-4 yakni 52,9%.
Musk diketahui punya ambisi besar pada chatbotnya itu. Dalam akun X, dia mengatakan Grok terbaru akan mengungguli semua AI yang ada di semua metrik.
Dia juga mengatakan pembaruan Grok juga akan dilanjutkan. “Grok 2 tengah berlatih sekarang,” kata dia.
Diumumkan akhir tahun lalu, Grok bersiap akan tersedia untuk pengguna X. Namun chatbot hanya bisa digunakan pada layanan berbayar di dalam aplikasi.
Grok disebut akan dibanderol US$16 per bulan yang terdapat pada fitur X premium.
