Tag: Evaluation

1. Klaim AI 'membaca' bobot model dinilai terlalu dibesar-besarkan (honnibal.dev)
   AI · baru saja · 4 November 2026
2. Mengubah tolok ukur basis data menjadi sinyal reward reinforcement learning (huggingface.co)
   AI · 3 hari lalu · 31 Oktober 2026
3. LLM masih goyah menilai apakah sebuah ide riset benar-benar baru (huggingface.co)
   AI · 4 hari lalu · 30 Oktober 2026
4. Nathan Lambert soal apa yang bisa dan tidak bisa dikatakan sebuah benchmark AI terkemuka (interconnects.ai)
   AI · 5 hari lalu · 29 Oktober 2026
5. Dipaksa memilih kandidat, Grok condong ke Republik dan GPT ke Demokrat (techcrunch.com)
   AI · 1 minggu lalu · 26 Oktober 2026
6. CNN berusia 10 tahun mengalahkan LLM frontier membaca kanker kulit (lynchlab.net)
   AI · 1 minggu lalu · 26 Oktober 2026
7. FairStress dari Ai2 ungkap keadilan model goyah saat ditekan (allenai.org)
   AI · 1 minggu lalu · 23 Oktober 2026
8. Model terbuka tertinggal sekitar enam bulan soal kemampuan siber, menurut Epoch (epoch.ai)
   AI · 2 minggu lalu · 18 Oktober 2026
9. Benchmark AI hanya mengukur sepotong kecil pekerjaan nyata (mercor.com)
   AI · 2 minggu lalu · 17 Oktober 2026
10. Anthropic matikan akses internet untuk semua evaluasi internalnya (anthropic.com)
    AI · 3 minggu lalu · 11 Oktober 2026
11. Epoch menguji AI pada pekerjaannya sendiri, dan AI belum sanggup (epoch.ai)
    AI · 3 minggu lalu · 9 Oktober 2026
12. ThinkingBox menilai AI agent dari kondisi database, bukan dari transkrip (huggingface.co)
    AI · 3 minggu lalu · 9 Oktober 2026
13. Model frontier belum bisa menjalankan riset AI sendiri (epoch.ai)
    AI · 3 minggu lalu · 8 Oktober 2026
14. Leaderboard baru menilai model text-to-speech terbuka dengan metrik objektif (huggingface.co)
    AI · 1 bulan lalu · 4 Oktober 2026
15. AstaBrief dari Allen AI susun laporan riset bersitasi dari model open kecil (allenai.org)
    AI · 1 bulan lalu · 3 Oktober 2026
16. Frasa-frasa yang membongkar tulisan AI, diukur lintas model (techcrunch.com)
    AI · 1 bulan lalu · 2 Oktober 2026
17. Saat alat deteksi AI menuduh 207 mahasiswa, lalu ditarik kembali (turkeyland.net)
    AI · 1 bulan lalu · 1 Oktober 2026
18. Agent Anda lolos tes. IBM bertanya: apakah ia lolos lima kali berturut-turut (huggingface.co)
    AI · 1 bulan lalu · 21 September 2026
19. Benchmark fisika ternyata meremehkan kemampuan model (arxiv.org)
    AI · 1 bulan lalu · 17 September 2026
20. Kenapa agen riset AI tidak overfitting meski diuji ratusan kali (amazon.science)
    AI · 1 bulan lalu · 15 September 2026
21. BenchMIRT dari Ai2 membedah apa yang sebenarnya diukur benchmark LLM (huggingface.co)
    AI · 1 bulan lalu · 12 September 2026
22. Astra ungguli manusia di satu metrik ARC-AGI yang tadinya diyakini aman (arcprize.org)
    AI · 2 bulan lalu · 4 September 2026
23. Epoch: model reasoning lebih dari melipatgandakan laju kemajuan AI (epoch.ai)
    AI · 2 bulan lalu · 4 September 2026
24. OpenAI rilis GPT-6 Astra untuk menantang Claude Fable (openai.com)
    AI · 2 bulan lalu · 4 September 2026
25. K2 Horizon rilis enam model terbuka penuh dari 0,9B sampai 375B (ifm.ai)
    AI · 2 bulan lalu · 4 September 2026
26. Model sama, sembilan harness, biaya beda 17 kali lipat (frontierharness.org)
    AI · 2 bulan lalu · 3 September 2026
27. 215.000 halaman buatan mesin menyusup ke jawaban Perplexity (trellner.com)
    AI · 2 bulan lalu · 3 September 2026
28. DeepMind uji model frontier tanpa satu pihak pun bisa mengintip (deepmind.google)
    AI · 2 bulan lalu · 1 September 2026
29. DeepMind uji model frontier lewat benchmark double-blind (deepmind.google)
    AI · 2 bulan lalu · 29 Agustus 2026
30. Sembilan pertanyaan yang ingin dijawab Epoch lewat benchmark AI (epoch.ai)
    AI · 2 bulan lalu · 27 Agustus 2026
31. Uji yang lebih ketat temukan mayoritas GPU kernel buatan LLM cacat (arxiv.org)
    AI · 2 bulan lalu · 15 Agustus 2026
32. Menulis panjang jadi titik lemah AI, kata Nathan Lambert (interconnects.ai)
    AI · 2 bulan lalu · 14 Agustus 2026
33. Menebak batas pengetahuan asli model frontier lewat kuis dan prompt identitas (blog.sshh.io)
    AI · 2 bulan lalu · 11 Agustus 2026
34. Bahaya cyber AI: masalahnya bukan model, tapi kita belum siap (interconnects.ai)
    AI · 2 bulan lalu · 10 Agustus 2026
35. Tiga lab kini punya model yang menyerang sistem nyata saat diuji (simonwillison.net)
    AI · 2 bulan lalu · 7 Agustus 2026
36. Model suara pandai bicara, tapi buruk mendengarkan (huggingface.co)
    AI · 3 bulan lalu · 26 Juli 2026
37. Agent AI kini menuntaskan 16 persen pekerjaan freelance nyata, naik dari 2,5 (safe.ai)
    AI · 3 bulan lalu · 15 Juli 2026
38. Kenapa harga per satu juta token hampir tak berarti (janilowski.pl)
    AI · 3 bulan lalu · 7 Juli 2026
39. Benchmark GeneBench-Pro ungkap AI masih lemah di analisis biologi nyata (openai.com)
    AI · 4 bulan lalu · 5 Juli 2026
40. DSPy membongkar bug tersembunyi di prompt sebuah agent (simonwillison.net)
    AI · 4 bulan lalu · 3 Juli 2026
41. Benchmark baru: agent membangun ulang software yang butuh berminggu-minggu kerja manusia (epoch.ai)
    AI · 4 bulan lalu · 30 Juni 2026
42. Model open-weight GLM-5.2 ungguli Claude Code di tes bug kontrol akses (semgrep.dev)
    Security · 4 bulan lalu · 29 Juni 2026
43. Perubahan API yang membantu model besar bisa merusak model kecil (huggingface.co)
    AI · 4 bulan lalu · 21 Juni 2026
44. GLM-5.2 jadi model open-weight terkuat saat ini (artificialanalysis.ai)
    AI · 4 bulan lalu · 18 Juni 2026
45. OpenAI prediksi perilaku model dengan memutar ulang percakapan nyata (openai.com)
    AI · 4 bulan lalu · 18 Juni 2026
46. olmo-eval dari AI2 membawa standar statistik ke loop pengembangan model (huggingface.co)
    AI · 4 bulan lalu · 13 Juni 2026
47. Claude bikin rsync lebih bug? Datanya bilang tidak (alexispurslane.github.io)
    AI · 5 bulan lalu · 5 Juni 2026
48. Microsoft ASSERT mengubah spek perilaku berbahasa biasa menjadi tes AI (techcrunch.com)
    Engineering · 5 bulan lalu · 4 Juni 2026
49. Riset Princeton bedah klaim Google soal agent AI yang bangun OS $916 (normaltech.ai)
    AI · 5 bulan lalu · 30 Mei 2026
50. Benchmark baru menyuruh agent menambal Kubernetes, dan tak satu pun lulus (huggingface.co)
    AI · 5 bulan lalu · 27 Mei 2026
51. Papan peringkat terbuka untuk sistem agent utuh, bukan cuma model (huggingface.co)
    AI · 5 bulan lalu · 19 Mei 2026
52. Ai2 menyiapkan tolok ukur bersama untuk model cuaca AI (allenai.org)
    AI · 5 bulan lalu · 18 Mei 2026
53. Open ASR Leaderboard tambah data rahasia untuk lawan kecurangan benchmark (huggingface.co)
    AI · 5 bulan lalu · 18 Mei 2026
54. Menguji AI di dunia nyata, bukan cuma di benchmark (normaltech.ai)
    AI · 5 bulan lalu · 17 Mei 2026
55. Pilihan benchmark menentukan apakah open model dianggap jauh tertinggal (interconnects.ai)
    AI · 5 bulan lalu · 16 Mei 2026
56. Satu angka benchmark menyembunyikan pekerjaan apa yang benar-benar dikuasai model (interconnects.ai)
    AI · 6 bulan lalu · 20 April 2026
57. DeepMind usulkan kerangka kognitif untuk mengukur kemajuan menuju AGI (blog.google)
    AI · 7 bulan lalu · 17 Maret 2026
58. Uji Tabrak GPT-4: Evaluasi Kapabilitas Berbahaya Pertama (asteriskmag.com)
    AI · 3 tahun lalu · 1 Juni 2023

← semua tag