Keunggulan matematika AI mungkin soal memori, bukan penalaran

Ketika sistem AI mencatat hasil pada soal matematika sulit, Davide Piffer menawarkan penjelasan yang mengempiskan: model mungkin bukan mengalahkan matematikawan dalam berpikir, melainkan dalam mengingat. Klaimnya, sebagian besar keunggulan datang dari memori kerja, yaitu kemampuan menahan pernyataan soal, definisi, langkah antara, dan hasil sebelumnya sekaligus dalam pandangan, bukan dari penalaran yang lebih dalam. Dalam kacamata ini, context window yang besar adalah buku catatan eksternal raksasa, dan modelnya seperti von Neumann yang sangat cepat, bukan Einstein yang mendapat terobosan konseptual.

Piffer menopang argumennya dengan sains kognitif. Ia menunjuk riset Alloway dan rekan yang menunjukkan memori kerja memprediksi kemampuan matematika secara mandiri, kadang lebih kuat daripada IQ. Matematika sangat ramah bagi keunggulan semacam ini karena hampir semua hal yang relevan bisa dituliskan secara eksplisit, dan pembuktian formal memberi umpan balik kuat soal benar atau tidaknya sebuah langkah.

Bagian yang berguna, hipotesis ini menghasilkan prediksi. AI mestinya paling unggul pada soal dengan banyak kendala yang saling terkait, perhitungan panjang, dan analisis kasus yang berat, serta paling lemah pada soal yang bergantung pada satu lompatan konseptual atau cara baru membingkai pertanyaan. Itu sebuah uji, bukan sekadar kesan.

Kenapa ini penting

Kalau Anda memakai AI untuk pekerjaan teknis, ini menunjukkan kapan boleh percaya dan kapan harus skeptis. Andalkan AI untuk soal panjang yang penuh pembukuan detail, dan periksa dengan teliti saat keberhasilan bergantung pada satu wawasan cerdas ketimbang pelacakan cermat atas banyak bagian.