Pangkat untuk AI: Mengapa Menggandakan Konteks Dapat Melipatgandakan Kerja Attention Empat Kali
Pelajari hukum pangkat dan akar, lalu gunakan penjelajah skala logaritmik dan NumPy untuk melihat mengapa dimensi model atau konteks yang digandakan dapat menghasilkan empat kali lebih banyak kuantitas.