MiniMax-01 Gunakan Lightning Attention untuk Mengurangi Daya Komputasi
MiniMax-01, yang dirilis tahun lalu, menampilkan Lightning Attention, varian atensi linier yang menurunkan kompleksitas komputasi dari O(n²) menjadi mendekati O(n), memberikan peningkatan kecepatan beberapa kali lipat dalam skenario konteks panjang sambil mempertahankan akurasi yang kompetitif.