Muse Glimmer 30B

Ulasan

Muse Glimmer adalah rilis open pertama Meta dengan nama Muse, dan lisensinya adalah beritanya: Apache 2.0, tanpa ambang batas jumlah pengguna yang dulu menyertai Llama. Ini adalah model dense dengan sekitar tiga puluh miliar parameter yang membaca gambar selain teks dan muat di satu GPU bermemori besar. Skor coding dan matematikanya kuat untuk ukurannya, meskipun indeks independen menempatkannya jauh di bawah model open sparse yang besar. Untuk asisten self-hosted yang bisa Anda rilis di mana saja, ini adalah basis yang masuk akal.

Di mana ia unggul

• Apache 2.0, tanpa satu pun kondisi lisensi Llama
• Muat di satu GPU bermemori besar
• Skor coding kuat untuk ukurannya

Perlu diketahui terlebih dahulu

• Jauh tertinggal dari model open sparse yang besar pada penalaran sulit
• Konteks 131.000 token, pendek dibanding bidang yang sudah mencapai sejuta token