Mixtral 8x22B Instruct
Mixtral 8x22B Instruct (Mistral, 2024) adalah sebuah model chat . Mistral's official instruct fine-tuned version of [Mixtral 8x22B](/models/mistralai/mixtral-8x22b). It uses 39B active parameters out of 141B, offering unparalleled cost efficiency for its size. Its strengths include: - strong math, coding,...
by Mistral · context window 66K token
Paling cocok untuk
- chat dan routing latensi rendah
- routing dan triase permintaan
- klasifikasi teks
Cara menggunakan Mixtral 8x22B Instruct di osFoundry
Hubungkan dengan key Anda sendiri (BYOK)
Buka dialog key dan tempelkan API key Mistral Anda. osFoundry menemukan Mixtral 8x22B Instruct secara otomatis — tetapkan ke peran Maestro (router, direct, orchestrator, atau fallback) di tab Pipeline dan model ini langsung aktif di setiap chat. Key Anda, akun provider Anda — tanpa markup token.
Gunakan di Room App
Room App mendeklarasikan fitur AI di manifest mereka, lalu memanggilnya dengan invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Panggil dari aplikasi Anda sendiri
Setelah sebuah model terhubung ke workspace Anda, Anda dapat meng-host-nya sebagai API dan mengaksesnya dari layanan, skrip, atau CI Anda sendiri — di luar osFoundry.
Jalankan Mixtral 8x22B Instruct sendiri
Mixtral 8x22B Instruct juga tersedia sebagai open weights — self-host model ini untuk kontrol data penuh dan tanpa biaya per token. Lihat halaman tersebut untuk persyaratan GPU dan perbandingan biaya terhadap harga API.
Mixtral 8x22B Instruct vs model serupa
Lisensi
Hosted — usage subject to provider terms — Model ter-host saja — penggunaan diatur oleh ketentuan API provider. Bawa key provider Anda sendiri.
Tidak ada weights yang didistribusikan; penggunaan tunduk pada ketentuan provider.
Pertanyaan umum tentang Mixtral 8x22B Instruct
Berapa biaya Mixtral 8x22B Instruct?
Mixtral 8x22B Instruct dikenakan biaya $ 2.00 /1M untuk input, dan $ 6.00 /1M untuk output. Bawa API key Mistral Anda sendiri — osFoundry meneruskan harga provider tanpa markup.
Bisakah saya menggunakan Mixtral 8x22B Instruct secara komersial?
Penggunaan komersial diizinkan dengan syarat. Model ter-host saja — penggunaan diatur oleh ketentuan API provider. Bawa key provider Anda sendiri. Tidak ada weights yang didistribusikan; penggunaan tunduk pada ketentuan provider.
Berapa context window dari Mixtral 8x22B Instruct?
Mixtral 8x22B Instruct mendukung context window 66K token.
Bisakah saya menjalankan Mixtral 8x22B Instruct secara lokal?
Tidak — Mixtral 8x22B Instruct hanya ter-host dan diakses melalui API Mistral. Padanan open-weights tersedia untuk self-host — lihat tautan silang di atas.
Apa keunggulan utama Mixtral 8x22B Instruct?
Mixtral 8x22B Instruct sangat cocok untuk chat dan routing latensi rendah, routing dan triase permintaan, klasifikasi teks.
Bagaimana cara menggunakan Mixtral 8x22B Instruct di osFoundry?
Tempelkan API key Mistral Anda di dialog key (atau deploy open weights untuk model yang dapat di-self-host), tetapkan Mixtral 8x22B Instruct ke peran Maestro di tab Pipeline, lalu gunakan di chat, di Room App via invokeAI, atau di aplikasi Anda sendiri.
Diterbitkan oleh Mistral pada 17 April 2024. Sumber: https://openrouter.ai/mistralai/mixtral-8x22b-instruct