Mistral 7B Instruct v0.1
Mistral 7B Instruct v0.1 é um modelo de chat da Mistral, lançado em 28 de setembro de 2023. A 7.3B parameter model that outperforms Llama 2 13B on all benchmarks, with optimizations for speed and context length.
by Mistral · janela de contexto de 3K tokens
Ideal para
- chat e roteamento de baixa latência
- roteamento e triagem de requisições
- classificação de texto
Como usar Mistral 7B Instruct v0.1 no osFoundry
Conecte com sua própria chave (BYOK)
Abra o diálogo de chaves e cole sua chave de API da Mistral. O osFoundry descobre Mistral 7B Instruct v0.1 automaticamente — atribua-o a um papel do Maestro (router, direct, orchestrator ou fallback) na aba Pipeline e ele estará ativo em cada chat. Sua chave, sua conta no provedor — sem markup sobre tokens.
Use em um Room App
Os Room Apps declaram recursos de IA em seus manifestos e os chamam com invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Chame a partir dos seus próprios apps
Uma vez que um modelo está conectado ao seu workspace, você pode hospedá-lo como uma API e acessá-lo a partir dos seus próprios serviços, scripts ou CI — fora do osFoundry.
Execute Mistral 7B Instruct v0.1 por conta própria
Mistral 7B Instruct v0.1 também está disponível como open weights — auto-hospede para controle total dos dados e sem custo por token. Veja essa página para requisitos de GPU e uma comparação de custos com o preço da API.
Mistral 7B Instruct v0.1 vs modelos semelhantes
| Modelo | Organização | Parâmetros | Contexto | Preço de entrada | Auto-hospedado |
|---|
| Mistral 7B Instruct v0.1 | Mistral | — | 3K | $ 0.110 /1M | Apenas API |
| GPT-4 Turbo (older v1106) | OpenAI | — | 128K | $ 10.00 /1M | Apenas API |
| Weaver (alpha) | Mancer | — | 8K | $ 0.750 /1M | Apenas API |
| Mistral Large | mistralai | — | 128K | $ 2.00 /1M | Apenas API |
Licença
Hosted — usage subject to provider terms — Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor.
Sem distribuição de pesos; uso sujeito aos termos do provedor.
Perguntas frequentes sobre Mistral 7B Instruct v0.1
Quanto custa Mistral 7B Instruct v0.1?
Mistral 7B Instruct v0.1 é cobrado a $ 0.110 /1M para entrada e $ 0.190 /1M para saída. Use sua própria chave de API da Mistral — o osFoundry repassa o preço do provedor sem markup.
Posso usar Mistral 7B Instruct v0.1 comercialmente?
Uso comercial é permitido com condições. Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor. Sem distribuição de pesos; uso sujeito aos termos do provedor.
Qual é a janela de contexto de Mistral 7B Instruct v0.1?
Mistral 7B Instruct v0.1 suporta uma janela de contexto de 3K tokens.
Posso rodar Mistral 7B Instruct v0.1 localmente?
Não — Mistral 7B Instruct v0.1 é somente hospedado e acessado via API da Mistral. Há um equivalente open-weights disponível para auto-hospedagem — veja o link cruzado acima.
Em que Mistral 7B Instruct v0.1 é melhor?
Mistral 7B Instruct v0.1 é bem adequado para chat e roteamento de baixa latência, roteamento e triagem de requisições, classificação de texto.
Como uso Mistral 7B Instruct v0.1 no osFoundry?
Cole sua chave de API da Mistral no diálogo de chaves (ou implante os pesos abertos para modelos auto-hospedáveis), atribua Mistral 7B Instruct v0.1 a um papel do Maestro na aba Pipeline e use-o em chats, em Room Apps via invokeAI ou nos seus próprios apps.
Publicado pela Mistral em 28 de setembro de 2023. Fonte: https://openrouter.ai/mistralai/mistral-7b-instruct-v0.1