Rocinante 12B
Rocinante 12B é um modelo de chat da TheDrummer, lançado em 30 de setembro de 2024. Rocinante 12B is designed for engaging storytelling and rich prose. Early testers have reported: - Expanded vocabulary with unique and expressive word choices - Enhanced creativity for vivid narratives -...
by TheDrummer · janela de contexto de 33K tokens
Ideal para
- chat e roteamento de baixa latência
- roteamento e triagem de requisições
- classificação de texto
Como usar Rocinante 12B no osFoundry
Conecte com sua própria chave (BYOK)
Abra o diálogo de chaves e cole sua chave de API da TheDrummer. O osFoundry descobre Rocinante 12B automaticamente — atribua-o a um papel do Maestro (router, direct, orchestrator ou fallback) na aba Pipeline e ele estará ativo em cada chat. Sua chave, sua conta no provedor — sem markup sobre tokens.
Use em um Room App
Os Room Apps declaram recursos de IA em seus manifestos e os chamam com invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Chame a partir dos seus próprios apps
Uma vez que um modelo está conectado ao seu workspace, você pode hospedá-lo como uma API e acessá-lo a partir dos seus próprios serviços, scripts ou CI — fora do osFoundry.
Execute Rocinante 12B por conta própria
Rocinante 12B também está disponível como open weights — auto-hospede para controle total dos dados e sem custo por token. Veja essa página para requisitos de GPU e uma comparação de custos com o preço da API.
Rocinante 12B vs modelos semelhantes
Licença
Hosted — usage subject to provider terms — Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor.
Sem distribuição de pesos; uso sujeito aos termos do provedor.
Perguntas frequentes sobre Rocinante 12B
Quanto custa Rocinante 12B?
Rocinante 12B é cobrado a $ 0.170 /1M para entrada e $ 0.430 /1M para saída. Use sua própria chave de API da TheDrummer — o osFoundry repassa o preço do provedor sem markup.
Posso usar Rocinante 12B comercialmente?
Uso comercial é permitido com condições. Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor. Sem distribuição de pesos; uso sujeito aos termos do provedor.
Qual é a janela de contexto de Rocinante 12B?
Rocinante 12B suporta uma janela de contexto de 33K tokens.
Posso rodar Rocinante 12B localmente?
Não — Rocinante 12B é somente hospedado e acessado via API da TheDrummer. Há um equivalente open-weights disponível para auto-hospedagem — veja o link cruzado acima.
Em que Rocinante 12B é melhor?
Rocinante 12B é bem adequado para chat e roteamento de baixa latência, roteamento e triagem de requisições, classificação de texto.
Como uso Rocinante 12B no osFoundry?
Cole sua chave de API da TheDrummer no diálogo de chaves (ou implante os pesos abertos para modelos auto-hospedáveis), atribua Rocinante 12B a um papel do Maestro na aba Pipeline e use-o em chats, em Room Apps via invokeAI ou nos seus próprios apps.
Publicado pela TheDrummer em 30 de setembro de 2024. Fonte: https://openrouter.ai/thedrummer/rocinante-12b