Rocinante 12B
Rocinante 12B es un modelo de chat de TheDrummer, publicado el 30 de septiembre de 2024. Rocinante 12B is designed for engaging storytelling and rich prose. Early testers have reported: - Expanded vocabulary with unique and expressive word choices - Enhanced creativity for vivid narratives -...
by TheDrummer · ventana de contexto de 33K tokens
Ideal para
- chat y enrutamiento de baja latencia
- enrutamiento y triaje de solicitudes
- clasificación de texto
Formas de utilizar Rocinante 12B en osFoundry
Conecten con su propia clave (BYOK)
Abran el diálogo de claves y peguen su clave de API de TheDrummer. osFoundry detecta Rocinante 12B automáticamente: asígnenlo a un rol de Maestro (router, direct, orchestrator o fallback) en la pestaña Pipeline y quedará activo en cada chat. Su clave, su cuenta de proveedor: sin recargo por tokens.
Úsenlo en una Room App
Las Room Apps declaran funciones de IA en su manifiesto y luego las invocan con invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Invóquenlo desde sus propias aplicaciones
Una vez que un modelo está integrado en su workspace, pueden alojarlo como API y consumirlo desde sus propios servicios, scripts o CI, fuera de osFoundry.
Ejecuten Rocinante 12B ustedes mismos
Rocinante 12B también está disponible como pesos abiertos: aloja tú mismo el modelo para tener control total de los datos y sin coste por token. Consulten esa página para conocer los requisitos de GPU y una comparativa de costes frente al precio de la API.
Rocinante 12B frente a modelos similares
Licencia
Hosted — usage subject to provider terms — Modelo solo alojado: el uso se rige por los términos de API del proveedor. Aporten su propia clave del proveedor.
No se distribuyen los pesos; el uso está sujeto a los términos del proveedor.
Preguntas frecuentes sobre Rocinante 12B
¿Cuánto cuesta Rocinante 12B?
Rocinante 12B se factura a $ 0.170 /1M por entrada y $ 0.430 /1M por salida. Aporten su propia clave de API de TheDrummer: osFoundry traslada el precio del proveedor sin recargo.
¿Puedo utilizar Rocinante 12B comercialmente?
El uso comercial está permitido con condiciones. Modelo solo alojado: el uso se rige por los términos de API del proveedor. Aporten su propia clave del proveedor. No se distribuyen los pesos; el uso está sujeto a los términos del proveedor.
¿Cuál es la ventana de contexto de Rocinante 12B?
Rocinante 12B admite una ventana de contexto de 33K tokens.
¿Puedo ejecutar Rocinante 12B localmente?
No: Rocinante 12B es solo alojado y se accede a través de la API de TheDrummer. Existe un equivalente de pesos abiertos para autoalojar: consulten el enlace cruzado de arriba.
¿En qué destaca Rocinante 12B?
Rocinante 12B es muy adecuado para chat y enrutamiento de baja latencia, enrutamiento y triaje de solicitudes, clasificación de texto.
¿Cómo se utiliza Rocinante 12B en osFoundry?
Peguen su clave de API de TheDrummer en el diálogo de claves (o desplieguen los pesos abiertos para modelos autoalojables), asignen Rocinante 12B a un rol de Maestro en la pestaña Pipeline y úsenlo en chat, en Room Apps mediante invokeAI o en sus propias aplicaciones.
Publicado por TheDrummer el 30 de septiembre de 2024. Fuente: https://openrouter.ai/thedrummer/rocinante-12b