GPT-3.5 Turbo 16k
O GPT-3.5 Turbo 16k da OpenAI é um modelo de chat. This model offers four times the context length of gpt-3.5-turbo, allowing it to support approximately 20 pages of text in a single request at a higher cost. Training data: up...
by OpenAI · janela de contexto de 16K tokens
Ideal para
- chat e roteamento de baixa latência
- roteamento e triagem de requisições
- classificação de texto
Como usar GPT-3.5 Turbo 16k no osFoundry
Conecte com sua própria chave (BYOK)
Abra o diálogo de chaves e cole sua chave de API da OpenAI. O osFoundry descobre GPT-3.5 Turbo 16k automaticamente — atribua-o a um papel do Maestro (router, direct, orchestrator ou fallback) na aba Pipeline e ele estará ativo em cada chat. Sua chave, sua conta no provedor — sem markup sobre tokens.
Use em um Room App
Os Room Apps declaram recursos de IA em seus manifestos e os chamam com invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Chame a partir dos seus próprios apps
Uma vez que um modelo está conectado ao seu workspace, você pode hospedá-lo como uma API e acessá-lo a partir dos seus próprios serviços, scripts ou CI — fora do osFoundry.
GPT-3.5 Turbo 16k vs modelos semelhantes
Licença
Hosted — usage subject to provider terms — Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor.
Sem distribuição de pesos; uso sujeito aos termos do provedor.
Perguntas frequentes sobre GPT-3.5 Turbo 16k
Quanto custa GPT-3.5 Turbo 16k?
GPT-3.5 Turbo 16k é cobrado a $ 3.00 /1M para entrada e $ 4.00 /1M para saída. Use sua própria chave de API da OpenAI — o osFoundry repassa o preço do provedor sem markup.
Posso usar GPT-3.5 Turbo 16k comercialmente?
Uso comercial é permitido com condições. Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor. Sem distribuição de pesos; uso sujeito aos termos do provedor.
Qual é a janela de contexto de GPT-3.5 Turbo 16k?
GPT-3.5 Turbo 16k suporta uma janela de contexto de 16K tokens.
Posso rodar GPT-3.5 Turbo 16k localmente?
Não — GPT-3.5 Turbo 16k é somente hospedado e acessado via API da OpenAI.
Em que GPT-3.5 Turbo 16k é melhor?
GPT-3.5 Turbo 16k é bem adequado para chat e roteamento de baixa latência, roteamento e triagem de requisições, classificação de texto.
Como uso GPT-3.5 Turbo 16k no osFoundry?
Cole sua chave de API da OpenAI no diálogo de chaves (ou implante os pesos abertos para modelos auto-hospedáveis), atribua GPT-3.5 Turbo 16k a um papel do Maestro na aba Pipeline e use-o em chats, em Room Apps via invokeAI ou nos seus próprios apps.
Publicado pela OpenAI em 28 de agosto de 2023. Fonte: https://openrouter.ai/openai/gpt-3.5-turbo-16k