GPT-3.5 Turbo
Desenvolvido pela OpenAI, GPT-3.5 Turbo é um modelo de chat com janela de contexto de 16K tokens. GPT-3.5 Turbo is OpenAI's fastest model. It can understand and generate natural language or code, and is optimized for chat and traditional completion tasks.
Training data up to Sep 2021.
by OpenAI · janela de contexto de 16K tokens
Ideal para
- chat e roteamento de baixa latência
- roteamento e triagem de requisições
- classificação de texto
Como usar GPT-3.5 Turbo no osFoundry
Conecte com sua própria chave (BYOK)
Abra o diálogo de chaves e cole sua chave de API da OpenAI. O osFoundry descobre GPT-3.5 Turbo automaticamente — atribua-o a um papel do Maestro (router, direct, orchestrator ou fallback) na aba Pipeline e ele estará ativo em cada chat. Sua chave, sua conta no provedor — sem markup sobre tokens.
Use em um Room App
Os Room Apps declaram recursos de IA em seus manifestos e os chamam com invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Chame a partir dos seus próprios apps
Uma vez que um modelo está conectado ao seu workspace, você pode hospedá-lo como uma API e acessá-lo a partir dos seus próprios serviços, scripts ou CI — fora do osFoundry.
GPT-3.5 Turbo vs modelos semelhantes
| Modelo | Organização | Parâmetros | Contexto | Preço de entrada | Auto-hospedado |
|---|
| GPT-3.5 Turbo | OpenAI | — | 16K | $ 0.500 /1M | Apenas API |
| MythoMax 13B | gryphe | — | 4K | $ 0.060 /1M | Apenas API |
| ReMM SLERP 13B | undi95 | — | 6K | $ 0.450 /1M | Apenas API |
| Weaver (alpha) | Mancer | — | 8K | $ 0.750 /1M | Apenas API |
Licença
Hosted — usage subject to provider terms — Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor.
Sem distribuição de pesos; uso sujeito aos termos do provedor.
Perguntas frequentes sobre GPT-3.5 Turbo
Quanto custa GPT-3.5 Turbo?
GPT-3.5 Turbo é cobrado a $ 0.500 /1M para entrada e $ 1.50 /1M para saída. Use sua própria chave de API da OpenAI — o osFoundry repassa o preço do provedor sem markup.
Posso usar GPT-3.5 Turbo comercialmente?
Uso comercial é permitido com condições. Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor. Sem distribuição de pesos; uso sujeito aos termos do provedor.
Qual é a janela de contexto de GPT-3.5 Turbo?
GPT-3.5 Turbo suporta uma janela de contexto de 16K tokens.
Posso rodar GPT-3.5 Turbo localmente?
Não — GPT-3.5 Turbo é somente hospedado e acessado via API da OpenAI.
Em que GPT-3.5 Turbo é melhor?
GPT-3.5 Turbo é bem adequado para chat e roteamento de baixa latência, roteamento e triagem de requisições, classificação de texto.
Como uso GPT-3.5 Turbo no osFoundry?
Cole sua chave de API da OpenAI no diálogo de chaves (ou implante os pesos abertos para modelos auto-hospedáveis), atribua GPT-3.5 Turbo a um papel do Maestro na aba Pipeline e use-o em chats, em Room Apps via invokeAI ou nos seus próprios apps.
Publicado pela OpenAI em 28 de maio de 2023. Fonte: https://openrouter.ai/openai/gpt-3.5-turbo