Llama 3 Euryale 70B v2.1
Desenvolvido pela Sao10k, Llama 3 Euryale 70B v2.1 é um modelo de chat com janela de contexto de 8K tokens. Euryale 70B v2.1 is a model focused on creative roleplay from [Sao10k](https://ko-fi.com/sao10k). - Better prompt adherence. - Better anatomy / spatial awareness. - Adapts much better to unique and custom...
by Sao10k · janela de contexto de 8K tokens
Ideal para
- chat e roteamento de baixa latência
- roteamento e triagem de requisições
- classificação de texto
Como usar Llama 3 Euryale 70B v2.1 no osFoundry
Conecte com sua própria chave (BYOK)
Abra o diálogo de chaves e cole sua chave de API da Sao10k. O osFoundry descobre Llama 3 Euryale 70B v2.1 automaticamente — atribua-o a um papel do Maestro (router, direct, orchestrator ou fallback) na aba Pipeline e ele estará ativo em cada chat. Sua chave, sua conta no provedor — sem markup sobre tokens.
Use em um Room App
Os Room Apps declaram recursos de IA em seus manifestos e os chamam com invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Chame a partir dos seus próprios apps
Uma vez que um modelo está conectado ao seu workspace, você pode hospedá-lo como uma API e acessá-lo a partir dos seus próprios serviços, scripts ou CI — fora do osFoundry.
Execute Llama 3 Euryale 70B v2.1 por conta própria
Llama 3 Euryale 70B v2.1 também está disponível como open weights — auto-hospede para controle total dos dados e sem custo por token. Veja essa página para requisitos de GPU e uma comparação de custos com o preço da API.
Llama 3 Euryale 70B v2.1 vs modelos semelhantes
| Modelo | Organização | Parâmetros | Contexto | Preço de entrada | Auto-hospedado |
|---|
| Llama 3 Euryale 70B v2.1 | Sao10k | — | 8K | $ 1.48 /1M | Apenas API |
| Gemma 2 27B | Google | — | 8K | $ 0.650 /1M | Apenas API |
| Hermes 2 Pro - Llama-3 8B | NousResearch | — | 8K | $ 0.140 /1M | Apenas API |
| Mistral Nemo | Mistral | — | 131K | $ 0.020 /1M | Apenas API |
Licença
Hosted — usage subject to provider terms — Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor.
Sem distribuição de pesos; uso sujeito aos termos do provedor.
Perguntas frequentes sobre Llama 3 Euryale 70B v2.1
Quanto custa Llama 3 Euryale 70B v2.1?
Llama 3 Euryale 70B v2.1 é cobrado a $ 1.48 /1M para entrada e $ 1.48 /1M para saída. Use sua própria chave de API da Sao10k — o osFoundry repassa o preço do provedor sem markup.
Posso usar Llama 3 Euryale 70B v2.1 comercialmente?
Uso comercial é permitido com condições. Modelo apenas hospedado — uso regido pelos termos de API do provedor. Use sua própria chave de provedor. Sem distribuição de pesos; uso sujeito aos termos do provedor.
Qual é a janela de contexto de Llama 3 Euryale 70B v2.1?
Llama 3 Euryale 70B v2.1 suporta uma janela de contexto de 8K tokens.
Posso rodar Llama 3 Euryale 70B v2.1 localmente?
Não — Llama 3 Euryale 70B v2.1 é somente hospedado e acessado via API da Sao10k. Há um equivalente open-weights disponível para auto-hospedagem — veja o link cruzado acima.
Em que Llama 3 Euryale 70B v2.1 é melhor?
Llama 3 Euryale 70B v2.1 é bem adequado para chat e roteamento de baixa latência, roteamento e triagem de requisições, classificação de texto.
Como uso Llama 3 Euryale 70B v2.1 no osFoundry?
Cole sua chave de API da Sao10k no diálogo de chaves (ou implante os pesos abertos para modelos auto-hospedáveis), atribua Llama 3 Euryale 70B v2.1 a um papel do Maestro na aba Pipeline e use-o em chats, em Room Apps via invokeAI ou nos seus próprios apps.
Publicado pela Sao10k em 18 de junho de 2024. Fonte: https://openrouter.ai/sao10k/l3-euryale-70b