Hermes 2 Pro - Llama-3 8B
Realizzato da NousResearch, Hermes 2 Pro - Llama-3 8B è un modello chat con una finestra di contesto da 8K token. Hermes 2 Pro is an upgraded, retrained version of Nous Hermes 2, consisting of an updated and cleaned version of the OpenHermes 2.5 Dataset, as well as a newly introduced...
by NousResearch · finestra di contesto da 8K token
Ideale per
- chat e routing a bassa latenza
- instradamento e triage delle richieste
- classificazione di testo
Modi per utilizzare Hermes 2 Pro - Llama-3 8B in osFoundry
Si colleghi con la sua chiave (BYOK)
Apra la finestra delle chiavi e incolli la sua API key NousResearch. osFoundry scopre Hermes 2 Pro - Llama-3 8B automaticamente — lo assegni a un ruolo Maestro (router, direct, orchestrator o fallback) nella scheda Pipeline e sarà attivo in ogni chat. La sua chiave, il suo account provider — nessun ricarico sui token.
Lo utilizzi in una Room App
Le Room App dichiarano le funzionalità AI nel loro manifest e le richiamano con invokeAI:
import { invokeAI } from '@osfoundry/app-sdk'
// 'summarize' is an AI feature declared in your app manifest.
const result = await invokeAI('summarize', userText)
Lo richiami dalle sue applicazioni
Una volta integrato un modello nel suo workspace, può esporlo come API e raggiungerlo dai suoi servizi, script o pipeline CI — al di fuori di osFoundry.
Esegua Hermes 2 Pro - Llama-3 8B in autonomia
Hermes 2 Pro - Llama-3 8B è disponibile anche come open weights — lo ospiti in autonomia per il pieno controllo dei dati e nessun costo per token. Consulti quella pagina per i requisiti GPU e un confronto dei costi con i prezzi delle API.
Hermes 2 Pro - Llama-3 8B a confronto con modelli simili
Licenza
Hosted — usage subject to provider terms — Modello solo in hosting — l'uso è regolato dai termini API del provider. Porti la sua chiave del provider.
Nessun peso distribuito; uso soggetto ai termini del provider.
Domande frequenti su Hermes 2 Pro - Llama-3 8B
Quanto costa Hermes 2 Pro - Llama-3 8B?
Hermes 2 Pro - Llama-3 8B è tariffato a $ 0.140 /1M per l'input e $ 0.140 /1M per l'output. Porti la sua API key NousResearch — osFoundry applica i prezzi del provider senza ricarico.
Posso usare Hermes 2 Pro - Llama-3 8B a scopo commerciale?
L'uso commerciale è consentito a determinate condizioni. Modello solo in hosting — l'uso è regolato dai termini API del provider. Porti la sua chiave del provider. Nessun peso distribuito; uso soggetto ai termini del provider.
Qual è la finestra di contesto di Hermes 2 Pro - Llama-3 8B?
Hermes 2 Pro - Llama-3 8B supporta una finestra di contesto da 8K token.
Posso eseguire Hermes 2 Pro - Llama-3 8B localmente?
No — Hermes 2 Pro - Llama-3 8B è disponibile solo in hosting e si accede tramite l'API di NousResearch. È disponibile un equivalente open-weights da ospitare in autonomia — veda il collegamento qui sopra.
In che cosa eccelle Hermes 2 Pro - Llama-3 8B?
Hermes 2 Pro - Llama-3 8B è particolarmente adatto a chat e routing a bassa latenza, instradamento e triage delle richieste, classificazione di testo.
Come utilizzo Hermes 2 Pro - Llama-3 8B in osFoundry?
Incolli la sua API key NousResearch nella finestra delle chiavi (oppure distribuisca i pesi aperti per i modelli auto-ospitabili), assegni Hermes 2 Pro - Llama-3 8B a un ruolo Maestro nella scheda Pipeline, quindi lo utilizzi in chat, nelle Room App tramite invokeAI o nelle sue applicazioni.
Pubblicato da NousResearch il 27 maggio 2024. Fonte: https://openrouter.ai/nousresearch/hermes-2-pro-llama-3-8b