Key Specifications

Vendorother
Versionhermes-3-llama-3-1-8b
Release Date2024-08-12
Context Window131072 tokens
Input Modalitiestext
Output Modalitiestext
LicenseLlama 3.1 Community License
Documentationhttps://huggingface.co/models

Benchmark Performance

BenchmarkScoreUnitEvaluated AtNotesSource
MMLU73.1%2024-08-125-shotview
HUMANEVAL67.1pass@12024-08-12view
GSM8K72.9%2024-08-120-shot CoTview
MATH25.5%2024-08-120-shot CoTview
BBH62.6%2024-08-123-shot CoTview
GPQA31.5%2024-08-120-shotview
IFEVAL60.7%2024-08-12prompt_strictview
ARC88.7%2024-08-12challengeview
MUSR38%2024-08-120-shotview
WINOGRANDE78.1%2024-08-120-shotview

Pricing

TierPriceCurrency
Input$0.18 / MtokUSD
Output$0.18 / MtokUSD
Cache Read$0 / MtokUSD
Cache Write$0 / MtokUSD

Source: https://huggingface.co/models · as of 2024-08-12

Compliance

  • Data Residency: self-host
  • SOC2: ✗
  • HIPAA: ✗
  • GDPR: ✗
  • ISO 27001: ✗

Hermes 3 Llama 3.1 8B

Tổng quan mô hình

NousResearch Hermes 3 Llama 3.1 8B 微调模型, 131K 上下文, 经济型开源模型, 适合本地部署。

Thông số kỹ thuật cốt lõi

Nhà cung cấpPhiên bảnNgày phát hànhCửa sổ ngữ cảnhPhương thức đầu vàoPhương thức đầu raGiấy phép
Otherhermes-3-llama-3-1-8b2024-08-12131KtexttextLlama 3.1 Community License

Hiệu suất benchmark

BenchmarkĐiểmĐơn vịGhi chú
MMLU (Massive Multitask Language Understanding)73.1%5-shot
HumanEval67.1pass@1
GSM8K (Grade School Math 8K)72.9%0-shot CoT
MATH25.5%0-shot CoT
BBH (BIG-Bench Hard)62.6%3-shot CoT
GPQA31.5%0-shot
IFEval60.7%prompt_strict
ARC88.7%challenge
MUSR38.0%0-shot
WinoGrande78.1%0-shot

Giá

Đầu vàoĐầu raĐọc bộ nhớ đệmGhi bộ nhớ đệm

mỗi triệu token

Điểm mạnh

  • 可靠的通用模型。

Điểm yếu

  • 闭源专有模型,不支持自托管。

Trường hợp sử dụng

  • 通用对话与问答

Tham chiếu