ONNX 模型库
返回模型

说明文档

llama-2-chat-onnx

llama-2-chat-onnx 是 Llama-2-Chat 的 ONNX int4 量化版本,提供了快速、轻量的推理实现,针对 AI PC 和 Windows x86-64 架构进行了优化。

llama-2-chat 是经典 Llama 2 模型的官方对话微调版本,是最具标志性(至今仍是最佳之一)的 7B 指令训练模型之一。

模型描述

  • 开发者: meta-llama
  • 量化者: llmware
  • 模型类型: llama2
  • 参数量: 70亿
  • 父模型: meta-llama/Llama-2-7b-chat-hf
  • 语言: 英语
  • 许可证: Llama-2 社区许可证
  • 用途: 基于事实的问答
  • RAG 基准测试准确率: 不适用
  • 量化方式: int4

模型卡片联系方式

llmware 在 github 上

llmware 在 hf 上

llmware 网站

llmware/llama-2-chat-onnx

作者 llmware

↓ 0 ♥ 1

创建时间: 2024-09-03 17:16:42+00:00

更新时间: 2024-10-31 21:37:15+00:00

在 Hugging Face 上查看

文件 (10)

.gitattributes
LICENSE.txt
README.md
genai_config.json
hash_record_sha256.json
model.onnx ONNX
model.onnx.data
special_tokens_map.json
tokenizer.json
tokenizer_config.json