惯性聚合 高效追踪和阅读你感兴趣的博客、新闻、科技资讯
阅读原文 在惯性聚合中打开

推荐订阅源

Google DeepMind News
Google DeepMind News
Microsoft Security Blog
Microsoft Security Blog
B
Blog
Martin Fowler
Martin Fowler
WordPress大学
WordPress大学
爱范儿
爱范儿
博客园_首页
博客园 - 聂微东
量子位
V
Visual Studio Blog
aimingoo的专栏
aimingoo的专栏
T
The Blog of Author Tim Ferriss
J
Java Code Geeks
小众软件
小众软件
大猫的无限游戏
大猫的无限游戏
OSCHINA 社区最新新闻
OSCHINA 社区最新新闻
N
Netflix TechBlog - Medium
F
Fortinet All Blogs
The Cloudflare Blog
T
Tailwind CSS Blog
G
Google Developers Blog
奇客Solidot–传递最新科技情报
奇客Solidot–传递最新科技情报
月光博客
月光博客
腾讯CDC

博客园 - wildkid1024

RLHF模型训练-PPO拆解 [SentencePiece]Tokenizer的原理与实现 [cuda][caffe]统一内存管理 [LLM] LLM后量化(PTQ)总结及原理实现 [TRT-LLM] TRT-LLM部署流程 生产者消费者模式下实现多batch延时推理 LLM采样后处理总结:LLM的后处理的cpp实现 ControlNet-trt优化总结4:onnx图修改与重建 ControlNet-trt优化总结3:使用multi-stream和cuda-graph构建并行流水线 ControlNet-trt优化总结2:使用TRT-API从零构建ControlNet网络 [vllm]kernels分析 [vllm]vllm架构分析 [trt-hackthon2023]ControlNet-trt优化总结 [fastllm]多线程下动态组batch实现解析 [fastllm]cuda-kernels源码解析 [cuda]RMSNorm核函数解析 fastllm源码解析 Inferllm源码解析 [pybind11]为c++项目写python API接口
[LLM]常见大模型下载地址
wildkid1024 · 2023-04-13 · via 博客园 - wildkid1024

ggerganov/llama.cpp

https://huggingface.co/frankenstyle/ggml-q4-models int4,用于CPU部署,大小约17GB.

tloen/alpaca-lora

预训练模型文件:https://huggingface.co/decapoda-research/llama-7b-hf/tree/main
lora微调模型文件:https://huggingface.co/tloen/alpaca-lora-7b

antimatter15/alpaca.cpp

https://huggingface.co/Sosaka/Alpaca-native-4bit-ggml

THUDM/ChatGLM-6B

https://huggingface.co/THUDM/chatglm-6b

huggingface下载方法

一共有三种下载方法

  1. 在页面直接点击下载
  2. 通过git lfs install然后再clone进行大文件下载
  3. 通过pip install huggingface_hub,使用python脚本将模型下载到cache目录下

参考:https://zhuanlan.zhihu.com/p/475260268

posted @ 2023-04-13 22:05  wildkid1024  阅读(2740)  评论(0)    收藏  举报

刷新页面返回顶部