当前位置: 首页 > news >正文

使用代码下载开源的大模型文件示例以及中文微调llama资源汇总:

一、下载示例 

from huggingface_hub import snapshot_downloadrepo_id = "THUDM/chatglm2-6b"
local_dir = './chatglm2-6b/'
cache_dir = local_dir + "/cache"
while True:try:snapshot_download(cache_dir=cache_dir,local_dir=local_dir,repo_id=repo_id,local_dir_use_symlinks=False, # 不转为缓存乱码的形式, auto, Small files (<5MB) are duplicated in `local_dir` while a symlink is created for bigger files.resume_download=True,allow_patterns=["*.model", "*.json", "*.bin","*.py", "*.md", "*.txt"],ignore_patterns=["*.safetensors", "*.msgpack","*.h5", "*.ot", ],)except Exception as e :print(e)

二、资源汇总

  1. Chinese Llama 2 7B 链接:LinkSoul/Chinese-Llama-2-7b · Hugging Face

  2. OpenBuddy-LLaMA2-13B 链接:OpenBuddy/openbuddy-llama2-13b-v8.1-fp16 · Hugging Face

  3. firefly-llama2-13b 链接:GitHub - yangjianxin1/Firefly: Firefly(流萤): 中文对话式大语言模型(全量微调+QLoRA),支持微调Llma2、Llama、Qwen、Baichuan、ChatGLM2、InternLM、Ziya、Bloom等大模型

  4. YaYi-7B-Llama2、YaYi-13B-Llama2
    链接:wenge-research/yayi-13b-llama2 · Hugging Face

  5. 伶荔Chinese-LLaMA-2-7B和13B 链接:GitHub - CVI-SZU/Linly: Chinese-LLaMA 1&2、Chinese-Falcon 基础模型;ChatFlow中文对话模型;中文OpenLLaMA模型;NLP预训练/指令微调数据集

  6. Llama2-Chinese 链接:GitHub - ymcui/Chinese-LLaMA-Alpaca-2: 中文 LLaMA-2 & Alpaca-2 大模型二期项目 (Chinese LLaMA-2 & Alpaca-2 LLMs) 链接:ziqingyang/chinese-llama-2-7b · Hugging Face

  7. Chinese-LLaMA2-7b from LinkSoul 链接:GitHub - LinkSoul-AI/Chinese-Llama-2-7b: 开源社区第一个能下载、能运行的中文 LLaMA2 模型!

  8. Llama2-Chinese-7B from FlagAlpha 链接:GitHub - FlagAlpha/Llama2-Chinese: Llama中文社区,最好的中文Llama大模型,完全开源可商用

  9. YaYi from Wenge 链接:GitHub - wenge-research/YaYi: 雅意大模型:为客户打造安全可靠的专属大模型,基于大规模中英文多领域指令数据训练的 LlaMA 2 & BLOOM 系列模型,由中科闻歌算法团队研发。(Repo for YaYi Chinese LLMs based on LlaMA2 & BLOOM)

http://www.lryc.cn/news/116608.html

相关文章:

  • Wav2vec2 论文阅读看到的一些问题
  • 爬虫学习记录(持续更新)
  • libevent源码学习1---创建event
  • Python类的设计
  • 微信小程序的项目解构
  • 【Archaius技术专题】「Netflix原生态」动态化配置服务之微服务配置组件变色龙
  • python条件分支和循环语句
  • 工具推荐:Wireshark网络协议分析工具(对比tcpdump)
  • [OnWork.Tools]系列 04-快捷启动
  • 如何将项目挂后台运行?【nohup和tmux】
  • 什么是进程、线程、协程
  • Python爬虫——selenium_访问元素信息
  • Linux 文件基本属性
  • CSS 盒模型是什么?它包含哪些属性?标准盒模型/怪异盒模型
  • VB+SQL光盘信息管理系统设计与实现
  • MySQL5.7数据库、Navicat Premium1.6可视化工具安装教程【详细教程】
  • JVM 调优实例
  • Python numpy中的correlate相关性详解
  • 用python实现xmind用例转换为excel/csv用例
  • 论文浅尝 | 面向多步推理任务专业化较小语言模型
  • 基于Java的新闻全文搜索引擎的设计与实现
  • golang 自定义exporter - 端口连接数 portConnCount_exporter
  • MoveTowards详解
  • Redis学习笔记Day01-Redis入门
  • C++ Lambda表达式的完整介绍
  • 【等保测评】云计算Linux服务器(一)
  • [vue-element-admin]下载与安装
  • OPENCV C++(九)鼠标响应+dft+idft
  • python编程求出介于这两个数 之间的所有质数并打印输出。显示格式为“*数是质数
  • 基于Selenium模块实现无界面模式 执行JS脚本