当前位置： 首页 > news >正文

Minillama3-＞sft训练

news 2025/6/30 19:39:42

GitHub - leeguandong/MiniLLaMA3: llama3的迷你版本，包括了数据，tokenizer，pt的全流程llama3的迷你版本，包括了数据，tokenizer，pt的全流程. Contribute to leeguandong/MiniLLaMA3 development by creating an account on GitHub.icon-default.png?t=N7T8https://github.com/leeguandong/MiniLLaMA31.数据预处理

SFT数据集全部来自[BELLE](https://github.com/LianjiaTech/BELLE)大佬的贡献，感谢。SFT数据集分别为：[generated_chat_0.4M](https://huggingface.co/datasets/BelleGroup/generated_chat_0.4M)、[train_0.5M_CN](https://huggingface.co/datasets/Bel
http://www.lryc.cn/news/380752.html

相关文章：

  • 【教师资格证考试综合素质——法律专项】学生伤害事故处理办法以及未成人犯罪法笔记相关练习题
  • Vite: 关于静态资源的处理机制
  • React之useEffect
  • 测试辅助工具(抓包工具)的使用3 之 弱网测试
  • 【Redis】基于Redission实现分布式锁（代码实现）
  • websocket 安全通信
  • 代码生成技术技术-janino
  • QT事件处理系统之四：自定义事件的注册及拦截、发送
  • vs2022 studio控制台出现中文乱码解决
  • 支持向量机介绍
  • 电压互感器在线监测的原理
  • 算法训练与程序竞赛题目集合（L4）
  • Selenium进行Web自动化测试
  • 模拟算法讲解
  • Leetcode 3196. Maximize Total Cost of Alternating Subarrays
  • Elasticsearch**Elasticsearch自定义插件开发入门
  • 在Ubuntu中创建Ruby on Rails项目并搭建数据库
  • 微信小程序反编译 2024 unveilr.exe
  • 测试测量-DMM直流精度
  • AGV机器人的调度开发分析（2）- 内核中的调度
  • HTTP详细总结
  • 【Android】代码中将 SVG 图像转换颜色
  • 网络故障排查-TCP标志位
  • [Vue3+Vite+TS] Windows用户设置 VITE_CJS_TRACE=true 标志运行你的脚本来记录堆栈跟踪
  • Prompt 写作提示经验：完整格式和技巧
  • 预训练是什么？
  • 深入解析Linux Bridge：原理、架构、操作与持久化配置
  • 使用构建缓存优化 Docker 镜像构建
  • 微软搁置水下数据中心项目——项目纳蒂克相比陆地服务器故障更少
  • 国产AI算力训练大模型技术实践