星颖资源网

 找回密码
 立即注册
查看: 12|回复: 1

51CTO-夏曹俊-LLama实战本地CPU推理大语言模型-C++开发实战

[复制链接]

4万

主题

1万

回帖

17万

积分

管理员

Rank: 9Rank: 9Rank: 9

积分
172078
发表于 昨天 14:06 | 显示全部楼层 |阅读模式
1-1.课程介绍.mp4

1-2.推演程序演示,基于130亿参数模型.mp4

2-1.llama模型分析和训练数据分析.mp4

2-2.git和msys2安装和llama模型下载.mp4

2-3.llama推理测试程序演示.mp4

3-1.llama.cpp构建环境说明.mp4

3-2.visutal_studio_2022安装.mp4

3-3.llama.cpp构建和项目分析.mp4

3-4.cmake windows安装二进制版本.mp4

4-1.ggml格式介绍.mp4

4-2.conda在windows中的安装和使用.mp4

4-3.conda的python环境安装.mp4

4-4.llama的pth格式转换为ggml的bin.mp4

4-5.llama量化模型到Q4_0.mp4

5-1.Chinese-LLaMA-Alpaca 中文模型分析和下载.mp4

5-2.Transformers安装和llama模型格式转换.mp4

5-3.合并中文LoRA权重和llama生成全量模型权重.mp4

5-4.使用Transformer和Web图形界面实现推理.mp4

5-5.使用llama.cpp量化和推理中文模型.mp4

6-1.llama参数ctx-size上下文大小相关代码分析.mp4

6-2.predict和batch-size回复数和推理批次代码.mp4

6-3.增加结果多样性-重复惩罚repeat-penalty.mp4

6-4.21温度改变随机性top-k和top-p算法分析.mp4

7-1.开源llamaqt项目分析说明.mp4

7-10.XGptFac工厂类创建.mp4

7-11.基于cmake配置了推理QT项目.mp4

7-12.完成了基于QT的推理交互程序.mp4

7-2.基于llama.cpp的cmake项目配置和模型加载代码实现.mp4

7-3.完成了推理预处理prompt代码.mp4

7-4.完成了推理结果逻辑表采样并输出.mp4

7-5.完成了精简版的推理示例程序.mp4

7-6.xllama接口类图设计说明.mp4

7-7.XGp测试项目和线程启动停止代码完成.mp4

7-8.XGpt用户输入和线程接收和回调反馈完成.mp4

7-9.完成xllama的推理和反馈接口并测试.mp4

下载地址:
游客,如果您要查看本帖隐藏内容请回复
回复

使用道具 举报

0

主题

2464

回帖

4928

积分

大师

Rank: 8Rank: 8

积分
4928
发表于 昨天 23:33 来自手机 | 显示全部楼层
@星颖团队 给你们点个赞
回复

使用道具 举报

您需要登录后才可以回帖 登录 | 立即注册

本版积分规则

微信

社群

VIP

AI

顶部

QQ|本站内容来源网友投稿或网络转载,如果有侵权的内容,请联系我们删除。|小黑屋|人人为我,我为人人!| 星颖资源网

GMT+8, 2026-7-29 07:44 , Processed in 0.341473 second(s), 28 queries .

快速回复 返回顶部 返回列表