大模型原理与部署-蜗牛学苑

首页 / AI人工智能 · 第三阶段:大语言模型LLM / 大模型原理与部署

发布于 2024-06-05 · 641 次观看

展开剩余

直播计划
视频列表
评论
课程介绍
资料列表
教师笔记

大模型-20241112-01-回顾与Transformer结构

28分钟 · 154次播放

大模型-20241112-02-位置编码原理与实现

47分钟 · 20次播放

大模型-20241112-03-多头自注意力原理

42分钟 · 27次播放

大模型-20241112-04-掩码残差正则及模型训练

41分钟 · 26次播放

大模型-20241114-01-GPT模型结构与数据集构建

33分钟 · 20次播放

大模型-20241114-02-GPT代码与模型训练和推理

34分钟 · 17次播放

大模型-20241114-03-torch.nn.Transformer分类

43分钟 · 19次播放

大模型-20241114-04-torch.nn.Transformer翻译

15分钟 · 10次播放

大模型-20241116-01-transformers框架概述

31分钟 · 29次播放

大模型-20241116-02-transfromers模型运行

24分钟 · 17次播放

大模型-20241116-03-bert预训练模型分类任务

45分钟 · 16次播放

大模型-20241116-04-文本分类生成翻译操作

27分钟 · 16次播放

大模型-20241116-05-bert模型分类的预处理

33分钟 · 19次播放

大模型-20241116-06-基于bert头条分类再训练

39分钟 · 24次播放

大模型-20241119-01-transformers的pipline

31分钟 · 11次播放

大模型-20241119-02-模型微调技术原理

44分钟 · 21次播放

大模型-20241119-03-peft与LoRA微调实战

44分钟 · 18次播放

大模型-20241121-01-微调Qwen2

38分钟 · 15次播放

大模型-20241121-02-微调Qwen2

27分钟 · 21次播放

大模型-20241121-03-LlamaFactory与量化基础

54分钟 · 24次播放

大模型-20241123-01-模型量化原理与公式

45分钟 · 20次播放

大模型-20241123-02-模型量化实战操作

37分钟 · 11次播放

大模型-20241123-03-各类环境配置注意事项

34分钟 · 12次播放

大模型-20241123-04-Ollama部署与调用

29分钟 · 29次播放

大模型-20241123-05-Ollama的API调用

48分钟 · 45次播放

共有条回复

{{replyComment.createTime | dateForMat(replyComment.createTime)}}

课程目标

能理解并自主Transformer和GPT架构模型，能熟练运用transformers和modelscope模型进行模型应用、模型微调、模型量化等、能够熟练部署私有化大模型并进行开发调用。

知识要点

Transformer架构、编码器-解码器结构、GPT模型框架、自主开发和训练Transformer与GPT模型、HuggingFace的tansfomers框架的应用、模型微调技术、模型量化技术(peft与LLaMAFactory）、大模型实验环境构建、Ollama与OpenWebUI模型部署、大语言模型的两大托管平台：HuggingFace、ModelScope的使用、模型的下载与运行、提示词工程等。

课程详情

大模型原理-源代码.zip

大模型原理与部署，各类微调训练等全套源代码

33.34MB · 7次下载

大模型-数据集.zip

模型训练和微调会用到的数据集

28.79MB · 8次下载

授课讲师

邓强

蜗牛学苑资深讲师，教学总监，四川大学硕士，系统架构师。20年软件研发、测试、管理及授课经验，精通各种开发和测试技术，如Java开发、PHP开发、Python开发、性能测试、渗透测试、安全攻防等，精通AI人工智能技术体系及底层原理，具备丰富的项目研发和实施经验，正式出版多本个人专著。从事培训事业以来学生过万，遍布国内外各大IT公司。教学严谨细致、原理讲解透彻、注重底层原理，全面培养学生各项素质。

看看TA的主页

推荐课程

MySQL数据库-预科

李利敏 · 17746人观看 · 1118分钟

MySQL数据库-预科

深入理解数据库管理系统通用知识及MySQL数据库的使用与管理。梳理WoniuBooks系统业务关系，并建立数据表和填补数据，为WoniuBooks系统测试打下基础

数据库知识，范式，MySQL配置，命令，建库建表，数据的增删改查，约束，存储过程，函数，触发器，事务，游标

加入收藏

PHP代码审计与反序列化

邓强 · 6927人观看 · 972分钟

PHP代码审计与反序列化

PHP反序列化、PHP的POP链构造、ThinkPHP反序列化漏洞分析与利用、PHP变量覆盖漏洞、弱类型漏洞分析等

PHP语言高级特性分析、PHP高危函数、VAudit系统代码审计、白盒测试与攻击模拟、youbbs代码审计、PHP代码分析、PHP面向对象

加入收藏

MySQL数据库

邓乃文 · 1693人观看 · 779分钟

MySQL数据库

深入理解数据库管理系统通用知识及MySQL数据库的使用与管理。为软件开发打下坚实基础。

Mysql配置、命令、CRUD操作、索引、约束、视图、存储过程、函数、触发器、事务、游标、建模工具

加入收藏

docker与K8S

唐海峰 · 245人观看 · 1248分钟

docker与K8S

加入收藏

面向对象、集合

谭岚 · 1257人观看 · 1300分钟

面向对象、集合

数据是立体的，String是平面的，用String同时记录id-name-sex-age，存取时只好大量split()和拼接，很不优雅，引入实体类，String[]变Person[]，List<String>变List<Person>

类与对象、static，构造函数，有参构造，this，toString()；List<T>，迭代器，比较器，匿名内部类。

加入收藏

自然语言处理

邓强 · 1782人观看 · 1088分钟

自然语言处理

中英文分词算法、自然语文处理模型、文本分类、情感分析、信息抽取、文本生成、词向量、词嵌入

自主开发分词器、Jieba分词器、N-Gram 模型、One-Hot独热编码、词向量、词嵌入、CBOW模型、Skip-Gram模型、Seq2Seq 模型、LSTM、FastText、TextRank文本摘要、全文检索项目实战、内容审核项目实战、成语接龙项目实战

加入收藏

安全运维

唐海峰 · 32人观看 · 92分钟

安全运维

加入收藏

AE交互动效

康宇 · 8637人观看 · 397分钟

AE交互动效

掌握app界面交互动画设计、图标交互动画设计

app界面动画

加入收藏

数据结构

吴聪聪 · 687人观看 · 1030分钟

数据结构

加入收藏

网络安全防护与入侵检测

徐小兵 · 14人观看 · 364分钟

网络安全防护与入侵检测

掌握常见的安全防护方法

入侵检测与防御系统，Wazuh，Suricata流量监测，入侵排查，防火墙策略配置，windows域安全

加入收藏

APP专项测试

徐小兵 · 8071人观看 · 405分钟

APP专项测试

通过和开发人员的共同工作，深入理解软件测试在项目实施过程中的迭代方式，提高对项目实施过程，开发流程，测试流程的理解，提高个人核心竞争力

基于敏捷开发过程协作完成项目，模拟项目的版本迭代过程与，完整体验真实项目实施过程

加入收藏

Java和CVE漏洞复现

邓强 · 6582人观看 · 2235分钟

Java和CVE漏洞复现

1、能够利用各类安全漏洞网站的公开漏洞，或者利用搜索引擎及时查寻各类最新漏洞，并复现相应漏洞 2、分析和复现各类CVE漏洞，并在PHP和系统之外，积累更多漏洞知识和经验，理解其形成机制，提升综合竞争力 3、综合运用前述知识，从技术、方案、实现、优化等方面，初步达到中级网络安全工程师的能力

Java漏洞利用：Log4J2、JWT、Shiro、FastJSON、Spring、Spring-Cloud、Spring-Security、Weblogic、Tomcat、ActiveMQ、Struts2、Jboss、ysoserial工具使用、Java反序列化利用链分析，Django漏洞、Office RCE漏洞、Jenkins漏洞、WordPress漏洞、Drupal漏洞、各类CMS漏洞、各类OA漏洞，SRC众测平台实战

加入收藏

基本信息

联系信息

上传资料