AI大模型全栈工程师培训方案

日期：2024-03-06 00:00:00 浏览：788次作者：小编

培训背景

AI大模型全栈工程师是一种具备广泛技能的职业，他们在从系统设计到部署和优化的完整技术栈中发挥作用。他们不仅熟练掌握各类编程语言和工具，还能参与从数据收集、预处理、系统构建到应用部署的整个项目开发流程。此外，这类工程师还需具备出色的沟通能力和团队合作精神，以便与其他领域专家紧密合作，共同推动项目的实际应用。

AI大模型全栈工程师的工作职责包括数据处理与清洗、系统训练与调优、应用部署与优化、系统维护与监控、领域知识融合与创新以及自动化与效率提升等方面。具体来说，他们需要：

1. 对原始数据进行清洗、标准化和去噪，确保数据的质量和一致性。

2. 根据项目需求选择合适的算法和框架进行系统构建，并不断调整参数和结构以提高性能和效果。

3. 将构建好的系统部署到实际应用环境中，并选择适当的工具和优化性能的方法。

4. 建立，实时跟踪系统性能，及时发现并解决可能出现的问题。

5. 具备跨领域思维，将不同领域的知识和技术进行融合，推动创新和发展。

6. 利用自动化技术简化复杂的任务，提高工作效率。

随着科技的快速发展，AI大模型全栈工程师需要掌握最新的技术理论，了解关键的技术机制，具备实战经验，这对于成为一名优秀的AI大模型全栈工程师至关重要。

培训特色

1. 理论与实践相结合、案例分析与实验穿插进行;

2. 专家精彩内容解析、学员专题讨论、分组研究;

3. 通过全面知识理解、专题技能掌握和安全实践增强的授课方式。

培训收益

1. 整体掌握大模型理论知识;

2. 了解自注意力机制、Transformer模型、BERT模型;

3. 掌握GPT1、GPT2、GPT3、chatGPT原理与实战;

4. 了解LLM应用程序技术栈和提示词工程Prompt Enginerring;

5. 了解国产大模型ChatGLM;

6. 了解Sora大模型技术优势;

7. 掌握语言理解与字幕生成及其应用;

8. 掌握图像生成和应用实操;

9. 了解应用场景与潜力分析;

10. 了解大模型企业商用项目实战。

日程安排

培训时间	培训主题	培训大纲
第一天	预备知识第一节：大模型理论知识	1、初探大模型：起源与发展 2、GPT模型家族：从始至今 3、大模型_GPT_ChatGPT的对比介绍 4、大模型实战-大模型2种学习路线的讲解 5、大模型最核心的三项技术:模型、微调和开发框架 6、 0penAl GPT系列在线大模型技术生态 7、0penAl文本模型A、B、C、D四大模型引擎简介 8、0penAl语音模型Whisper与图像型DALL·E模型介绍 9、最强Embedding大模型text-embedding-ada模型介绍 10、全球开源大模型性能评估榜单 11、中文大模型生态介绍与GLM 130B模型介绍 12、ChatGLM模型介绍与部署门槛 13、ChatGLM开源生态:微调、多模态，WebUI等项目简介
	预备知识第二节：自注意力机制、Transformer模型、BERT模型	RNN-LSTM-GRU等基本概念编码器、解码器自注意力机制详解 Transformer Mask Multi-Head Attention 位置编码特定于任务的输入转换无监督预训练、有监督 Fine-tuning BERT思路的理解 BERT模型下游任务的网络层设计 BERT的训练 HuggingFace中BERT模型的推断基于上下文的学习代码和案例实践：基本问答系统的代码实现深入阅读理解的代码实现段落相关性代码实现
	第一节： GPT1、GPT2、GPT3、chatGPT原理与实战	监督微调（SFT）模型、指示学习和提示学习简单提示、小样本提示、基于用户的提示指令微调 RLLHF技术详解（从人类的反馈中学习）聚合问答数据训练奖励模型（RM）强化学习微调、PPO、 InstructGPT遵循用户意图使用强化学习方案 Instruct Learning vs. Prompt Learning ChatGPT增加增加了Chat属性 AI 系统的新范式 GPT1-GPT2-GPT3-InstructGPT的-chatGPT的技术关系代码和案例实践：使用chatGPT打造你的私人聊天助理演示提示词技巧，翻译器润色器、JavaScript 控制台、Excel Sheet 网站定制chatgpt-web
	第二节： Embedding模型实战	大模型技术浪潮下的Embedding技术定位 Embedding技术入门介绍从Ono-hot到Embedding Embedding文本衡量与相似度计算 OpenAl Embedding模型与开源Embedding框架两代OpenAl Embedding模型介绍 text-embedding-ada-002模型调用方法详解 text-embedding-ada-002模型参数详解与优化策略借助Embedding进行特征编码 Embedding结果的可视化展示与结果分析【实战】借助Embedding特征编码完成有监督预测【实战】借助Embedding进行推荐系统冷启动【实战】借助Embedding进行零样本分类与文本搜索 Embedding模型结构微调优化借助CNN进行Embedding结果优化【企业级实战】海量文本的Embedding高效匹配
	第三节： LLM应用程序技术栈和提示词工程Prompt Enginerring	设计模式：上下文学习数据预处理/嵌入提示构建/检索提示执行/推理数据预处理/嵌入 Weaviate、Vespa 和 Qdrant等开源系统 Chroma 和 Faiss 等本地向量管理库 pgvector 等OLTP 扩展提示构建/检索提示执行/推理新兴的大语言（LLM）技术栈数据预处理管道（data preprocessing pipeline）嵌入终端（embeddings endpoint ）+向量存储（vector store） LLM 终端（LLM endpoints） LLM 编程框架（LLM programming framework） LangChain的主要功能及模块 Prompts: 这包括提示管理、提示优化和提示序列化。 LLMs: 这包括所有LLMs的通用接口，以及常用的LLMs工具。 Document Loaders: 这包括加载文档的标准接口，以及与各种文本数据源的集成。 Utils: 语言模型在与其他知识或计算源的交互 Python REPLs、嵌入、搜索引擎等 LangChain提供的常用工具 Indexes：语言模型结合自定义文本数据 Agents：动作执行、观测结果， LangChain的代理标准接口、可供选择的代理、端到端代理示例 Chat：Chat模型处理消息代码和案例实践： LLM大模型的使用 Prompts的设计和使用
第二天	第四节：LangChain的使用	构建垂直领域大模型的通用思路和方法 (1) 大模型+知识库 (2) PEFT(参数高效的微调) (3) 全量微调 (4) 从预训练开始定制 LangChain介绍 LangChain模块学习-LLMs 和 Prompts LangChain之Chains模块 LangChain之Agents模块 LangChain之Callback模块 Embedding嵌入自定义知识库知识冲突的处理方式向量化计算可采用的方式文档加载器模块向量数据库问答的设计 Lanchain竞品调研和分析 Dust.tt/Semantic-kernel/Fixie.ai/Cognosis/GPT-Index LlamaIndex介绍 LlamaIndex索引动手实现知识问答系统代码和案例实践：动手实现知识问答机器人 LangChain文本摘要 PDF文本阅读问答
	第五节：国产大模型ChatGLM	新一代GLM-4模型入门介绍智谱Al Mass开放平台使用方法03GLM在线大模型生态介绍 CharGLM、CogView. Embedding模型介绍 GLM在线知识库使用及模型计费说明 GLM模型API一KEY获取与账户管理方法 GLM模型SDK调用与三种运行方法 GLM4调用函数全参数详解 GLM4 Message消息格式与身份设置方法 GLM4 tools外部工具调用方法 GLM4 Function calling函数封装12GLM4接入在线知识库retrieval流程 GLM4接入互联网web_search方法【实战】基于GLM4打造自动数据分析Agent 【实战】基于GLM4的自然语言编程实战【实战】基于GLM4 Function call的用户意图识别【实战】基于GLM4的长文本读取与优化
	第六节： Sora大模型技术优势	什么是Sora Sora视频生成能力 Sora技术独特之处统一的视觉数据表示视频压缩网络扩散型变换器模型视频压缩与潜在空间
	第七节：语言理解与字幕生成及其应用	使用图像和视频作为提示词动画DALL·E图像扩展生成的视频视频到视频编辑连接视频字幕生成重字幕技术 GPT技术应用
第三天	第八节：图像生成和应用实操	新兴的仿真功能长期连续性和物体持久性角色和物体的一致性视频内容的连贯性与世界互动简单影响行为模拟模拟数字世界
	第九节：应用场景与潜力分析	电影与娱乐产业游戏开发教育与培训广告与营销科学研究与模拟生成数据毕业生职位分类案例研究提示函数 FunctionCalling 提示工程在模型上的应用 AI聊天社交应用 CallAnnie NewBing AI辅助文章创作迅捷AI写作 ChibiAI AI办公智能助手 GrammaAI AI艺术领域创作
	第十节：大模型企业商用项目实战讲解	使用大模型实现推荐系统（商用案例）使用大模型实现汽车在线销售系统企业自然语言sql生成（企业内部系统使用）

推荐讲师

邹老师 长春工业大学人工智能研究院的领军人物，学术研究的翘楚，同时也是华东建筑设计研究总院的资深研究员、山东交通学院的荣誉客座教授、南昌航空大学的杰出硕士生导师。身为中国软件行业协会的专家委员，以及上海市计划生育科学研究所的特聘专家，天津大学的创业导师，更是中华中医药学会的活跃会员和中国医药教育协会老年运动与健康分会的学术权威。

作为学术界的璀璨明星，他领导睿客邦与全国二十余所高等院校及国有企业携手共建AI联合实验室，成功实施50余深度学习实践项目，其成果广泛渗透至医疗、交通、农业、气象、银行、电信等众多领域，为科技进步和社会发展注入了强大动力。

在他的带领下，团队完成了数十项人工智能项目，内容横跨深度学习、机器学习、数据挖掘等前沿技术领域，同时深入探讨AI的整体发展轨迹、当前现状、应用场景、商业价值以及未来发展趋势，覆盖了人工智能领域的全方位知识，展现了其深厚的学术造诣和卓越的领导才能。

张老师 具备深厚技术功底与丰富实战经验的资深架构师，专注于JavaWeb技术栈，擅长运用Langchain进行创新开发。精通构建与优化大规模分布式架构、微服务架构，以及云计算与容器化技术。在开发与运维一体化、应用系统安全、架构设计、海量数据处理和大数据领域拥有独到见解，特别是在后端高并发系统架构与实施方面，积累了丰富的经验。

- 深谙Java方向，对软件架构有着深刻的理解和实践。

- 精通微服务架构，高效推进软件工程和研发团队管理。

- currently担任某上市集团公司的首席大数据架构师，为国内外提供安全服务，确保数据安全与高效处理。

- 主导公司AI大模型开发项目，成功实现智能SQL项目，大幅提升数据处理效率。

- 利用AI推动系统自动化与销售管理系统智能化，为公司业务增长提供强大动力。

拥有11年IT开发经验及5年IT架构与管理背景，具备以下资质：

- 通过专业培训与考试，荣获由工业和信息化部教育与考试中心颁发的《AI大模型全栈工程师》职业能力证书。

- 此证书不仅代表我的专业技术能力，也是我职业生涯中岗位聘用、任职、定级和晋升职务的重要依据。

这样的表述，不仅展现了您的专业技能和丰富经验，还凸显了您的职业资质和行业地位。

工业和信息化部教育与考试中心职业技术证书样本

图片1.png

图片2.png

图片3.png

企业内训1

标签： AI大模型全栈工程师课程 AI大模型全栈工程师 AI大模型全栈工程师培训

上篇： 《深度学习与图像处理》培训方案

下篇： ChatGPT商业及开发培训方案

培训时间	培训主题	培训大纲
第一天	预备知识第一节：大模型理论知识	1、初探大模型：起源与发展 2、GPT模型家族：从始至今 3、大模型_GPT_ChatGPT的对比介绍 4、大模型实战-大模型2种学习路线的讲解 5、大模型最核心的三项技术:模型、微调和开发框架 6、 0penAl GPT系列在线大模型技术生态 7、0penAl文本模型A、B、C、D四大模型引擎简介 8、0penAl语音模型Whisper与图像型DALL·E模型介绍 9、最强Embedding大模型text-embedding-ada模型介绍 10、全球开源大模型性能评估榜单 11、中文大模型生态介绍与GLM 130B模型介绍 12、ChatGLM模型介绍与部署门槛 13、ChatGLM开源生态:微调、多模态，WebUI等项目简介
	预备知识第二节：自注意力机制、Transformer模型、BERT模型	RNN-LSTM-GRU等基本概念编码器、解码器自注意力机制详解 Transformer Mask Multi-Head Attention 位置编码特定于任务的输入转换无监督预训练、有监督 Fine-tuning BERT思路的理解 BERT模型下游任务的网络层设计 BERT的训练 HuggingFace中BERT模型的推断基于上下文的学习代码和案例实践：基本问答系统的代码实现深入阅读理解的代码实现段落相关性代码实现
	第一节： GPT1、GPT2、GPT3、chatGPT原理与实战	监督微调（SFT）模型、指示学习和提示学习简单提示、小样本提示、基于用户的提示指令微调 RLLHF技术详解（从人类的反馈中学习）聚合问答数据训练奖励模型（RM）强化学习微调、PPO、 InstructGPT遵循用户意图使用强化学习方案 Instruct Learning vs. Prompt Learning ChatGPT增加增加了Chat属性 AI 系统的新范式 GPT1-GPT2-GPT3-InstructGPT的-chatGPT的技术关系代码和案例实践：使用chatGPT打造你的私人聊天助理演示提示词技巧，翻译器润色器、JavaScript 控制台、Excel Sheet 网站定制chatgpt-web
	第二节： Embedding模型实战	大模型技术浪潮下的Embedding技术定位 Embedding技术入门介绍从Ono-hot到Embedding Embedding文本衡量与相似度计算 OpenAl Embedding模型与开源Embedding框架两代OpenAl Embedding模型介绍 text-embedding-ada-002模型调用方法详解 text-embedding-ada-002模型参数详解与优化策略借助Embedding进行特征编码 Embedding结果的可视化展示与结果分析【实战】借助Embedding特征编码完成有监督预测【实战】借助Embedding进行推荐系统冷启动【实战】借助Embedding进行零样本分类与文本搜索 Embedding模型结构微调优化借助CNN进行Embedding结果优化【企业级实战】海量文本的Embedding高效匹配
	第三节： LLM应用程序技术栈和提示词工程Prompt Enginerring	设计模式：上下文学习数据预处理/嵌入提示构建/检索提示执行/推理数据预处理/嵌入 Weaviate、Vespa 和 Qdrant等开源系统 Chroma 和 Faiss 等本地向量管理库 pgvector 等OLTP 扩展提示构建/检索提示执行/推理新兴的大语言（LLM）技术栈数据预处理管道（data preprocessing pipeline）嵌入终端（embeddings endpoint ）+向量存储（vector store） LLM 终端（LLM endpoints） LLM 编程框架（LLM programming framework） LangChain的主要功能及模块 Prompts: 这包括提示管理、提示优化和提示序列化。 LLMs: 这包括所有LLMs的通用接口，以及常用的LLMs工具。 Document Loaders: 这包括加载文档的标准接口，以及与各种文本数据源的集成。 Utils: 语言模型在与其他知识或计算源的交互 Python REPLs、嵌入、搜索引擎等 LangChain提供的常用工具 Indexes：语言模型结合自定义文本数据 Agents：动作执行、观测结果， LangChain的代理标准接口、可供选择的代理、端到端代理示例 Chat：Chat模型处理消息代码和案例实践： LLM大模型的使用 Prompts的设计和使用
第二天	第四节：LangChain的使用	构建垂直领域大模型的通用思路和方法 (1) 大模型+知识库 (2) PEFT(参数高效的微调) (3) 全量微调 (4) 从预训练开始定制 LangChain介绍 LangChain模块学习-LLMs 和 Prompts LangChain之Chains模块 LangChain之Agents模块 LangChain之Callback模块 Embedding嵌入自定义知识库知识冲突的处理方式向量化计算可采用的方式文档加载器模块向量数据库问答的设计 Lanchain竞品调研和分析 Dust.tt/Semantic-kernel/Fixie.ai/Cognosis/GPT-Index LlamaIndex介绍 LlamaIndex索引动手实现知识问答系统代码和案例实践：动手实现知识问答机器人 LangChain文本摘要 PDF文本阅读问答
	第五节：国产大模型ChatGLM	新一代GLM-4模型入门介绍智谱Al Mass开放平台使用方法03GLM在线大模型生态介绍 CharGLM、CogView. Embedding模型介绍 GLM在线知识库使用及模型计费说明 GLM模型API一KEY获取与账户管理方法 GLM模型SDK调用与三种运行方法 GLM4调用函数全参数详解 GLM4 Message消息格式与身份设置方法 GLM4 tools外部工具调用方法 GLM4 Function calling函数封装12GLM4接入在线知识库retrieval流程 GLM4接入互联网web_search方法【实战】基于GLM4打造自动数据分析Agent 【实战】基于GLM4的自然语言编程实战【实战】基于GLM4 Function call的用户意图识别【实战】基于GLM4的长文本读取与优化
	第六节： Sora大模型技术优势	什么是Sora Sora视频生成能力 Sora技术独特之处统一的视觉数据表示视频压缩网络扩散型变换器模型视频压缩与潜在空间
	第七节：语言理解与字幕生成及其应用	使用图像和视频作为提示词动画DALL·E图像扩展生成的视频视频到视频编辑连接视频字幕生成重字幕技术 GPT技术应用
第三天	第八节：图像生成和应用实操	新兴的仿真功能长期连续性和物体持久性角色和物体的一致性视频内容的连贯性与世界互动简单影响行为模拟模拟数字世界
	第九节：应用场景与潜力分析	电影与娱乐产业游戏开发教育与培训广告与营销科学研究与模拟生成数据毕业生职位分类案例研究提示函数 FunctionCalling 提示工程在模型上的应用 AI聊天社交应用 CallAnnie NewBing AI辅助文章创作迅捷AI写作 ChibiAI AI办公智能助手 GrammaAI AI艺术领域创作
	第十节：大模型企业商用项目实战讲解	使用大模型实现推荐系统（商用案例）使用大模型实现汽车在线销售系统企业自然语言sql生成（企业内部系统使用）