焚决 · AI 教程站
书籍已过期

从零开始大模型开发与微调:基于PyTorch与ChatGLM

PyTorchChatGLM微调BERT

介绍

本书以PyTorch 2.0为框架,从环境搭建、深度学习基础到卷积网络、循环网络、Transformer编码器/解码器,逐步讲解BERT、GPT-2等模型,并以ChatGLM为例,介绍其使用、定制化应用及微调技术。全书共18章,配套源代码和PPT,适合初学者系统学习大模型开发与微调。

章节要点

  • 1新时代的曙光——人工智能与大模型
  • 2PyTorch 2.0深度学习环境搭建
  • 3从零开始学习PyTorch 2.0
  • 4一学就会的深度学习基础算法详解
  • 5基于PyTorch卷积层的MNIST分类实战
  • 6可视化的PyTorch数据处理与模型展示
  • 7ResNet实战
  • 8有趣的词嵌入
  • 9基于循环神经网络的中文情感分类实战
  • 10从零开始学习自然语言处理的编码器
  • 11站在巨人肩膀上的预训练模型BERT
  • 12从1开始自然语言处理的解码器
  • 13基于PyTorch 2.0的强化学习实战
  • 14ChatGPT前身——只具有解码器的GPT-2模型
  • 15实战训练自己的ChatGPT
  • 16开源大模型ChatGLM使用详解
  • 17开源大模型ChatGLM高级定制化应用实战
  • 18对训练成本上亿美元的ChatGLM进行高级微调