zkywsg/Daily-LLM

🔥机器学习/深度学习/Python/大模型/多模态/LLM/deeplearning/Python/Algorithm interview/NLP Tutorial

TypeScript

859

739 commits

updated Aug 24, 2026

See the code

README

Daily-LLM banner

深度学习与大模型精通之路

Deep Learning & LLM Mastery

深度学习与大模型的可视化学习路线 —— 从 1986 年 RNN 到 2025 年推理模型,按 19 个架构家族梳理演进脉络。

English · 时间线 · 可视化网页 · 模块索引 · 快速开始 · 贡献指南

License: MIT Python 3.8+ Phases Bilingual


时间线:19 个家族(1986–2025)

#家族关键年份一句话定位
01CNN 卷积神经网络2012–把视觉特征从手工设计交给反向传播
02RNN / LSTM / GRU1997, 2014–给神经网络装上"记忆"
03Word Embedding2013–让"词"有了分布式的语义坐标
04GAN2014–用对抗博弈学会"生成"
05Transformer2017用纯注意力替代循环,彻底并行
06BERT 系预训练2018–双向预训练 + 微调成为 NLP 新范式
07GPT 系 + Scaling2018–2020把规模做到底,涌现 Few-shot
08视觉 Transformer (ViT)2020–Transformer 反攻视觉
09多模态对齐2021–让"图"和"文"住进同一个空间
10扩散模型2020–生成的新王,从噪声到图像
11PEFT / LoRA2021–把大模型微调成本压到普通人能玩
12对齐与 RLHF2022–把"会答"变成"答得好"
13MoE 与高效推理2023–大模型在不变贵的前提下变更大
14RAG 与 Agent2023–把模型接上外部世界
15推理模型 (o1/R1)2024–推理时多想几步,能力再上一个台阶
16世界模型 / 视频生成2018–学习环境动态,从想象训练走向可交互视频世界
17图神经网络2017–把深度学习扩展到任意图结构
18语音 / 音频模型2020–从自监督语音表征走向音频 token 生成
19推荐系统2016–从特征记忆走向兴趣注意力与图表征学习

按年份速查:TIMELINE.md(自动生成) 横切基础:foundations/


可视化网页

仓库内已提供一个独立的时间线可视化网页,入口在 web/

本地运行:

cd web
npm install
npm run dev

页面提供按时间与按家族两种浏览方式,节点页结合 Markdown 正文与交互式金标本。当前先作为本地网页维护,公网部署后再补充正式访问地址。


仓库结构

  • 01-cnn/19-recommendation/ — 19 个架构/范式家族
  • foundations/ — 横切基础(激活、反传、优化器、归一化、注意力机制…)
  • projects/ — 跨家族实战项目
  • web/ — 可视化网页
  • TIMELINE.md — 自动生成的按年份索引
  • _archive/ — 旧 timeline/tracks/ 内容,作为家族内容重写时的素材源

快速开始

1. 克隆仓库

git clone https://github.com/zkywsg/Daily-LLM.git
cd Daily-LLM

2. 安装依赖

pip install -r requirements.txt
按阶段选择性安装依赖
# Phase 00-01(前置 + 视觉线)
pip install torch numpy scikit-learn matplotlib

# Phase 02-03(语言线 + 规模多模态)
pip install transformers datasets sentence-transformers

# Phase 04(对齐与微调)
pip install peft trl

# Phase 05(系统与生产)
pip install sentence-transformers faiss-cpu chromadb langchain vllm fastapi mlflow wandb

贡献

欢迎贡献改进内容、补充案例、修正文档或完善结构。提交前请先阅读 CONTRIBUTING.md

许可证

本项目采用 MIT License

cv
deep-learning
leetcode
leetcode-python
leetcode-solutions
llm
machine-learning
nlp
python
pytorch
pytorch-nlp
pytorch-tutorial
pytorch-tutorials
tensorflow
tensorflow-examples
tensorflow-tutorials

Contributors

zkywsg

739 commits

zkywsg/Daily-LLM

🔥机器学习/深度学习/Python/大模型/多模态/LLM/deeplearning/Python/Algorithm interview/NLP Tutorial

TypeScript

859

739 commits

updated Aug 24, 2026

See the code

README

Daily-LLM banner

深度学习与大模型精通之路

Deep Learning & LLM Mastery

深度学习与大模型的可视化学习路线 —— 从 1986 年 RNN 到 2025 年推理模型,按 19 个架构家族梳理演进脉络。

English · 时间线 · 可视化网页 · 模块索引 · 快速开始 · 贡献指南

License: MIT Python 3.8+ Phases Bilingual


时间线:19 个家族(1986–2025)

#家族关键年份一句话定位
01CNN 卷积神经网络2012–把视觉特征从手工设计交给反向传播
02RNN / LSTM / GRU1997, 2014–给神经网络装上"记忆"
03Word Embedding2013–让"词"有了分布式的语义坐标
04GAN2014–用对抗博弈学会"生成"
05Transformer2017用纯注意力替代循环,彻底并行
06BERT 系预训练2018–双向预训练 + 微调成为 NLP 新范式
07GPT 系 + Scaling2018–2020把规模做到底,涌现 Few-shot
08视觉 Transformer (ViT)2020–Transformer 反攻视觉
09多模态对齐2021–让"图"和"文"住进同一个空间
10扩散模型2020–生成的新王,从噪声到图像
11PEFT / LoRA2021–把大模型微调成本压到普通人能玩
12对齐与 RLHF2022–把"会答"变成"答得好"
13MoE 与高效推理2023–大模型在不变贵的前提下变更大
14RAG 与 Agent2023–把模型接上外部世界
15推理模型 (o1/R1)2024–推理时多想几步,能力再上一个台阶
16世界模型 / 视频生成2018–学习环境动态,从想象训练走向可交互视频世界
17图神经网络2017–把深度学习扩展到任意图结构
18语音 / 音频模型2020–从自监督语音表征走向音频 token 生成
19推荐系统2016–从特征记忆走向兴趣注意力与图表征学习

按年份速查:TIMELINE.md(自动生成) 横切基础:foundations/


可视化网页

仓库内已提供一个独立的时间线可视化网页,入口在 web/

本地运行:

cd web
npm install
npm run dev

页面提供按时间与按家族两种浏览方式,节点页结合 Markdown 正文与交互式金标本。当前先作为本地网页维护,公网部署后再补充正式访问地址。


仓库结构

  • 01-cnn/19-recommendation/ — 19 个架构/范式家族
  • foundations/ — 横切基础(激活、反传、优化器、归一化、注意力机制…)
  • projects/ — 跨家族实战项目
  • web/ — 可视化网页
  • TIMELINE.md — 自动生成的按年份索引
  • _archive/ — 旧 timeline/tracks/ 内容,作为家族内容重写时的素材源

快速开始

1. 克隆仓库

git clone https://github.com/zkywsg/Daily-LLM.git
cd Daily-LLM

2. 安装依赖

pip install -r requirements.txt
按阶段选择性安装依赖
# Phase 00-01(前置 + 视觉线)
pip install torch numpy scikit-learn matplotlib

# Phase 02-03(语言线 + 规模多模态)
pip install transformers datasets sentence-transformers

# Phase 04(对齐与微调)
pip install peft trl

# Phase 05(系统与生产)
pip install sentence-transformers faiss-cpu chromadb langchain vllm fastapi mlflow wandb

贡献

欢迎贡献改进内容、补充案例、修正文档或完善结构。提交前请先阅读 CONTRIBUTING.md

许可证

本项目采用 MIT License

cv
deep-learning
leetcode
leetcode-python
leetcode-solutions
llm
machine-learning
nlp
python
pytorch
pytorch-nlp
pytorch-tutorial
pytorch-tutorials
tensorflow
tensorflow-examples
tensorflow-tutorials

Contributors

zkywsg

739 commits

Languages

TypeScript

89.1%

CSS

5.7%

Python

4.9%