深度学习核心概念 🧠
神经网络架构
包括全连接网络、卷积神经网络(CNN)、循环神经网络(RNN)等,建议访问 [/machine-learning-basics](/machine-learning-basics) 了解基础原理优化算法进阶
- Adam 优化器(自适应矩估计)
- RMSProp 算法
- LAMB 优化器(适用于大规模分布式训练)
强化学习实战 🤖
多智能体系统
包含合作与竞争场景,推荐路径:[/reinforcement-learning](/reinforcement-learning)深度强化学习框架
- TensorFlow + Dopamine
- PyTorch + Stable Baselines
- PPO(Proximal Policy Optimization)算法
自然语言处理前沿 📖
预训练模型技术
包括 BERT、GPT-3、T5 等,可扩展阅读 [/nlp-techniques](/nlp-techniques)序列到序列模型
- 编码器-解码器结构
- 注意力机制(Attention)
- 变分自编码器(VAE)