指南首页/资料总索引
EN
资料总索引

各方向课程、论文与项目

已经对一个问题感兴趣,想找课程、代表论文、代码或更完整的 paper list,可以在这里继续。第一次接触一个方向,先看方向导读,再回来挑材料。

返回资料总索引

CV:感知任务、视觉表示与图像模型

NLP & LLM:概念、使用、从头实现和研究深入

多模态与 MLLM:先看输入输出怎样连接

AIGC、Diffusion 与 Flow Matching

World Model:预测、交互、想象与决策

RL:交互问题、中文入门、代码与深入课程

  • 动手学强化学习|中文在线书,配有代码与视频。先看问题定义和一个小环境,从价值与策略进入深度 RL。

  • Easy RL:蘑菇书|中文社区教程。学习强化学习时,可用它对照另一种讲法,补不熟悉的概念。

  • Gymnasium:Basic Usage|官方代码教程。通过小环境观察 observation、action、reward 和终止信号怎样流动。

  • CleanRL|强化学习算法实现与说明。选一个算法,沿相对集中的代码读训练循环,对照概念与实现。

  • Berkeley Deep Reinforcement Learning|深度强化学习课程、视频与作业。已有 RL 基础后,可以继续看模型学习、策略优化等专题。

具身:方向认知、路线、论文与动手入口

  • Lumina/陈天行:Embodied-AI-Guide|中文具身智能指南。先认识技术版图,再按方向查学习路线、论文、教程与项目。

  • MIT Robotic Manipulation — Russ Tedrake|英文操作课程与教材,涉及几何、感知、规划与控制。适合进一步理解机器人操作的组成。

  • MIT Underactuated Robotics|控制与机器人课程。想深入动力学、控制和决策时,可以按专题学习。

  • LeRobot|机器人学习的开源实现、数据与文档。可以先读示范数据和运行模型;实机操作需要对应机器人设备。

  • RoboTwin 2.0|仿真数据与评测项目,用来了解任务、数据、训练和评价怎样串起来。安装与训练前先看项目列出的 GPU 和环境要求。

  • ALOHA/ACT:Learning Fine-Grained Bimanual Manipulation|项目视频与论文。把动作数据、模仿学习和双臂操作任务连起来,先看演示和方法结构。

  • Diffusion Policy|作者项目页与演示。把生成建模用于动作学习,可以对照图像扩散与动作序列的区别。

  • Open X-Embodiment|跨机器人数据与模型项目。重点看数据来源、机器人之间的差异,以及泛化怎样评价。

具身细分方向的论文索引

Agentic:概念、教程、项目与评测

  • LLM Powered Autonomous Agents — Lilian Weng|英文技术博客,2023 年。用 planning、memory、tool use 等组件介绍 LLM Agent。

  • Hugging Face Agents Course|官方课程与实践。先理解工具和执行过程,再做小 Agent。涉及模型 API 的练习需要相应账号,并可能产生调用费用。

  • Hello Agents — Datawhale|中文原理与实践教程。先从基础定义和小实现开始,再按项目需要看框架。

  • LLM-Agent-Paper-List|综述作者维护的论文列表。先看综述分类,再挑一个问题向下找文章。

  • AgentBench|Agent 评测项目。读任务设置、成功判定与失败案例,理解怎样评价任务完成情况。

  • SWE-bench|软件任务评测入口。看真实 issue、测试与结果的关系,比较结果时注意模型使用的工具、预算和设置。

效率、推理和软硬协同

AI4X:科学数据与任务

  • DeepChem|开源工具与教程。选一个输入、标签和评价清楚的药物或分子任务,认识领域数据的特点。

  • Therapeutics Data Commons|药物与生物任务的数据和评价入口。先看任务定义与数据划分,再研究模型。

  • MONAI Tutorials|医学影像项目教程。可从数据处理和分割示例认识图像、标注与评价。

  • DeePMD-kit|分子动力学与机器学习项目,适合材料和分子模拟方向,需要相应的物理与化学背景。

  • FinRL|金融强化学习项目。可以观察环境、数据划分与回测设计,重点看时间顺序、交易成本和评价条件。

  • Awesome AI for Science|AI for Science 的跨领域工具、论文与项目集合,可按学科找到具体工作。

自动研究:作为项目案例观察

  • autoresearch — Karpathy|训练实验的自动迭代项目。看目标、可修改范围、结果记录和评价怎样组成实验循环。

  • The AI Scientist — Sakana AI|论文、代码与说明,展示自动生成想法、实验和写作的系统设计。可以沿流程看各环节如何评价。

图学习与时序预测