TTiti的学习笔记
首页 / 综合实践 / 12_深度学习原理与经典论文路线/第七周_整合查漏工作纸.md

第七周整合查漏工作纸

综合实践 · 12_深度学习原理与经典论文路线/第七周_整合查漏工作纸.md

第七周整合查漏工作纸

一句话目标

第七周不再学习新论文,而是把 12 篇论文、8 个 notebook、自测题、错题本和最终汇报选题整合起来,判断第八周是否可以进入模拟组会。

Day 43:三条主线整合

1. 表示学习到 Transformer

包含论文:

这条线解决的问题:

我能讲清的机制:

2. 预训练语言模型与规模规律

包含论文:

这条线解决的问题:

我能讲清的机制:

3. 对齐、适配与生成模型

包含论文:

这条线解决的问题:

我能讲清的机制:

4. 12 篇论文总知识图文字版

Day 44:notebook 证据表

notebook对应论文/机制输入 shape输出/loss没有覆盖的论文内容
dl_01_word2vec_embeddings.ipynb
dl_02_resnet_block.ipynb
dl_03_attention_qkv.ipynb
dl_04_mini_gpt_causal_lm.ipynb
dl_05_bert_mlm_toy.ipynb
dl_06_scaling_law_chinchilla_toy.ipynb
dl_07_lora_linear.ipynb
dl_08_diffusion_denoising_toy.ipynb

Day 45:经典论文矩阵修正

1. 最容易混淆的 3 篇论文

1. 2. 3.

2. 我修正了哪些矩阵行?

3. 哪些“论文贡献”可能被我说大了?

4. 哪些还需要查原文?

Day 46:自测题第一轮

1. 答错或答虚的问题

题号题目我的原回答问题修正方向

2. 需要转入 错题与薄弱点复盘.md 的问题

1. 2. 3.

Day 47:12 篇论文主线 8 分钟稿

1. 开场 30 秒

2. 第一条线:表示学习到 Transformer

3. 第二条线:预训练与规模规律

4. 第三条线:对齐、适配与生成

5. 我的代码证据

6. 我的理解边界

Day 48:补短板

1. 本周最重要的 5 个修正回答

1. 2. 3. 4. 5.

2. 我仍然不能讲清的地方

1. 2. 3.

Day 49:最终汇报选题

1. 候选论文

论文适合作为最终汇报的理由风险

2. 最终选择

论文:

notebook:

选择理由:

最担心被追问的问题:

3. 第八周计划

1. 2. 3.

第七周证据汇总

证据位置是否完成还缺什么
Day43-Day49 学习记录daily_logs/Day43_学习记录.mdDay49_学习记录.md
总知识图文字版本工作纸 / daily_logs/Day43_学习记录.md
notebook 证据表本工作纸 / daily_logs/Day44_学习记录.md
经典论文矩阵修正经典论文矩阵.md
自测题第一轮本工作纸 / 自测题库.md
错题与薄弱点错题与薄弱点复盘.md
8 分钟主线稿本工作纸 / daily_logs/Day47_学习记录.md
最终汇报选题本工作纸 / daily_logs/Day49_学习记录.md