word2vec 口头表达与复盘工作纸
word2vec 口头表达与复盘工作纸
一句话目标
用 Day 6-Day 7 证明你不是“看过 word2vec”,而是能讲清它解决什么问题、怎么做、notebook 复现了什么、还有什么没懂。
Day 6:3 分钟口头表达
1. 20 秒开场:这篇论文解决什么问题?
模板:
我今天解释的是 word2vec。它解决的问题是……
我的版本:
2. 40 秒:one-hot 为什么不够?
至少讲清两点:
1. 2.
我的表达:
3. 60 秒:skip-gram 如何工作?
必须包含:
- 中心词
- 上下文词
- context window
- 预测任务
我的表达:
4. 40 秒:negative sampling 为什么有用?
我的表达:
5. 40 秒:notebook 只复现了什么?
这个 demo 复现了:
这个 demo 没有复现:
6. 20 秒:我的理解边界
我目前能解释:
我还不能声称掌握:
3 分钟完整稿
把上面内容连成一段:
Day 6 追问准备
请先独立回答,不会的转入 错题与薄弱点复盘.md。
追问 1:one-hot 和 embedding 的核心差异是什么?
我的回答:
追问 2:skip-gram 到底是在预测什么?
我的回答:
追问 3:context window 怎么产生训练样本?
我的回答:
追问 4:negative sampling 为什么不是完整 softmax?
我的回答:
追问 5:你的 notebook 为什么不能叫完整复现 word2vec?
我的回答:
Day 7:第一周复盘
1. 自测题 1-6 闭卷回答
1. tensor 的 shape 为什么重要?
我的回答:
修正后回答:
2. loss、gradient、optimizer 三者关系是什么?
我的回答:
修正后回答:
3. 过拟合为什么不能只看训练 loss?
我的回答:
修正后回答:
4. one-hot 和 embedding 有什么区别?
我的回答:
修正后回答:
5. skip-gram 在预测什么?
我的回答:
修正后回答:
6. negative sampling 为什么有用?
我的回答:
修正后回答:
第一周证据汇总
| 证据 | 位置 | 是否完成 | 还缺什么 |
|---|---|---|---|
| Day01 概念工作纸 | Day01_概念工作纸.md | ||
| Day02-Day05 word2vec 工作纸 | word2vec_阅读与笔记工作纸.md | ||
| word2vec 个人笔记 | paper_notes/01_word2vec.md | ||
| word2vec notebook shape/loss 记录 | daily_logs/Day03_学习记录.md 或 Day04_学习记录.md | ||
| 3 分钟口头稿 | 本工作纸 / daily_logs/Day06_学习记录.md | ||
| 自测题 1-6 | 本工作纸 / 自测题库.md | ||
| 第一周复盘 | daily_logs/第一周复盘.md |
第一周结论
我已经能讲清的 3 件事
1. 2. 3.
我还不懂但能具体问出来的 3 件事
1. 2. 3.