Day 02 学习记录:word2vec 与 embedding 直觉
Day 02 学习记录:word2vec 与 embedding 直觉
日期
-
今日任务
- 对应天数:Day 2
- 对应论文/概念:word2vec、one-hot、embedding
- 对应 notebook:
dl_01_word2vec_embeddings.ipynb
90 分钟闭环记录
| 环节 | 计划 | 实际完成 | 证据 |
|---|---|---|---|
| 20 分钟概念 | 阅读 核心概念清单.md 的表示学习部分 | ||
| 25 分钟论文 | 读 word2vec 摘要和引言 | ||
| 25 分钟代码 | 打开 word2vec notebook,阅读语料和 vocabulary 构造 | ||
| 10 分钟总结 | 写一句话解释 one-hot 和 embedding 的区别 | ||
| 10 分钟自测/AI 提问 | 做自测题 4 |
今天真正理解的 3 件事
1. 2. 3.
今天跑通或检查的代码
- notebook:
dl_01_word2vec_embeddings.ipynb - 关键输入 shape:
- 关键输出 shape:
- loss 或输出说明:
- 没有覆盖论文的部分:
今天还不懂的 3 个问题
1. 2. 3.
明天最小任务
- 理解 context window 如何产生 skip-gram 训练样本。