面试题库 › 算法 / 大模型 › fastText 训练方式及 Word2Vec 与 GloVe 的区别

fastText 训练方式及 Word2Vec 与 GloVe 的区别

难度 ★★☆在 2 场真实面经中被问到 方向:算法 / 大模型考点:词向量与文本表示

哪些公司问过

拼多多1平安科技1

常见岗位:NLP / 语音

答案要点

  1. fastText 分类:词和 n-gram 向量求平均 → 线性层 → softmax/层次 softmax,监督训练
  2. fastText 词向量:skip-gram/CBOW + 字符 n-gram,词向量为子词向量之和,可处理 OOV
  3. n-gram 通过哈希桶映射,控制参数规模
  4. Word2Vec:局部窗口预测任务,skip-gram 或 CBOW,负采样或层次 softmax 加速
  5. GloVe:全局共现矩阵,目标为 f(X_ij)(w_i·w̃_j + b_i + b̃_j − log X_ij)² 的加权最小二乘

易错点

面试官常见追问

完整的口述示范答案、每个追问的参考回答,在启面刷题中心查看;也可以让 AI 面试官用语音按这道题连环追问你。

相关面试题