跳到正文
2023年1月24日周二
  1. Hugging Face Blog60

    Hugging Face 解读让对话智能体更有用的关键技术

    Hugging Face 博客梳理了 ChatGPT 背后的 RLHF、IFT、SFT、CoT、红队测试等技术,对比了 LaMDA、BlenderBot 3、Sparrow、InstructGPT、Assistant 在公开访问、训练数据、模型架构和评测维度上的差异。

    推荐理由:通过对比表和分类梳理,读者可快速理解 IFT、SFT、RLHF、CoT 各自作用与数据需求差异。

2023年1月20日周五
2023年1月16日周一
2023年1月9日周一
  1. Hugging Face Blog38

    AI 游戏开发教程:用 ChatGPT 做农场游戏设计(第 2 部分)

    Hugging Face 的 AI 游戏开发教程第 2 部分演示如何用 ChatGPT 辅助农场游戏设计,向其提问后得到作物多样性、进阶系统等建议,并灰盒实现前两项。文章随后科普语言模型、Transformer 架构与 RLHF 原理,指出 ChatGPT 会一本正经地给出错误答案(如四元数解释),建议将其作为头脑风暴与加速工具而非替代开发流程。

2023年1月3日周二
  1. Hugging Face Blog38

    Hugging Face:图机器学习入门

    Hugging Face 博客系统讲解图机器学习基础,涵盖图的定义、同构/异构与有向/无向等分类、图/节点/边/子图四个层级的预测任务,以及边集与邻接矩阵两种表示方式。文章指出图的拓扑不同于文本或图像,打乱边表或邻接矩阵行列仍是同一张图(置换不变性),并介绍从传统图特征方法到 Graph Neural Networks,再到图上 Transformer 的学习方法演进。

2023年1月2日周一
2022年12月21日周三
2022年12月15日周四
  1. Hugging Face Blog49

    Hugging Face 谈机器学习中的偏见:伦理与社会通讯 #2

    Hugging Face 伦理与社会团队发布通讯 #2,系统梳理机器学习开发各阶段应对偏见的经验与工具。文章指出 ML 模型作为社会技术系统会放大不平等,单一技术干预难以解决,需结合部署语境持续响应反馈。文中按任务定义、数据集筛选、模型训练等环节推荐了 🤗 团队开发的偏见分析工具。

2022年12月9日周五
  1. Hugging Face Blog60

    Hugging Face 图解 RLHF:从人类反馈强化学习的三步训练流程

    Hugging Face 博客系统图解了 RLHF 的三步流程:预训练语言模型、用人类排序数据训练奖励模型、再用 PPO 等强化学习算法微调语言模型。文中说明奖励模型将文本映射为标量奖励,奖励函数由偏好分数减去与初始模型的 KL 散度惩罚构成,以防止模型输出偏离初始模型的乱码。

    推荐理由:文章把 RLHF 拆成预训练、奖励模型、PPO 微调三步并给出开源工具清单,便于读者建立完整流程认知。

2022年12月8日周四
2022年12月2日周五
2022年12月1日周四
2022年11月30日周三
2022年11月25日周五
2022年11月21日周一
2022年11月17日周四
2022年11月7日周一
2022年11月3日周四
2022年10月24日周一
2022年10月21日周五
2022年10月13日周四
  1. Hugging Face Blog44

    Stable Diffusion 在 JAX / Flax 上的推理教程

    Hugging Face Diffusers 自 0.5.1 版本起支持 Flax,可在 Google TPU 上运行 Stable Diffusion 推理,教程演示了在 Colab 等环境用 8 个 TPU 加速器并行生成 8 张图片。模型权重以 bf16 版本提供,采用 CreativeML OpenRAIL-M 开放许可,允许再分发与商用,但需向用户附带相同使用限制。

2022年10月12日周三
2022年9月27日周二
2022年9月16日周五
2022年9月8日周四
2022年9月7日周三
2022年8月24日周三
2022年8月22日周一
2022年8月19日周五
2022年8月18日周四
2022年8月17日周三
2022年8月12日周五
2022年8月11日周四
2022年8月10日周三
2022年8月5日周五
  1. Hugging Face Blog38

    Proximal Policy Optimization (PPO)

    Hugging Face 深度强化学习课程第 8 单元讲解 Proximal Policy Optimization (PPO),通过将当前与旧策略的概率比裁剪到 [1−ϵ, 1+ϵ] 区间来限制策略更新幅度,从而提升训练稳定性。文中对比了 TRPO 的 KL 散度约束方案,并将用 PyTorch 从零实现 PPO Agent,在 CartPole-v1 和 LunarLander-v2 上验证。