Hugging Face 与 Albumentations AI 推出文档图像 TextImage Augmentation 数据增强教程
Hugging Face 与 Albumentations AI 合作推出面向文档图像的 TextImage Augmentation 数据增强管线,同步修改图像内容与文本标注,以解决 VLM 微调中文档图像数据集有限、常规图像变换破坏文本提取精度的问题。
Hugging Face 与 Albumentations AI 合作推出面向文档图像的 TextImage Augmentation 数据增强管线,同步修改图像内容与文本标注,以解决 VLM 微调中文档图像数据集有限、常规图像变换破坏文本提取精度的问题。
Hugging Face 官方博客介绍如何用 Quanto 的量化工具优化 Diffusers 中 Transformer 架构的扩散管线显存占用。
Hugging Face 用 LAVE(LLM-Assisted VQA Evaluation)指标对 Docmatix 约 200 张测试图做零样本评测,基线模型 MPLUGDocOwl1.5(在 DocVQA 测试子集上 ANLS 84%)的 LAVE 得分为 0.58,而 CIDER、BLEU、ANLS 分别只有 0.1411、0.0032、0.002。
Hugging Face 官方博客讲解如何借助 WWDC 24 新发布的 Core ML 特性,在 Mac 上以不到 4GB 内存运行 Mistral 7B。
推荐理由:逐步骤给出转换与运行命令,读者可照做在 Mac 上跑起 7B 模型并了解各项新特性的作用。
Hugging Face 展示了如何用 distilabel 从 Argilla 2.0 技术文档生成合成数据,微调领域专用 embedding 模型,并结合向量数据库与 Gradio 构建可对话的文档 Chatbot。
Numina 与 Hugging Face 合作的 NuminaMath 7B TIR 赢得首届 AIMO Progress Prize,在私有测试集 50 题中解出 29 题。
推荐理由:详细拆解了从数据构造到解码算法的完整配方,可迁移方法多。
Hugging Face 官方博客宣布 TRL 库现已支持对视觉语言模型(VLM)进行直接偏好优化(DPO),并给出完整教程。
Banque des Territoires(CDC Group)、Polyconseil 与 Hugging Face 合作,为法国 EduRénov 学校生态改造项目开发基于 RAG 的主权数据方案,首期已于近日完成。
Intel 和 MILA 将蛋白质多模态语言模型 ProtST 重构后发布到 Hugging Face Hub,并演示了用 Optimum for Intel Gaudi 在 Gaudi 2 上运行推理与微调。
Hugging Face 发布教程,展示如何将微软 Florence-2 微调到 DocVQA 数据集上获得 VQA 能力:微调前验证集 Levenshtein 相似度为 0,训练 7 个 epoch 后提升到 57.0。
Hugging Face Ethics and Society Newsletter #6 探讨了 AI 开发中数据质量的重要性,以 Reddit 向 Google 提供数据导致搜索引擎出现"往披萨上加胶水"的荒谬推荐为例,说明低质量数据的危害。
Hugging Face 与 Argilla 联合开源社区推进的 Data Is Better Together 计划,已发布 DIBT/10k_prompts_ranked 数据集(10K prompts,385 人参与),并基于其中 500 条 prompt 启动多语言评测项目 MPEP,荷兰语、俄语、西班牙语翻译已完成。
Prezi 加入 Hugging Face Expert Support Program,将开源 re-ranker 模型引入其 Prezi AI 系统的资产搜索管线,以更低成本、更快速度和更好效果筛选图片与文本。
Hugging Face Accelerate 团队发现用 Mistral-7B base 在 bfloat16 下训练时 DeepSpeed 与 FSDP 损失曲线不一致。
Hugging Face 宣布将重新设计 Transformers 文档,以解决其因多年增量式堆叠新内容而变得割裂、难导航且过时的问题。新版文档将转向以代码和解决方案为导向,面向开发者而非仅面向机器学习工程师,并用灵活的结构取代僵化的 Diátaxis 分类,让内容自然生长与整合。
Hugging Face 推出 TGI Benchmarking 工具,用于剖析 Text Generation Inference(TGI)部署的吞吐与延迟权衡,帮助用户按需调优。
Hugging Face 官方博客给出使用 Sentence Transformers 微调或从零训练 Embedding 模型的完整教程,覆盖数据集、损失函数、训练参数、评估器与 Trainer 各组件。
Hugging Face 与 Intel 演示了如何基于 OPEA 平台,用 Intel Gaudi 2 加速器和 Xeon CPU 构建高性价比的企业级 RAG 应用。
Hugging Face 官方博客介绍如何用自定义 inference handler 在 Inference Endpoints 上部署 Whisper ASR、Pyannote 说话人分离与投机解码的组合管线,代码拆分为 handler.py、diarization_utils.py 和 config.py 三个文件。
Zama 在 Hugging Face 上提供预编译的 Concrete ML 模型,用户可通过 Hugging Face Endpoints 和 custom inference handlers 一键部署全同态加密(FHE)隐私保护推理。
Gradio 的 reload mode 让开发者用 `gradio app.py` 启动应用后,源码改动即时生效、无需重启服务器,UI 更新瞬间可见。相比 uvicorn 自带的自动重载,它支持选择性重载,可用 `if gr.NO_RELOAD:` 标记不需重载的代码(如已加载的 AI 模型或 InferenceClient),避免每次改动都重新加载模型。
Hugging Face 官方博客介绍视觉语言模型的构成、开源模型概览、选型与评测方式,并给出用 transformers 推理和用 TRL SFTTrainer 微调的完整代码。
DuckDB-NSQL-7B-v0.1 是 MotherDuck 和 Numbers Station 基于 Llama-2-7b 微调的 DuckDB SQL 专用 LLM,可将自然语言转为有效 DuckDB SQL。
Hugging Face 展示了如何用 🤗 Optimum Intel 将 SetFit 模型在 Intel Xeon CPU 上的推理速度提升 7.8 倍,通过 Intel Neural Compressor 对模型主体做 post-training static quantization(PTQ)即可实现。
Hugging Face 博客介绍嵌入向量的二值(binary)与标量(int8)量化方法,可在保持大部分检索性能的同时大幅降低内存、磁盘与成本。
Hugging Face 发布了一篇面向零基础读者的 Hugging Face Transformers 入门教程,通过在 Hugging Face Spaces 上部署 JupyterLab notebook 并运行 Microsoft 的 Phi-2 LLM 的完整示例,讲解 Transformers 库、Hub、Spaces 等核心概念。
Hugging Face 通过 Optimum Intel 集成 Intel OpenVINO,将 2.7B 参数的 Phi-2 模型做 4-bit 权重量化,在搭载 Core Ultra 7 155H 的中端笔记本上运行本地推理。
Hugging Face 官方博客介绍 GaLore 如何利用梯度的低秩结构和投影技术,把优化器状态显存降低超过 82.5%,从而在 NVIDIA RTX 4090 这类消费级 GPU 上训练最多 70 亿参数的 Llama 架构模型。
Hugging Face 官方博客展示了如何用 Optimum Intel、Intel Neural Compressor 和 IPEX 对 BGE small/base/large(45M/110M/355M 参数)做 int8 静态量化。
Hugging Face 展示了如何用 Optimum Habana 的自定义 GaudiTextGenerationPipeline 在 Intel® Gaudi® 2 上以几行代码运行 Llama 2(7b、13b、70b)文本生成,涵盖预处理与后处理。
Hugging Face 发布博客介绍 AI 生成内容的水印技术,涵盖生成时嵌入与生成后添加两种方式,并讨论开放与闭源水印的权衡。
Hugging Face 官方博客介绍如何用 Transformers 和 PEFT 库在 GPU 与 Cloud TPU 上对 Gemma 模型做参数高效微调(PEFT)。
Hugging Face 博客介绍 Matryoshka 嵌入模型的概念、训练方法与使用方式,并给出与普通嵌入模型的对比。
Hugging Face 博客展示了用开源 LLM(Mixtral-8x7B-Instruct-v0.1)生成合成数据、再用 AutoTrain 微调约 0.13B 参数 RoBERTa-base 的完整流程。
推荐理由:通过具体成本与碳排数字对比,读者可直接判断何时该用合成数据训练专用小模型而非调用 LLM API。
Hugging Face 发布用开源模型实现 Constitutional AI 的端到端配方,并开源基于 Slurm 集群、由 TGI 和 vLLM 支撑的可扩展合成数据生成工具 llm-swarm。
推荐理由:完整给出用开源模型做 Constitutional AI 的可复用配方与评测数据,便于迁移实践。
Hugging Face 博客给出 PatchTST 时序预测模型的上手示例,先在 Electricity 数据集上直接训练并评估,再用已训练模型对 ETTh1 数据集做零样本预测,随后进行线性探测与微调。
Hugging Face 在 Intel 第 4 代 Xeon 上通过 8bit/4bit 量化与投机解码(assisted generation)将 StarCoder-15B 推理加速 7 倍以上。
Hugging Face 发布博客介绍 ReAct 智能体的工作原理,展示如何用 LangChain 的 ChatHuggingFace 类构建智能体,并评测多个开源 LLM 作为通用推理智能体的表现。
Hugging Face 发布教程,演示如何用 🤗 Transformers 微调 MetaAI 的 Wav2Vec2-BERT 预训练 checkpoint facebook/w2v-bert-2.0,在低资源蒙古语 Common Voice 16.0 数据集(约 14 小时验证训练数据)上完成 ASR 任务。
Hugging Face 博客介绍如何用 ONNX Runtime 和 Olive 加速 SD Turbo 与 SDXL Turbo 推理,在所有测试的 batch size 与步数组合上 ONNX Runtime 都优于 PyTorch,SDXL Turbo 吞吐提升最高达 229%、SD Turbo 达 120%。