首页
学习
活动
专区
圈层
工具
发布
首页标签huggingface-transformers

#huggingface-transformers

“价格屠夫”的降维打击与自我进化的潘多拉魔盒:Gemini 4 Pro拆解——千万级上下文、多模态空间智能觉醒与谷歌DeepMind的“蜂群Agent”终极野心

jack.yang

在AI大模型的军备竞赛中,发布会通常是枯燥的PPT宣讲和精心剪辑的Demo。但2026年9月中旬,谷歌DeepMind用一种极具极客精神且充满攻击性的方式,给全...

6320

排坑记录:transformers 报错 ModuleNotFoundError: Could not import module 'SegformerIm

高老师

在 Linux 服务器(Debian 12 / 宝塔面板 Python 项目管理器)部署服装以图搜图服务时,执行服装语义分割与裁切接口 /api/search_...

8010

大模型核心原理深度分析:从Token转换到概率输出,完整理解Transformer运行机制22.5

未闻花名

很多人接触大模型、AI生成文本时,都有一个共同困惑:AI到底是怎么读懂人类文字,又精准输出通顺内容的?我们日常对话、文案生成、代码编写、问答交互,所有大模型能力...

19100

LLM 基础:不懂 Transformer 就搞 Agent?这份速成指南救你

怕浪猫

在上一章中,我们搭建好了 AI Agent 的开发环境、理清了智能体的架构与框架选型。从本章开始,我们正式进入AI Agent 底层核心技术栈实战学习。

18910

GGUF quantizer 独立指认 Transformer 三段式深度结构

山野大叔

我们刚刚完成了老旧 V100 上 bs=1 decode 的收官优化——Qwen3-8B TPOT 34.53 → 22.39 ms(1.54×),追回 lla...

13600

无库无捷径,PyTorch 手写完整 Transformer 大语言模型 LLM

小白学大数据

调用 from transformers import AutoModel 只要一行代码,但真正理解 Transformer 的人少之又少。多数开发者对 Att...

25910

2026全球AI大模型能力全景图谱:17家主流厂商万字深度实测与选型指南-OpenAI、Google、Anthropic、Meta、百度、阿里、腾讯、字节、智谱

jack.yang

站在2026年年中的节点回望,人工智能产业刚刚经历了一场人类科技史上最为惨烈也最为壮阔的洗牌期。如果说2023年是“百模大战”的草莽元年,2024年是应用落地的...

7.6K20

# CubeAttn-X:长程检索上为何反而比纯 Transformer 更强?

山野大叔

本文用一张架构对比图,讲清楚一件事:在大模型长程检索这件事上,混合架构(一半线性注意力 + 一半 Softmax)不仅更省内存,而且准确率更高——纯 Softm...

12901

DeepSeek-V3多头潜在注意力架构详解

用户11764306

在本系列的第一部分中,通过探索DeepSeek-V3的理论基础并实现关键配置元素(如旋转位置嵌入),为后续内容奠定了基础。该教程阐述了DeepSeek-V3如何...

47210

基于Transformer和自监督学习的食谱检索技术

用户11764306

在寻找烹饪创意时,人们常常从社交媒体和餐厅中获得灵感,保存喜欢的食物截图或照片。某机构已经构建了一项技术,让人们能够利用这些图像来查找对应的烹饪食谱。在2021...

15210

CubeAttn|一篇推翻线性注意力评测惯例的「反常识」发现:U 型失效、种子陷阱与瓶颈定位

山野大叔

       大模型的核心瓶颈之一是注意力机制的显存开销——标准 Transformer 要算一个 $L \times L$ 的大矩阵,序列越长越爆炸。

19810

Python用LLM词嵌入与Transformer自注意力机制在文本语义理解中的应用研究|附数据代码

拓端

摘要: 大语言模型的迅猛发展深刻改变了人机交互范式。本文聚焦于支撑其核心能力的底层技术:词嵌入与自注意力机制。研究从传统稀疏表示法的局限性出发,系统对比了Wor...

40210

Transformer架构:驱动AI革命的核心理念

用户11764306

当今最强大的AI工具——无论是能够总结文档、生成艺术作品、创作诗歌,还是预测极其复杂蛋白质折叠方式的工具——都依赖于“Transformer”架构。这种神经网络...

19310

transformer进阶之路:#2 工作原理详解

AI-Frontiers

原文链接:https://mp.weixin.qq.com/s/D3ztMx5HeGMD30PenmDizg 欢迎关注公zh: AI-Frontiers

25010

transformer进阶之路:#1 整体概述

AI-Frontiers

原文链接:https://mp.weixin.qq.com/s/R3BxCMu5CSFo_HPcVJTuOA 欢迎关注公gh: Al-Frontiers

27810

循环深度Transformer与MoE路由编码教程

用户11764306

在本教程中,探索OpenMythos的实现,这是对Claude Mythos架构的理论重构,通过迭代计算而非增加参数规模来实现更深层的推理。构建并分析使用GQA...

24710

利用Transformer提升商品检索效果

用户11764306

在今年的知识发现与数据挖掘国际会议(KDD)上,我们介绍了一种新的学习排序方法,该方法纳入了绝对反馈。它还使用了在自然语言处理中非常流行的Transformer...

16210
领券