YOLOv13改进策略【注意力机制篇】| ECCV2024 AgentAttention 代理注意力,P 个代理打通 softmax 与线性
本文基于YOLOv13 官方仓库(iMoonLab/yolov13,ultralytics 8.3.63 fork)实测整理,Windows/CPU 全程可跑。Agent Attention(ECCV2024,Swin 原班人马)在 softmax 与线性注意力之间架桥:引入 P 个「代理 token」,注意力变成两跳 softmax(Q·(PK)T)·(PV)T。P 固定时复杂度 O(N·P),代理数趋近 N 退化为标准注意力、趋近 1 类似线性注意力。本文插在 v13n 层 8 之后。前言104 篇 EfficientAttention 用「两个小矩阵」把 QK^T 压线性,代价是 softmax 的稀疏选择性没了。AgentAttention 的方案更聪明:全图信息先汇总给 P 个「课代表」(代理 token),每个像素只问课代表——保住 softmax,又把 N² 压到 N·P。专栏目录:YOLOv13改进目录一览专栏地址:YOLOv13改进专栏——持续更新各方向即插即用改进

相关新闻

Mac端 VS Code 里 Live Server 不自动刷新?一份 settings.json 配置排查清单

Mac端 VS Code 里 Live Server 不自动刷新?一份 settings.json 配置排查清单

/* MD / 富文本中的 .toc(含博客园搬家等嵌套结构);.toc-box 在侧栏,不受影响 */#content_views .toc,/* 编辑器常在目录前后插入空 p(:empty 仍占 20px),一并去掉避免顶空隙 */#content_views.markdown_views > p:empty:has(+ .toc),#content_views.markdown_views …

2026/9/30 14:50:08 阅读更多 →
AI工程从零构建:手写内存池、校验FP16、解剖CUDA

AI工程从零构建:手写内存池、校验FP16、解剖CUDA

1. 这不是调包,是亲手把AI工程的骨架一节节接上“AI Engineering from Scratch”——看到这个标题,我第一反应不是兴奋,而是下意识摸了摸键盘右下角那块被磨得发亮的空格键。过去三年,我带过17个从零起步的工程师做AI项目&#xf…

2026/9/29 7:56:35 阅读更多 →
LangGraph 多智能体编排实战:状态机、断点续跑、人工介入,一次讲透

LangGraph 多智能体编排实战:状态机、断点续跑、人工介入,一次讲透

单 Agent 会遇到天花板:工具一多就乱选、长任务一断就从头再来。LangGraph 用「把流程画成状态机」的方式解决这些问题,这也是它成为 2026 年生产级 Agent 首选的原因。附完整可运行代码。 文章目录一、为什么不是 LangChain 而是 LangGraph二、环境与最…

2026/9/29 7:56:35 阅读更多 →

最新新闻

C++/MFC/MySQL网络对战游戏平台毕业设计:Socket通信与五子棋实现

C++/MFC/MySQL网络对战游戏平台毕业设计:Socket通信与五子棋实现

简介:这份资源是面向计算机软件专业本科毕业设计场景的《网络对战游戏平台系统设计》完整论文文档,适合正在准备毕设选题、需要参考同类系统实现思路的学生,以及想了解C网络编程与桌面应用开发的学习者。压缩包内共1个doc文件,约6…

2026/9/30 14:51:53 阅读更多 →
LangChain RAG 问答应用实战:从 PDF 索引到多轮对话调优

LangChain RAG 问答应用实战:从 PDF 索引到多轮对话调优

简介:这份PDF面向大模型与人工智能方向的学习者及面试准备者,聚焦基于langchain框架的RAG问答应用实战,帮助读者理解检索增强生成从数据准备到问答落地的完整链路。资源包内仅含1个PDF文件,约390KB,内容以图文与代码示…

2026/9/30 14:51:53 阅读更多 →
PyTorch PolynomialLR学习率调度:原理、参数详解与工程实践避坑指南

PyTorch PolynomialLR学习率调度:原理、参数详解与工程实践避坑指南

聊到深度学习训练里那个“最后一段路怎么走”,我最近几年最常写进代码的就是 PyTorch 自带的 PolynomialLR 。它其实很简单:用一条多项式曲线把学习率从初始值平滑地拉低,最后停在你指定的一个低位上。没有花哨的自动监控,也不需…

2026/9/30 14:51:53 阅读更多 →
VSCode Python开发环境配置:MS Python插件与避坑指南

VSCode Python开发环境配置:MS Python插件与避坑指南

简介:这份PDF资料面向使用VSCode进行Python开发的程序员,尤其是希望把编辑器打造成高效IDE的初学者与进阶者,系统梳理了微软官方MS Python插件及配套扩展的实用配置。内容围绕静态代码扫描、智能提示与自动补全、自动缩进、代码格式化、代码重…

2026/9/30 14:51:53 阅读更多 →
PolynomialLR学习率调度器全解析:原理、代码与调参技巧

PolynomialLR学习率调度器全解析:原理、代码与调参技巧

PolynomialLR 这个调度器,在 PyTorch 的学习率调整家族里属于“低调但好用”的那一类。相比 CosineAnnealingLR 的花哨、ReduceLROnPlateau 的智能、StepLR 的简单粗暴,PolynomialLR 走的是“一条曲线降到底”的路线:用多项式函数把学习率从初…

2026/9/30 14:51:53 阅读更多 →
小型校园网组网实验:子网划分、VLAN与单臂路由配置详解

小型校园网组网实验:子网划分、VLAN与单臂路由配置详解

简介:东北大学计算机网络课程的这份实验报告,围绕小型校园网的设计与组建,完整呈现了从需求分析到网络调试的实践流程,适合计算机网络专业学生及正在完成同类实验的初学者参考。压缩包内仅含1个doc文档,大小约1.21MB&a…

2026/9/30 14:50:50 阅读更多 →

日新闻

Base64 图片头部特征识别:从文件头到格式判断的完整指南

Base64 图片头部特征识别:从文件头到格式判断的完整指南

1. 项目概述:为什么说看懂 base64 图片头部是基本功这几年跟 base64 打交道的机会越来越多,后端接口返回图片、前端渲染验证码、小程序里存小图、还有一些老系统导出报表,动不动就给你一段长到怀疑人生的 base64 字符串。很多人拿到字符串就直…

2026/9/30 0:00:35 阅读更多 →
Java公交站牌广告管理系统:JSP+Servlet+MySQL实战落地指南

Java公交站牌广告管理系统:JSP+Servlet+MySQL实战落地指南

简介:本资源是一份面向Java初学者与课程设计学生的公交站牌广告灯箱管理系统毕业设计文档,聚焦城市公共广告资源信息化管理痛点,提供从需求分析到技术实现的完整方案。文档采用标准学术论文结构,含摘要、英文摘要、目录及五章正文…

2026/9/30 0:00:35 阅读更多 →
用 Redis Lua 构建大模型 API 多租户原子配额治理体系

用 Redis Lua 构建大模型 API 多租户原子配额治理体系

我去年年底接了一个内部 AI 平台的治理需求,背景很直接:公司把 DeepSeek、MiniMax 这类大模型 API 统一封装成内部网关,开放给几个业务团队用。结果第一个月账单出来,额度直接超了 4 倍。仔细查日志,发现原因并不复杂—…

2026/9/30 0:00:35 阅读更多 →

周新闻

如何划分训练/验证集:Spirula Studio五种eval_mode策略详解

如何划分训练/验证集:Spirula Studio五种eval_mode策略详解

如何划分训练/验证集:Spirula Studio五种eval_mode策略详解 【免费下载链接】spirula-studio Cross-vendor 3D Gaussian Splatting trainer - video to splat to mesh, Vulkan or CUDA. 项目地址: https://gitcode.com/GitHub_Trending/sp/spirula-studio Sp…

2026/9/30 13:14:22 阅读更多 →
SEO怎么推广速查手册新手避坑实战指南

SEO怎么推广速查手册新手避坑实战指南

SEO怎么推广速查手册新手避坑实战指南 模板网站太丑不够用?别急着加滤镜,那是治标不治本。很多老板盯着后台流量掉得眼红,却还在纠结首页Banner的圆角是不是3像素。这就像穿着西装去挖土,姿势不对,努力白费。我整理这份 速查手册…

2026/9/29 16:41:41 阅读更多 →
FireRed-OpenStoryline少样本仿写深度解析:AI Agent如何复刻你的独特文案风格与节奏

FireRed-OpenStoryline少样本仿写深度解析:AI Agent如何复刻你的独特文案风格与节奏

FireRed-OpenStoryline少样本仿写深度解析:AI Agent如何复刻你的独特文案风格与节奏 【免费下载链接】FireRed-OpenStoryline FireRed-OpenStoryline is an AI video editing agent that transforms manual editing into intention-driven directing through natural language …

2026/9/30 13:14:49 阅读更多 →

月新闻

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能

持续集成 流水线自动化与 声明式交付 实践:原型怎样变成可用功能分类:[AI/大模型]细分主题:AI 增强型 CI/CD 流水线自动化与 GitOps 实践:Agent 工作流、工具调用与任务拆解:从原型到生产的验收清单很多团队在尝试用大…

2026/9/29 19:29:29 阅读更多 →
容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场

容器编排 生产环境运维与排障实战:复盘记录怎样真正派上用场分类:[工程技术]细分主题:Kubernetes 生产环境运维与排障实战:可复制的项目复盘模板与决策记录大部分团队的事故复盘报告,最后都变成了躺在 Confluence 或钉…

2026/9/29 5:58:00 阅读更多 →
容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步

容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步

容器 容器化技术与镜像安全管理:核心链路应该先拆哪一步分类:[工程技术]细分主题:Docker 容器化技术与镜像安全管理:核心链路的逐步实现与关键代码取舍面对一个积累了五六年历史包袱的单体架构应用(包含 Web 接口、后台…

2026/9/29 3:55:56 阅读更多 →