腾讯云开发者社区-腾讯云

开发者社区

文档建议反馈控制台

文章/答案/技术大牛

发布

综合排序丨最热优先丨最新优先

素材库过不了合规审计？我把 AI 训练素材迁进 Agent Bucket，用空间 + 元数据把溯源、撤回做成了自动流程

摘要:AI团队维护训练素材库，绕不开三个合规问题：素材溯源不到来源、授权撤回响应慢、审计材料凑不齐。我所在团队做AIGC应用（图像生成+视频理解方向），日常维护三类训练素材：图像素材：约12万张，分散在设计师本机、爬虫脚本归档目录、公版素材站下载视频素材：近4000段，剪辑师硬盘、项目素材盘、训练集群存储上各有一份文本语料：约60GB，运营从Notion抓的、内部wiki导出的、爬虫批量抓的2025年底的第一次季度审计，报告里有三条我印象最深：12万张图像里约23%无法溯源——找不到原始来源、上传者、授权时间有设计师离职半年六、审计成绩单：整改前后指标对比2026年9月底的第二次季度审计，直接拿数据对比：审计指标整改前整改后（AgentBucket）素材可溯源率77%99.7%（元数据强制录入，个别遗漏对象事后人工补齐）离职人员素材清理人工排查希望支持空间级开关训练场景的合规过滤SDK：L2-RETIRED这类标记目前要每个训练团队自己写过滤逻辑，如果SDK或官方提供现成的"合规过滤"封装，能省掉每家团队重复造轮子九、写在最后合规这件事，前期投入看起来大，但把溯源

行者全栈架构师

2026-09-14

2580

标签:

玩转 Agent Bucket

腾讯混元大模型

bing 每日一图 https://api.dujin.org/bing/1920.php bing图片rss https://cn.bing.com/HPImageArchive.aspx?idx=

2018-03-14

3K0

标签:

免费商用3D素材库推荐、Unity素材、UE素材、Godot素材、低多边形3D资源、CC0素材

免费商用3D素材库推荐、Unity素材、UE素材、Godot素材、低多边形3D资源、CC0素材做独立游戏最头疼的一件事，就是美术资源不够。今天分享一个真正免费商用、不用署名的3D素材库： https://quaternius.com/ 一、为什么强烈推荐这个网站这是一个专门面向独立游戏开发者的高质量3D素材站。很多素材站只做单一类型，但这个站几乎覆盖了完整游戏资产链。很多素材站只提供通用模型，而这里直接给了引擎适配版本。很多“免费素材”都有各种限制，而这个站完全没有。

代码简单说

2026-06-16

2.9K0

标签:

猜测163邮箱也是该号码‘、QQ号码支付宝溯源——转账——查找黑客信息 REG007网站： https://www.reg007.com/ 查询邮箱注册过的网站微博找回密码链接： https:// 0x03溯源结果结果 ? IP位于湖南长沙 163邮箱、QQ号码、微信号码手机号相关好友，母亲信息他的好友：张*，刘* 人物头像附件 ? ? ? ? ? ? ? 结束！！！

2020-08-21

2K0

标签:

溯源的思路看对方的目的是什么，就是最终目标是做什么。然后根据自己经验看看达到这个目标需要进行什么操作逆推回去。看看这些过程都会留下什么日志。

安恒网络空间安全讲武堂

2018-09-21

1.1K0

标签:

入侵溯源难点和云溯源体系建设

image.png ---- 3.高效安全溯源技术解决方案，溯源工具是空白。入侵溯源工具能力局限的本质问题：基于某一层入侵元素做为起始点的入侵行为分析逻辑都有被灵活多变的渗透测试技巧跳脱的机会，因为攻击动作是动态多向的，溯源工具是静态单向的。溯源体系建设应同溯源环节一样，以后置前。个人认为：溯源样本采样节点，应在OSI七层模型中的每一层数据传输环节，完成日志回传和记录动作。对溯源动作中常涉及的取证元素进行自动化关联，利用机器学习算法进行碰撞分析。云上入侵溯源体系建设，入侵溯源体系产品化实现已成重要趋势。

枪哥四海为家

2021-03-17

4.7K0

标签:

腾讯云开发者社区

Web 应用防火墙

centos入侵溯源

apache的日志默认路径是/var/log/httpd/ 或 /var/log/apache2

曲奇小点点

2024-08-19

8700

标签:

Python素材下载爬虫，ui素材下载爬取采集源码

Uimaker是为UI设计师提供学UI设计的专业UI平台,拥有UI教程、UI素材、ICON、图标设计UI、手机UI、ui设计师招聘、软件界面设计、后台界面、后台模版等相关内容,快来uimaker学UI设计 uimaker 爬取思路：第一步：或缺素材页码总页数第二步：爬取素材列表链接第三步：爬取素材详情 python爬取采集关键点： 1.页码总数格式化处理 replace函数和split函数 pagenum 运行效果完整源码： #uimaker素材获取 #20200310 by 微信：huguo00289 # -*- coding: UTF-8 -*- import requests,time,os from print(f'>>>获取素材成功！') #下载素材 def down(self,down_url,down_name): print("开始下载素材...")

2020-07-22

3K0

标签:

事件溯源模式

事件溯源模式具有以下优点：事件不可变，并且可使用只追加操作进行存储。用户界面、工作流或启动事件的进程可继续，处理事件的任务可在后台运行。事件溯源不需要直接更新数据存储中的对象，因而有助于防止并发更新造成冲突。但是，域模型必须仍然设计为避免可能导致不一致状态的请求。但是，事件溯源事件的级别通常非常低，可能需要生成特定的集成事件。通过执行响应事件的数据管理任务和具体化存储事件的视图，事件溯源通常与 CQRS 模式结合。即使事件溯源会最大程度降低数据更新冲突的可能性，应用程序仍必须能够处理由最终一致性和缺少事务引起的不一致性。尽管这不是事件溯源的主要特点，但却是通常的实施决策。何时使用此模式请在以下方案中使用此模式：要捕获数据中的意图、用途或原因。

只喝牛奶的杀手

2019-09-02

2.3K0

标签:

素材库组成原理

素材数据库组成原理组成原理本素材库由类型系统和标签系统组成，依赖fileSystem和mongodb这2个存储介质，同时需要nodejs和web进运算行处理与展示集成。本素材库希望利用fileSystem存储所有素材，利用mongoDB存储素材的索引，从而实现Everything这样的搜索引擎。毕竟素材讲究应景即可，不必非常真实。 size 素材的大小，通过体积范围来检索素材也很常用。缩略图图片素材，3D模型和特效材质都可以分配一个缩略图以供预览。缩略图和素材一一对应，但素材可以没有缩略图，缩略图的命名格式是在素材文件名前加点号，即“隐藏文件”。缩略图文件不参与mongodb的索引。

2021-08-10

2.5K0

标签:

云数据库 MongoDB