数据集上传
简介
数据上传模块用于将工作流收集和处理后的图像和预测上传到DaoAI世界数据集。该模块方便用户将AI自动标注好的数据同步到DaoAI World平台,便于后续的数据管理和模型训练。通过配置上传参数,用户可以灵活控制上传频率和数据量,实现高效的数据存储和管理。
输入 / 输出
输入:图像 + 预测模型结果
输出:上传到指定UID的DaoAI World数据集
适用场景
需要训练新的模型时,将自动标注的数据上传到DaoAI World数据集。
需要更新模型逻辑时,将最新的数据集同步到DaoAI World数据集。
需要收集相机或视频流中的图像数据上传到DaoAI World数据集。
参数
参数 |
说明 |
默认值/ |
|---|---|---|
节点名称 |
步骤名称,用于标识该节点的唯一标识符 |
dataset_upload_1 |
备注 |
可选的备注信息,用于描述该步骤的用途 |
留空 |
输入图像 |
指定输入图像的来源,尽量保持为原始 |
|
目标项目 |
选择要上传到的DaoAI World数据集的UID,UID一般为url的第二个 |
|
预测显示 |
选择要上传的模型预测结果,通常选择检测模型的输出 |
detection_filter_1 predictions |
数据百分比 |
设置保存数据的百分比,范围0-100,随机上传百分比的数据来控制上传的数据量 |
100 |
每分钟使用限制 |
设置每分钟上传的最大图像数量,防止上传过快导致服务器压力过大 |
10 |
每小时使用限制 |
设置每小时上传的最大图像数量,防止上传过快导致服务器压力过大 |
100 |
每日使用限制 |
设置每日上传的最大图像数量,防止上传过快导致服务器压力过大 |
1000 |
使用配额名称 |
用于追踪使用配额的唯一标识符,保持默认即可 |
ggbond |
最大图像尺寸 |
设置上传图像的最大尺寸,超过该尺寸的图像将被缩放以节省存储空间 |
[1920,1080] |
压缩级别 |
设置图像压缩级别,范围1-100,值越大图像质量越高但文件越大 |
85 |
注册标签 |
给开发人员用来设置的标签,一般保持为空即可 |
留空 |
保留预测 |
是否将模型预测结果与图像一同保存,一般保持为True即可 |
True |
禁用接收器 |
布尔标志以禁用区块执行,保持默认False即可 |
False |
即发即忘 |
布尔标志用于多路复用执行,启用后区块不会等待上传完成再继续执行下游区块,保持默认True即可最大化执行效率 |
True |
标注批次前缀 |
用于为上传的图像分配批次名称的前缀,便于后续数据管理 |
auto_batch_ |
标注批次创建频率 |
设置创建新标注批次的频率,可选包括:从不(never),每天(daily),每周(weekly),每月(monthly) |
daily |
使用步骤
在工作流编辑器中添加本模块。
输入DaoAI数据集UID。
设置上传间隔,点击保存。
注意事项
配置完后,启用工作流开始数据上传。
如果不知道预测结果符不符合要求时,可以先点击右上角的
测试来用单张图像测试效果。图像会上传到DaoAI World数据集,方便查看效果。