dgp:TRI ML数据集治理策略 源码

TRI数据集治理政策 为了确保在TRI内生成和使用的所有ML数据集和模型的可追溯性,可重复性和标准化,我们开发了数据集管理政策(DGP),该数据集对所有TRI的自动驾驶汽车(AV)数据集的架构和维护进行了编码。 成分 :基于的模式,用于原始数据,注释和数据集管理。 :通用PyTorch DatasetClass,用于加载所有符合DGP的数据集。 :基于Web的简单可视化工具,用于查看注释。 :用于处理DGP数据集的主CLI。 入门 入门非常简单,只需使用相关的数据集JSON,原始数据传感器名称,注释类型和拆分信息来初始化数据集类。 下面,我们展示了一些初始化Pytorch数据集以从2