#276 【数据集】建议放宽数据集的上传,考虑百度云之类的云盘转存和全局数据集

Closed
created 1 year ago by eatcosmos · 1 comments
eatcosmos commented 1 year ago
<!-- 为了更有效地识别与解决您的问题,请尽可能的补充如下信息 --> ### 问题描述 数据集上传的主要问题是速度慢,经常上传到99%,然后挂了。 ### 相关环境(GPU/NPU) ### 相关集群(启智/智算) ### 任务类型(调试/训练/推理) ### 任务名 ### 日志说明或问题截图 ### 期望的解决方案或建议 1. 为了节省空间:重复的数据集尽量只保持一份。 1. 为了提高速度:建议启智可以直接从百度云下载数据集,因为如果百度云开了超级会员,速度还是挺快的。所以如果用户先传到百度云,然后启智再去百度云会不会更快? 1. 数据集管理:正式的数据集尽量和数据集的官方来源保持一致,比如mnist避免用户上传各种版本的同一个数据集,不然太混乱了。 1. 数据集公开:建议统一审核公开的数据集,尽量使公开的数据集有使用价值,不然别人根本没办法使用公开的数据集,这样依赖公开了也等于没公开。
tanglj was assigned by zeizei 1 year ago
liuzx commented 5 months ago
Collaborator
此issue将关闭,若有问题请重提issue。
liuzx closed this issue 5 months ago
Sign in to join this conversation.
No Milestone
No Assignees
2 Participants
Notifications
Due Date

No due date set.

Dependencies

This issue currently doesn't have any dependencies.

Loading…
There is no content yet.