训练任务无法实时输出日志信息

问题描述

仓库：https://openi.pcl.ac.cn/xiahb/torch_resnet
训练脚本：train.py
使用print输出信息，不会实时输出日志信息。
使用GPU,CPU都不会输出，任务名：xiahb202303101013879 这是一个CPU训练的，比较慢，10轮要60多小时。

任务类型（调试/训练/推理）

训练

任务名

这个是CPU训练的，一直不输出，换GPU也不输出。等到训练完成才能看到日志信息
xiahb202303101013879

日志说明或问题截图

期望的解决方案或建议

image.png

23 KiB

image.png

12 KiB

我也是遇到这个问题，启智集群不能实时输出日志，智算集群可以。希望能尽快解决。

确实，启智没有日志很难受，不能实时查看，只能用智算了

这个真的没办法，希望社区可以尽快解决

可以复现。启智集群GPU训练不能实时输出日志，智算集群GPU训练可以。

此issue将关闭，若有问题请重提issue。

Deleting a branch is permanent. It CANNOT be undone. Continue?

Dear OpenI User

Thank you for your continuous support to the Openl Qizhi Community AI Collaboration Platform. In order to protect your usage rights and ensure network security, we updated the Openl Qizhi Community AI Collaboration Platform Usage Agreement in January 2024. The updated agreement specifies that users are prohibited from using intranet penetration tools. After you click "Agree and continue", you can continue to use our services. Thank you for your cooperation and understanding.

For more agreement content, please refer to the《Openl Qizhi Community AI Collaboration Platform Usage Agreement》

#972 训练任务无法实时输出日志信息

问题描述

相关环境（GPU/NPU）

相关集群（启智/智算）

任务类型（调试/训练/推理）

任务名

日志说明或问题截图

期望的解决方案或建议