机器学习PAI中workerqueue在自定义session下运行会卡主，可以帮忙看下吗？
机器学习PAI中workerqueue在自定义session下运行会卡主，但是用monitor session可以，我初始化过了iterator，可以帮忙看下吗？
写回答
-
公众号：网络技术联盟站，InfoQ签约作者，阿里云社区签约作者，华为云 云享专家，BOSS直聘 创作王者，腾讯课堂创作领航员，博客+论坛：https://www.wljslmz.cn，工程师导航：https://www.wljslmz.com如果您在阿里云机器学习PAI中使用WorkerQueue进行自定义Session的训练时出现卡住的情况，可以尝试以下几种方法：
-
检查代码：请检查您的代码是否有死循环或者阻塞操作等，这可能会导致WorkerQueue无法正常工作。
-
检查数据：请检查您的数据是否有缺失或者格式错误等，这可能会导致WorkerQueue无法正常读取数据。
-
检查初始化：请确保您已经正确初始化了所有必要的变量和迭代器等，否则可能会导致WorkerQueue无法正常工作。
如果您已经确认以上问题均不存在，但仍然遇到了卡住的情况，可以尝试使用MonitorSession进行训练，以便更好地排查问题。具体来说，您可以使用以下代码来创建MonitorSession：
with tf.train.MonitoredTrainingSession(...) as sess: # your training code here上述代码中，使用MonitoredTrainingSession代替普通的Session，并在其中设置一些参数，例如checkpoint_dir、hooks等。这样可以更好地监控训练过程，并及时发现并解决问题。
2023-04-25 22:27:43赞同 展开评论 打赏 -
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
人工智能平台 PAI（Platform for AI，原机器学习平台PAI）是面向开发者和企业的机器学习/深度学习工程平台，提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务，内置140+种优化算法，具备丰富的行业场景插件，为用户提供低门槛、高性能的云原生AI工程化能力。
