机器学习PAI理论上应是支持从hdfs上说数据呀, 好像并没有显式，怎么回事？
机器学习PAI理论上应是支持从hdfs上说数据呀, 好像并没有显式用--config=nohdfs，怎么回事？
展开
收起
2
条回答
写回答
写回答
-
公众号：网络技术联盟站，InfoQ签约作者，阿里云社区签约作者，华为云 云享专家，BOSS直聘 创作王者，腾讯课堂创作领航员，博客+论坛：https://www.wljslmz.cn，工程师导航：https://www.wljslmz.com阿里云机器学习PAI理论上是支持从HDFS上读取数据的。您可以在PAI Studio或者PAI CLI中使用HDFS的路径来指定数据路径。具体来说，您可以使用hdfs://开头的路径来指定HDFS上的数据，例如：
hdfs://your-hdfs-path/data.csv如果您遇到了无法从HDFS上读取数据的问题，可能是由于您没有正确配置HDFS的访问权限或者网络连接不稳定等原因导致的。您可以检查一下您的HDFS配置和网络连接是否正常，或者尝试使用其他的数据源来进行测试。
2023-04-25 22:01:12赞同 展开评论 打赏 -
编译开了的话，你在容器里另外配置好libhdfs.so的LD_LIBRARY_PATH的话应该就可以直接用dataset读，此回答整理自钉群“DeepRec用户群”
2023-04-25 19:24:31赞同 展开评论 打赏
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
人工智能平台 PAI（Platform for AI，原机器学习平台PAI）是面向开发者和企业的机器学习/深度学习工程平台，提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务，内置140+种优化算法，具备丰富的行业场景插件，为用户提供低门槛、高性能的云原生AI工程化能力。
热门讨论
热门文章
AI生成海报or人工手绘，哪个更戳你？
2050
P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
2590
为什么我的天池notebook中，无法创建notebook文件，也无法显示我的天池文档等内容。
1057
PAI做了线性回归的模型，预测结果后，回归模型评估的节点，结果R2的值是负的，我理解R2的取值范围?
435
灵积平台上，用通义千问的开源大模型接口响应非常慢
252
为什么我的DSW，文件区没有显示我的notebook内容，也没有显示我的天池文档等部分
514
通义灵码 idea版本的代码提示如何设置？
873
在api调用夸克搜索时，遇到权限不足问题
402
如何高效的往交互建模（dsw）上传较大的文件，有从阿里云盘中直接下载或类似的方法吗？
3948
机器学习PAI有没有类似colab这种免费的在线Notebook代码编辑运行环境啊？
489
展开全部
