机器学习PAI理论上应是支持从hdfs上说数据呀, 好像并没有显式，怎么回事？
机器学习PAI理论上应是支持从hdfs上说数据呀, 好像并没有显式用--config=nohdfs，怎么回事？
展开
收起
2
条回答
写回答
写回答
-
公众号：网络技术联盟站，InfoQ签约作者，阿里云社区签约作者，华为云 云享专家，BOSS直聘 创作王者，腾讯课堂创作领航员，博客+论坛：https://www.wljslmz.cn，工程师导航：https://www.wljslmz.com阿里云机器学习PAI理论上是支持从HDFS上读取数据的。您可以在PAI Studio或者PAI CLI中使用HDFS的路径来指定数据路径。具体来说，您可以使用hdfs://开头的路径来指定HDFS上的数据，例如：
hdfs://your-hdfs-path/data.csv如果您遇到了无法从HDFS上读取数据的问题，可能是由于您没有正确配置HDFS的访问权限或者网络连接不稳定等原因导致的。您可以检查一下您的HDFS配置和网络连接是否正常，或者尝试使用其他的数据源来进行测试。
2023-04-25 22:01:12赞同 展开评论 打赏 -
编译开了的话，你在容器里另外配置好libhdfs.so的LD_LIBRARY_PATH的话应该就可以直接用dataset读，此回答整理自钉群“DeepRec用户群”
2023-04-25 19:24:31赞同 展开评论 打赏
问答分类：
相关产品：
版权声明：本文内容由阿里云实名注册用户自发贡献，版权归原作者所有，阿里云开发者社区不拥有其著作权，亦不承担相应法律责任。具体规则请查看《阿里云开发者社区用户服务协议》和《阿里云开发者社区知识产权保护指引》。如果您发现本社区中有涉嫌抄袭的内容，填写侵权投诉表单进行举报，一经查实，本社区将立刻删除涉嫌侵权内容。
相关问答
人工智能平台 PAI（Platform for AI，原机器学习平台PAI）是面向开发者和企业的机器学习/深度学习工程平台，提供包含数据标注、模型构建、模型训练、模型部署、推理优化在内的AI开发全链路服务，内置140+种优化算法，具备丰富的行业场景插件，为用户提供低门槛、高性能的云原生AI工程化能力。
热门讨论
热门文章
AI生成海报or人工手绘，哪个更戳你？
1273
P人出游，你是否需要一个懂你更懂规划的AI导游呢？来搭建专属文旅问答机器人吧
1975
为什么我的天池notebook中，无法创建notebook文件，也无法显示我的天池文档等内容。
1012
在api调用夸克搜索时，遇到权限不足问题
374
机器学习PAI有没有类似colab这种免费的在线Notebook代码编辑运行环境啊？
464
通义灵码 idea版本的代码提示如何设置？
846
机器学习PAI英伟达这个v100和4090哪个强？做comfyui生视频用
199
PAI做了线性回归的模型，预测结果后，回归模型评估的节点，结果R2的值是负的，我理解R2的取值范围?
406
通义千问 HTTP请求多轮对话的方式是什么格式的，文档里的没法实现，需要帮助，谢谢
922
为什么我的DSW，文件区没有显示我的notebook内容，也没有显示我的天池文档等部分
490
展开全部
【玩转数据系列九】机器学习为您解密雾霾形成原因
49091
【玩转数据系列十】利用阿里云机器学习在深度学习框架下实现智能图片分类
49611
【玩转数据系列二】机器学习应用没那么难，这次教你玩心脏病预测
27193
【玩转数据系列一】人口普查统计案例
16354
【玩转数据系列四】听说啤酒和尿布很配？本期教你用协同过滤做推荐
14750
基于协同过滤算法的推荐
10106
【教程】5分钟在PAI算法市场发布自定义算法
10353
【玩转数据系列十六】机器学习PAI通过声音分辨男女（含语音特征提取相关数据和代码）
8202
推荐系统之冷启动问题
5738
【玩转数据系列十七】机器学习实现双十一购物清单的自动商品标签归类
3889
展开全部
