人工智能平台PAI问题之提交有问题如何解决

本文涉及的产品
模型训练 PAI-DLC,100CU*H 3个月
模型在线服务 PAI-EAS,A10/V100等 500元 1个月
交互式建模 PAI-DSW,每月250计算时 3个月
简介: 人工智能平台PAI是指阿里云提供的机器学习平台服务,支持建模、训练和部署机器学习模型;本合集将介绍机器学习PAI的功能和操作流程,以及在使用过程中遇到的问题和解决方案。

问题一:机器学习PAI中jdk是一致的java的jar包提交就没问题python脚本为什么提交就有那个问题?


问题1:机器学习PAI中jdk是一致的java的jar包提交就没问题python脚本为什么提交就有那个问题?



问题2:这个两边指的是?我们用的是Flink Native Kubernetes模式,把容器内8081端口映射到宿主机8081端口。然后通过命令行提交到宿主机8081端口的,宿主机也需要有java环境,容器内也有。确实是两个Jdk,不过版本和路径在容器内和宿主机上都是一致的。


 

我好像理解了,你说的应该是启动Flink的jdk版本和Python启动时候获取到的版本不一致。我排查一下,那个问题解决了,是提交任务的宿主机上scala版本和镜像里面scala版本不一致导致的。


参考回答:

针对问题一的回答:JAVAHOMEjdkidpythonjavaJAVAHOME是一致的么品七,这个错误一般都是jdk不一致,生成id不一致引起的品七,python脚本起的java时在JAVA_HOME是一致的么品七,这个错误一般都是jdk不一致,生成id不一致引起的品七,python脚本起的java时在JAVA_HOME里边的,两边对一下。

针对问题二的回答:提交任务的宿主机上scala版本和镜像里面scala版本不一致导致的。


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/507400?spm=5176.8068049.0.0.77566d1989YhJO


问题二:机器学习PAI一直报错可能是什么原因?


机器学习PAI一直报错可能是什么原因? py脚本任务,在物理机上配置的环境可以提交上去成功运行。迁移到k8s上就一直报这个错


 

镜像里面我装了flink1.13.2,python3和pyflink 1.5.5包,alink jar也放到flink lib目录下面了,flinkconf文件也配置了parent-first。可能是什么原因,镜像里面jdk是oracle jdk1.8


参考回答:

两边的jdk要一致


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/507399?spm=5176.8068049.0.0.77566d1989YhJO


问题三:请问机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中请求EAS服务客户端每一次调用都需要初始化,还是只需要初始化一次呢


请问机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中请求EAS服务客户端每一次调用都需要初始化,还是只需要初始化一次呢



参考回答:

只需要一次


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/507358?spm=5176.8068049.0.0.77566d1989YhJO


问题四:机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中如果买了深度学习组件后付费的V100卡,是p100这些都不能使用吗,实际使用的时候组件这里有很多选项,不知道和购买时的选择是什么关系


机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中如果买了深度学习组件后付费的V100卡,是p100这些都不能使用吗,实际使用的时候组件这里有很多选项,不知道和购买时的选择是什么关系

  实际训练用的


是dlc资源吧?那maxcompute的gpu还要开吗,怎么样区分组件用的是dlc资源还是mc资源啊,我截图就是这个组件,没有看到可选mc呢


参考回答:

两个是分开的。您第一个图里选择的实际是DLC的资源。第二个图是maxcompute的资源。和您选择的训练组件有关系。从您的截图看,这个组件只使用了dlc。maxcompute gpu可以用到的时候再开,文档这块可以看到


 

嗯,您截图这个组件只能用DLC


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/507357?spm=5176.8068049.0.0.77566d1989YhJO


问题五:机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中图像分类任务必须要开通DLC和gpu才能体验吗


机器学习PAI、PAI-Designer、PAI-DSW、PAI-EAS中图像分类任务必须要开通DLC和gpu才能体验吗


 

是必选的吗,没有红色星号呢,如果用自己的数据集做训练,iTAG也是必须要开通使用的吗,只要以要求的格式把数据存在oss上就可以了吧?


参考回答:

嗯,是的哈,这个是下拉选择,嗯,格式对就可以


关于本问题的更多回答可点击原文查看:https://developer.aliyun.com/ask/507356?spm=5176.8068049.0.0.77566d1989YhJO

相关实践学习
使用PAI-EAS一键部署ChatGLM及LangChain应用
本场景中主要介绍如何使用模型在线服务(PAI-EAS)部署ChatGLM的AI-Web应用以及启动WebUI进行模型推理,并通过LangChain集成自己的业务数据。
机器学习概览及常见算法
机器学习(Machine Learning, ML)是人工智能的核心,专门研究计算机怎样模拟或实现人类的学习行为,以获取新的知识或技能,重新组织已有的知识结构使之不断改善自身的性能,它是使计算机具有智能的根本途径,其应用遍及人工智能的各个领域。 本课程将带你入门机器学习,掌握机器学习的概念和常用的算法。
相关文章
|
5天前
|
机器学习/深度学习 人工智能 算法
阿里云人工智能平台图像视频特征提取
本文介绍了图像与视频特征提取技术在人工智能和计算机视觉中的应用,涵盖图像质量评分、人脸属性分析、年龄分析、图像多标签打标、图文视频动态分类打标、视频质量评分及视频分类打标。通过深度学习模型如CNN和RNN,这些技术能从海量数据中挖掘有价值信息,为图像分类、目标检测、视频推荐等场景提供支持,提升分析精度与效率。
49 9
|
17天前
|
数据采集 人工智能 智能设计
首个!阿里云人工智能平台率先通过国际标准认证
首个!阿里云人工智能平台率先通过国际标准认证
68 7
|
14天前
|
机器学习/深度学习 人工智能 算法
人工智能平台年度技术趋势
阿里云智能集团研究员林伟在年度技术趋势演讲中,分享了AI平台的五大方面进展。首先,他介绍了大规模语言模型(LLM)训练中的挑战与解决方案,包括高效故障诊断和快速恢复机制。其次,探讨了AI应用和服务的普及化,强调通过优化调度降低成本,使AI真正惠及大众。第三,提出了GreenAI理念,旨在提高AI工程效率,减少能源消耗。第四,讨论了企业级能力,确保数据和模型的安全性,并推出硬件到软件的全面安全方案。最后,介绍了整合多项核心技术的Pai Prime框架,展示了阿里云在自主可控AI核心框架下的整体布局和发展方向。
|
4月前
|
人工智能 JSON 数据格式
RAG+Agent人工智能平台:RAGflow实现GraphRA知识库问答,打造极致多模态问答与AI编排流体验
【9月更文挑战第6天】RAG+Agent人工智能平台:RAGflow实现GraphRA知识库问答,打造极致多模态问答与AI编排流体验
RAG+Agent人工智能平台:RAGflow实现GraphRA知识库问答,打造极致多模态问答与AI编排流体验
|
4月前
|
机器学习/深度学习 人工智能 算法
【新闻文本分类识别系统】Python+卷积神经网络算法+人工智能+深度学习+计算机毕设项目+Django网页界面平台
文本分类识别系统。本系统使用Python作为主要开发语言,首先收集了10种中文文本数据集("体育类", "财经类", "房产类", "家居类", "教育类", "科技类", "时尚类", "时政类", "游戏类", "娱乐类"),然后基于TensorFlow搭建CNN卷积神经网络算法模型。通过对数据集进行多轮迭代训练,最后得到一个识别精度较高的模型,并保存为本地的h5格式。然后使用Django开发Web网页端操作界面,实现用户上传一段文本识别其所属的类别。
132 1
【新闻文本分类识别系统】Python+卷积神经网络算法+人工智能+深度学习+计算机毕设项目+Django网页界面平台
|
4月前
|
机器学习/深度学习 人工智能 算法
【果蔬识别系统】Python+卷积神经网络算法+人工智能+深度学习+计算机毕设项目+Django网页界面平台
【果蔬识别系统】Python+卷积神经网络算法+人工智能+深度学习+计算机毕设项目+Django网页界面平台。果蔬识别系统,本系统使用Python作为主要开发语言,通过收集了12种常见的水果和蔬菜('土豆', '圣女果', '大白菜', '大葱', '梨', '胡萝卜', '芒果', '苹果', '西红柿', '韭菜', '香蕉', '黄瓜'),然后基于TensorFlow库搭建CNN卷积神经网络算法模型,然后对数据集进行训练,最后得到一个识别精度较高的算法模型,然后将其保存为h5格式的本地文件方便后期调用。再使用Django框架搭建Web网页平台操作界面,实现用户上传一张果蔬图片识别其名称。
77 0
【果蔬识别系统】Python+卷积神经网络算法+人工智能+深度学习+计算机毕设项目+Django网页界面平台
|
4月前
|
人工智能 自然语言处理 前端开发
基于ChatGPT开发人工智能服务平台
### 简介 ChatGPT 初期作为问答机器人,现已拓展出多种功能,如模拟面试及智能客服等。模拟面试功能涵盖个性化问题生成、实时反馈等;智能客服则提供全天候支持、多渠道服务等功能。借助人工智能技术,这些应用能显著提升面试准备效果及客户服务效率。 ### 智能平台的使用价值 通过自动化流程,帮助用户提升面试准备效果及提高客户服务效率。 ### 实现思路 1. **需求功能设计**:提问与接收回复。 2. **技术架构设计**:搭建整体框架。 3. **技术选型**:示例采用 `Flask + Template + HTML/CSS`。 4. **技术实现**:前端界面与后端服务实现。
|
8月前
|
机器学习/深度学习 存储 搜索推荐
利用机器学习算法改善电商推荐系统的效率
电商行业日益竞争激烈,提升用户体验成为关键。本文将探讨如何利用机器学习算法优化电商推荐系统,通过分析用户行为数据和商品信息,实现个性化推荐,从而提高推荐效率和准确性。
263 14
|
8月前
|
机器学习/深度学习 算法 数据可视化
实现机器学习算法时,特征选择是非常重要的一步,你有哪些推荐的方法?
实现机器学习算法时,特征选择是非常重要的一步,你有哪些推荐的方法?
151 1
|
8月前
|
机器学习/深度学习 算法 搜索推荐
Machine Learning机器学习之决策树算法 Decision Tree(附Python代码)
Machine Learning机器学习之决策树算法 Decision Tree(附Python代码)

相关产品

  • 人工智能平台 PAI