|
8月前
|
传感器 机器学习/深度学习 人工智能
|

数据让农业更聪明——用大数据激活田间地头

数据让农业更聪明——用大数据激活田间地头

127 2
|
8月前
|
JSON API 开发者
|

shopee商品列表API接口获取步骤

虾皮(Shopee)商品列表 API 接口用于获取平台商品信息,支持按店铺 ID、类目、关键词等筛选条件查询商品数据,包括商品基本信息、图片、描述等。接口具备灵活性、数据丰富及分页机制等特点,满足电商数据分析与管理需求。示例代码展示了通过 Python 请求 API 获取某店铺商品列表的过程,包含请求头设置、参数定义及异常处理等功能,便于开发者快速上手使用。

228 4
|
8月前
|
机器学习/深度学习 开发框架 .NET
|

强化学习:Markov决策过程(MDP)——手把手教你入门强化学习(二)

本文是“手把手教你入门强化学习”系列的第二篇,重点讲解了强化学习的核心数学模型——Markov决策过程(MDP)。文章从马尔可夫性质出发,逐步引入马尔可夫过程、马尔可夫奖励过程,最终深入到马尔可夫决策过程,详细解析了状态转移、奖励机制、价值函数及贝尔曼方程等关键概念。同时,文中还介绍了策略函数、最优价值函数等内容,并指出求解强化学习问题的关键在于寻找最优策略。通过理论推导与实践结合的方式,帮助读者更好地理解强化学习基础原理。

287 4
来自: 人工智能平台PAI  版块
|
8月前
|
存储 消息中间件 Kafka
|

官宣 | Fluss 0.6 发布公告

Fluss社区宣布0.6.0版本正式发布,历经3个多月开发,45位贡献者完成200+代码提交。新版本亮点包括:列压缩技术降低6倍存储空间、MergeEngine支持灵活主键合并策略、Prefix Lookup实现Delta Join功能。这些特性增强了Fluss的功能和性能,标志着其在构建下一代分析型流存储系统上的重要进展。

331 1
来自: 实时计算 Flink  版块
|
8月前
|
算法 数据安全/隐私保护
|

泵浦光与斯托克斯光相遇耦合效应的matlab模拟与仿真

本程序使用MATLAB2022A模拟泵浦光与斯托克斯光在非线性光学材料中的耦合效应,基于拉曼散射原理。通过非线性薛定谔方程描述两者相互作用,实现能量转换与放大。核心代码展示了时间与距离上的光强变化,最终生成动态图像展示耦合过程。完整程序无水印,运行结果如附图所示。该仿真有助于理解非线性光学现象及其应用。

180 14
|
8月前
|
资源调度 算法 数据可视化
|

基于IEKF迭代扩展卡尔曼滤波算法的数据跟踪matlab仿真,对比EKF和UKF

本项目基于MATLAB2022A实现IEKF迭代扩展卡尔曼滤波算法的数据跟踪仿真,对比EKF和UKF的性能。通过仿真输出误差收敛曲线和误差协方差收敛曲线,展示三种滤波器的精度差异。核心程序包括数据处理、误差计算及可视化展示。IEKF通过多次迭代线性化过程,增强非线性处理能力;UKF避免线性化,使用sigma点直接处理非线性问题;EKF则通过一次线性化简化处理。

247 14
|
8月前
|
Linux 虚拟化 Windows
|

VMware隐藏黑科技!CentOS安装这个神器效率翻倍 文件互传竟比U盘还快?

### 安装VMtools的作用及步骤 安装VMtools可以实现Windows与CentOS之间的字符串和命令粘贴、文件夹共享等操作。在CentOS中,通过VMware菜单栏选择“VMware Tools”,将下载的压缩包拷贝到`/opt`目录并解压。接着进入终端,使用`./vmware-install.pl`命令完成安装。安装后重启系统,即可实现Windows与CentOS之间的字符和文件共享。具体步骤包括解压文件、启动命令行终端、安装VMtools以及配置文件共享。

278 16
|
8月前
|
数据采集 监控 数据挖掘
|

京东、淘宝、义乌购等电商平台的Api数据分析

京东、淘宝、义乌购等电商平台的数据分析涵盖数据收集、预处理、分析及应用优化。数据来源包括数据库、日志文件和网络爬虫,通过SQL查询、日志解析和爬虫抓取获取数据。预处理阶段进行数据清洗、缺失值处理和异常值检测。分析方法包括描述性分析、对比分析、漏斗分析等,关注成交金额、转化率等关键指标。最终基于分析结果制定策略并评估效果,持续优化平台运营。

615 2
|
8月前
|
人工智能 分布式计算 DataWorks
|

大数据& AI 产品月刊【2025年1、2月】

大数据& AI 产品技术月刊【2025年1、2月】,涵盖双月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据& AI 方面最新动态。

296 5
|
8月前
|
缓存 安全 数据处理
|

Objective-C开发:从HTTP请求到文件存储的实战

Objective-C开发:从HTTP请求到文件存储的实战

178 2
|
8月前
|
JSON API 开发者
|

1688 快递费用 API 接口的技术剖析与应用

1688快递费用API接口为企业和开发者提供自动化、高效化的快递费用查询服务,打破人工查询的繁琐局面。通过输入寄件与收件地址、商品重量、体积及选择快递公司等信息,接口精准计算费用并返回结果,支持中通、圆通等主流快递。输出内容包括快递费用、预估时效及附加费说明,助力电商精细化运营。Python示例代码展示了如何使用requests库发起POST请求并解析响应数据,实现费用查询自动化。

419 10
|
8月前
|
算法 数据处理 数据安全/隐私保护
|

分别通过LS和RML进行模型参数辨识matlab仿真

本程序通过最小二乘法(LS)和递归最大似然估计(RML)进行模型参数辨识,并在MATLAB2022A中仿真。仿真输出包括参数辨识误差及收敛值。程序展示了两种方法的参数估计值及其误差收敛情况,适用于控制系统设计与分析。最小二乘法适合离线批量处理,而RML则适用于实时在线处理。核心代码实现了LS辨识,并绘制了参数估计值和误差变化图。

169 0
|
9月前
|
人工智能 自然语言处理 安全
|

一套优秀的反向海淘独立站系统必备的10大特质

这套反向海淘独立站系统具备十大特质:1. 商品聚合与自动化采购,无缝对接国内电商平台;2. 多语言本地化体验,适应全球用户;3. 智能物流与清关,优化运输路径;4. 多币种支付保障资金安全;5. 合规与税务自动化处理;6. AI导购提升用户体验;7. 营销工具促进增长;8. 自动化售后与纠纷处理;9. 数据驱动运营决策;10. 微服务架构确保扩展性。成功案例如Superbuy和Panli展示了其高效性和市场竞争力。

154 0
|
9月前
|
分布式计算 Hadoop 大数据
|

从Excel到Hadoop:数据规模的进化之路

从Excel到Hadoop:数据规模的进化之路

173 10
|
9月前
|
JSON API 开发者
|

搜款网VVIC商品详情数据接口(搜款网API系列)

搜款网(VVIC)作为专业服装批发平台,提供商品详情数据接口,帮助开发者快速获取商品描述、价格、尺码、颜色、库存等信息。使用该接口需申请开发者权限并遵守平台规定。请求方式为HTTP GET,响应格式为JSON。Python示例代码展示了如何通过API获取商品详情。使用前务必确保合法授权,并注意错误处理和性能优化。

223 1
|
9月前
|
数据采集 搜索推荐 API
|

短效HTTP代理IP的优点表现在哪些方面?

短效HTTP代理IP凭借其独特优势,在数字化时代备受青睐。它能满足多种业务场景,如广告推广、数据采集等,支持多个API参数,提供高效稳定的个性化定制服务。短效代理IP用量大、更换频繁,确保正常访问行为,提升业务执行效率。选择高质量的HTTP代理服务商,能保证更好的稳定性和请求速度,满足用户的核心需求。

161 4
来自: 大数据计算 MaxCompute  版块
|
9月前
|
数据采集 Web App开发 存储
|

打造高效的Web Scraper:Python与Selenium的完美结合

本文介绍如何使用Python结合Selenium,通过代理IP、设置Cookie和User-Agent抓取BOSS直聘的招聘信息,包括公司名称、岗位、要求和薪资。这些数据可用于行业趋势、人才需求、企业动态及区域经济分析,为求职者、企业和分析师提供宝贵信息。文中详细说明了环境准备、代理配置、登录操作及数据抓取步骤,并提醒注意反爬虫机制和验证码处理等问题。

211 1
|
9月前
|
安全
|

静态代理IP对网站性能的影响分析

在信息化时代,网络不可或缺。静态代理IP通过增强网络稳定性、确保连接可靠性和提高用户工作效率,显著提升网站访问速度和性能。91HTTP作为高质量代理IP服务商,提供更快的代理连接速度,助力用户高效获取信息。

116 3
来自: 大数据计算 MaxCompute  版块
|
9月前
|
数据采集 存储 人工智能
|

当数据遇见智能:这对"饭搭子"如何炒出商业价值的满汉全席

当数据遇见智能:这对"饭搭子"如何炒出商业价值的满汉全席

188 94
|
9月前
|
机器学习/深度学习 自然语言处理 并行计算
|

Transformer 学习笔记 | Seq2Seq,Encoder-Decoder,分词器tokenizer,attention,词嵌入

本文记录了学习Transformer过程中的笔记,介绍了Seq2Seq模型及其编码器-解码器结构。Seq2Seq模型通过将输入序列转化为上下文向量,再由解码器生成输出序列,适用于机器翻译、对话系统等任务。文章详细探讨了Seq2Seq的优势与局限,如信息压缩导致的细节丢失和短期记忆限制,并引入注意力机制来解决长序列处理问题。此外,还介绍了分词器(tokenizer)的工作原理及不同类型分词器的特点,以及词嵌入和Transformer架构的基础知识。文中包含大量图表和实例,帮助理解复杂的概念。参考资料来自多个权威来源,确保内容的准确性和全面性。

697 9
|
9月前
|
机器学习/深度学习 存储 人工智能
|

SRMT:一种融合共享记忆与稀疏注意力的多智能体强化学习框架

自反射记忆Transformer (SRMT) 是一种面向多智能体系统的记忆增强型Transformer模型,通过共享循环记忆结构和自注意力机制,优化多智能体间的协同效率与决策能力。SRMT在复杂动态环境中展现出显著优势,特别是在路径规划等任务中。实验结果表明,SRMT在记忆维持、协同成功率及策略收敛速度等方面全面超越传统模型,具备广泛的应用前景。

385 11
|
9月前
|
算法 测试技术
|

EvalPlanner:基于“计划-执行”双阶段的大语言模型评估框架

EvalPlanner是一种创新的大语言模型(LLM)评估算法,采用计划-执行双阶段范式,生成无约束的评估计划并执行,从而提升评估的系统性和可靠性。该系统包含评估计划、计划执行模块和最终判决三个核心组件,通过自训练循环优化计划和执行过程。EvalPlanner在多个基准测试中表现出色,特别是在数据效率和泛化能力方面,为构建高效、稳健的LLM评估模型提供了新方向。

389 13
|
10月前
|
分布式计算 资源调度 大数据
|

Spark 如何保证宕机迅速恢复?

Spark 通过多种机制确保节点宕机时迅速恢复,主要包括:1. RDD 的 Lineage 机制,记录数据生成路径以便重计算;2. 检查点机制,持久化中间结果减少重算开销;3. 任务调度和资源管理,自动重新调度失败任务;4. 数据本地性,优先调度到数据所在节点;5. 持久化机制,将 RDD 持久化到内存或磁盘。这些机制共同保证了大数据处理的高可用性和可靠性。

229 9
|
10月前
|
编解码 安全 网络安全
|

指纹浏览器中HTTP代理IP的重要性及使用原因

随着数字化发展,网络安全和隐私保护成为核心需求,指纹浏览器应运而生。它通过客户端信息唯一标识用户身份。搭配HTTP代理IP可增强安全性,具体表现为:1. 保护用户地址;2. 提高信息安全;3. 防止指纹检测;4. 增强网络安全。HTTP代理以其稳定性、安全性,在网络营销等领域发挥重要作用,二者结合为用户提供更强的隐私和安全保护。

330 34
来自: 大数据计算 MaxCompute  版块
|
10月前
|

时间序列平稳性的双重假设检验:KPSS与ADF方法比较研究

时间序列分析中,确定序列的平稳性至关重要。本文介绍如何使用KPSS检验和Dickey-Fuller检验验证序列平稳性。KPSS假设数据非平稳,而Dickey-Fuller假设数据平稳。通过构造平稳(白噪声)和非平稳(随机游走)序列并进行检验,展示了两种方法的应用。KPSS适用于检测围绕趋势的平稳性,Dickey-Fuller则用于检验单位根。建议同时使用两者以确保结论可靠。

358 4
|
10月前
|
SQL 数据可视化 大数据
|

从数据小白到大数据达人:一步步成为数据分析专家

从数据小白到大数据达人:一步步成为数据分析专家

541 92
|
10月前
|
数据可视化 算法 数据挖掘
|

Python时间序列分析工具Aeon使用指南

**Aeon** 是一个遵循 scikit-learn API 风格的开源 Python 库,专注于时间序列处理。它提供了分类、回归、聚类、预测建模和数据预处理等功能模块,支持多种算法和自定义距离度量。Aeon 活跃开发并持续更新至2024年,与 pandas 1.4.0 版本兼容,内置可视化工具,适合数据探索和基础分析任务。尽管在高级功能和性能优化方面有提升空间,但其简洁的 API 和完整的基础功能使其成为时间序列分析的有效工具。

325 37
|
10月前
|
机器学习/深度学习 存储 人工智能
|

深度强化学习实战:训练DQN模型玩超级马里奥兄弟

本文介绍了如何利用深度学习和强化学习技术构建一个能够自主学习并完成《超级马里奥兄弟》游戏的智能系统。通过使用深度Q网络(DQN)架构,智能体在虚拟环境中与游戏进行交互,逐步优化其行为策略。文中详细描述了环境构建、神经网络设计、智能体-环境交互机制等关键步骤,并展示了系统的训练过程和最终表现。该研究不仅展示了强化学习在游戏领域的应用潜力,也为未来的研究提供了宝贵的经验和技术参考。

535 81
|
10月前
|
JSON 数据挖掘 API
|

京东店铺所有商品 API 接口系列(京东 API)

京东店铺所有商品API接口用于获取指定店铺的全面商品信息,包括基本属性、价格、库存、销售数据等。前期需仔细研读接口文档,掌握请求地址、参数格式及频率限制。接口支持分页和筛选参数,返回JSON格式数据。Python示例中使用`requests`库发送HTTP请求并处理返回数据。该API适用于竞品分析、商品管理工具开发、市场调研及价格监测等场景,助力电商从业者优化运营策略。

416 4
|
10月前
|
存储 供应链 监控
|

反向海淘中下单、支付方式、订单、库存管理、物流与配送

反向海淘指海外消费者通过跨境电商平台购买中国商品。其流程包括:1) 海外消费者在支持多语言和货币的平台上选品、加入购物车并填写准确收货信息下单;2) 支付方式涵盖国际信用卡、第三方支付平台(如PayPal)、本地支付及电子钱包;3) 订单管理涉及订单确认、拣货包装、发货跟踪及售后处理,并通过数据分析优化库存与销售;4) 库存管理强调实时监控、多渠道同步、预警补货及滞销处理;5) 物流方案提供国际快递、邮政包裹、专线物流和海外仓等多种选择,确保全程跟踪和清关服务。

385 7
|
10月前
|
存储 分布式计算 算法
|

企业级推荐开发平台 PAI-Rec

本文介绍了企业推荐系统的关键技术和解决方案。主要内容分为四部分:1) 推荐系统面临的挑战,如数据治理和算法优化;2) 提高开发效率的解决方案,通过配置化和自动化减少重复工作;3) 高性能推荐算法和推理服务,包括GPU优化和特征组合;4) 高效特征管理平台PAI FeatureStore,支持离线和实时特征处理。文中还提到了EasyRecTorch框架,用于加速训练和推理,并分享了如何通过这些工具提升推荐系统的性能和降低成本。

279 2
来自: 人工智能平台PAI  版块
|
10月前
|
数据采集 人工智能 运维
|

从企业级 RAG 到 AI Assistant,阿里云Elasticsearch AI 搜索技术实践

本文介绍了阿里云 Elasticsearch 推出的创新型 AI 搜索方案。

792 5
|
10月前
|
人工智能 安全 大数据
|

PAI年度发布:GenAI时代AI基础设施的演进

本文介绍了AI平台在大语言模型时代的新能力和发展趋势。面对推理请求异构化、持续训练需求及安全可信挑战,平台推出了一系列优化措施,包括LLM智能路由、多模态内容生成服务、serverless部署模式等,以提高资源利用效率和降低使用门槛。同时,发布了训推一体调度引擎、竞价任务等功能,助力企业更灵活地进行训练与推理任务管理。此外,PAI开发平台提供了丰富的工具链和最佳实践,支持从数据处理到模型部署的全流程开发,确保企业和开发者能高效、安全地构建AI应用,享受AI带来的红利。

305 1
来自: 人工智能平台PAI  版块
|
11月前
|
人工智能 Cloud Native 数据管理
|

数据+AI融合趋势洞察暨阿里云OpenLake解决方案发布

Forrester是全球领先的市场研究与咨询机构,专注于新兴技术在各领域的应用。本文探讨如何加速现代数据管理,推动人工智能与客户业务的融合创新。面对数据标准缺乏、多云环境复杂性、新兴业务场景及过多数据平台等挑战,Forrester提出构建AI就绪的数据管理基石,通过互联智能框架、全局数据管理和DataOps、端到端数据管理能力、AI赋能的数据管理以及用例驱动的策略,帮助企业实现数据和AI的深度融合,提升业务价值并降低管理成本。

462 0
|
11月前
|
XML 移动开发 开发者
|

京东商品详情数据接口(H5、APP 端)

京东商品详情数据接口是为H5和APP开发者提供的工具,支持获取商品名称、价格、库存、销量、评价、图片等详细信息,优化应用功能。接口返回JSON或XML格式数据,方便解析处理。适用于电商导购、社交媒体分享、活动推广、价格监控等场景,提升用户体验和购物决策效率。示例代码展示了使用Python发送GET请求的方法。

556 7
|
11月前
|
机器学习/深度学习 人工智能 开发者
|

强化学习在游戏开发中的应用:打造智能化游戏体验

强化学习在游戏开发中的应用:打造智能化游戏体验

582 19
|
11月前
|
算法
|

基于EO平衡优化器算法的目标函数最优值求解matlab仿真

本程序基于进化优化(EO)中的平衡优化器算法,在MATLAB2022A上实现九个测试函数的最优值求解及优化收敛曲线仿真。平衡优化器通过模拟生态系统平衡机制,动态调整搜索参数,确保种群多样性与收敛性的平衡,高效搜索全局或近全局最优解。程序核心为平衡优化算法,结合粒子群优化思想,引入动态调整策略,促进快速探索与有效利用解空间。

225 0
|
11月前
|
SQL 存储 数据处理
|

别让你的CPU打盹儿:Apache Doris并行执行原理大揭秘!

别让你的CPU打盹儿:Apache Doris并行执行原理大揭秘!

410 1
|
11月前
|
存储 数据采集 大数据
|

数据仓库建模规范思考

本文介绍了数据仓库建模规范,包括模型分层、设计、数据类型、命名及接口开发等方面的详细规定。通过规范化分层逻辑、高内聚松耦合的设计、明确的命名规范和数据类型转换规则,提高数据仓库的可维护性、可扩展性和数据质量,为企业决策提供支持。

876 10
|
11月前
|
开发框架 .NET 开发者
|

简化 ASP.NET Core 依赖注入(DI)注册-Scrutor

Scrutor 是一个简化 ASP.NET Core 应用程序中依赖注入(DI)注册过程的开源库,支持自动扫描和注册服务。通过简单的配置,开发者可以轻松地从指定程序集中筛选、注册服务,并设置其生命周期,同时支持服务装饰等高级功能。适用于大型项目,提高代码的可维护性和简洁性。仓库地址:<https://github.com/khellang/Scrutor>

262 5
|
11月前
|
移动开发 前端开发 BI
|

赛事比分直播网站,搭建上线仅需三天

熊猫比分研发的体育电竞比分直播平台,功能全面,涵盖基础、实时、统计、历史和媒体数据,支持动画直播与竞彩数据。采用JAVA+VUE+Object-C开发,兼容PC、H5、安卓及iOS四端,提供优质的直播体验与运营支持。

284 6
|
11月前
|
应用服务中间件 定位技术 网络安全
|

理解住宅IP和运营商IP的不同应用场景

随着数字化时代的发展,网络安全与隐私保护成为核心需求,代理IP因其技术优势受到关注。本文介绍了住宅IP与运营商IP的区别,包括定义、使用场景、安全性、成本及地理位置等方面,帮助用户根据需求选择合适的IP类型。

304 8
来自: 大数据计算 MaxCompute  版块
|
12月前
|
机器学习/深度学习 数据采集 供应链
|

使用Python实现深度学习模型:智能食品市场分析

使用Python实现深度学习模型:智能食品市场分析

171 0
|
12月前
|
Java Kotlin 索引
|

学习Spring框架特性及jiar包下载

Spring 5作为最新版本,更新了JDK基线至8,修订了核心框架,增强了反射和接口功能,支持响应式编程及Kotlin语言,引入了函数式Web框架,并提升了测试功能。Spring框架可在其官网下载,包括文档、jar包和XML Schema文档,适用于Java SE和Java EE项目。

247 0
|
12月前
|
安全 API 开发者
|

微信开发者工具里面没有企业微信模式

企业微信与普通微信在应用场景和开发体系上存在本质区别,主要体现在身份认证、功能丰富性和开放能力等方面。企业微信开发需使用特定的API和工具,本文介绍了企业微信开发的基本步骤、特点及开发进度安排,帮助开发者更好地理解和应用企业微信的开发环境。

428 2
|
12月前
|
API 开发者 数据格式
|

孔夫子API接口关键词获取

孔夫子旧书网提供API接口,通过关键词获取在售商品信息,包括注册开发者账号、创建应用、获取API密钥等步骤。API文档详细列出参数、请求方式和返回数据格式,并提供Python调用示例。此外,孔子的教育思想强调素质教育、道德教育和教育平等,对当代教育有重要影响。

169 0
|
12月前
|
SQL 分布式计算 Java
|

【赵渝强老师】Hive的体系架构

Hive是基于Hadoop的数据仓库平台,提供SQL-like的HQL语言进行数据分析,无需编写复杂的Java代码。Hive支持丰富的数据模型,可将SQL语句转换为MapReduce任务在Yarn上运行,底层依赖HDFS存储数据。Hive可通过CLI、JDBC和Web界面执行SQL查询。

475 2
|
12月前
|
SQL 存储 数据库
|

【赵渝强老师】基于Flink的流批一体架构

本文介绍了Flink如何实现流批一体的系统架构,包括数据集成、数仓架构和数据湖的流批一体方案。Flink通过统一的开发规范和SQL支持,解决了传统架构中的多套技术栈、数据链路冗余和数据口径不一致等问题,提高了开发效率和数据一致性。

593 7
来自: 实时计算 Flink  版块
|
26天前
|
存储 分布式计算 Hadoop
|

七、Sqoop Job:简化与自动化数据迁移任务及免密执行

平时用 Sqoop 导入导出时,命令一长就容易出错,特别是增量任务还得记 last-value,很麻烦。其实 Sqoop 有 Job 功能,能把命令“存档”,以后直接 --exec 执行,配合调度工具特别省心。本文手把手讲 Job 创建、管理、免密执行技巧(密码文件、Credential Provider),还带实战例子,搞完你就能写出稳稳当当的自动化 Sqoop 作业了!

106 0

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

8
今日
67396
内容
127
活动
439369
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 日志服务
  • 检索分析服务 Elasticsearch版