|
7月前
|
数据采集 Web App开发 存储
|

打造高效的Web Scraper:Python与Selenium的完美结合

本文介绍如何使用Python结合Selenium,通过代理IP、设置Cookie和User-Agent抓取BOSS直聘的招聘信息,包括公司名称、岗位、要求和薪资。这些数据可用于行业趋势、人才需求、企业动态及区域经济分析,为求职者、企业和分析师提供宝贵信息。文中详细说明了环境准备、代理配置、登录操作及数据抓取步骤,并提醒注意反爬虫机制和验证码处理等问题。

165 1
|
7月前
|
存储 安全 区块链
|

去中心化存储:数据存储的新范式

去中心化存储:数据存储的新范式

366 91
|
7月前
|
存储 人工智能 自然语言处理
|

云上玩转DeepSeek系列之二:PAI+DeepSeek,打造智能问答助手

本文将为您带来“PAI+DeepSeek,30分钟打造支持连网搜索+私有知识库的智能应用”最佳实践,大模型能力、联网能力再加持 RAG 方案,实现 DeepSeek 系列模型与现有业务的高效融合。

964 16
来自: 人工智能平台PAI  版块
|
7月前
|
JSON 数据挖掘 API
|

lazada商品详情接口 (lazada API系列)

Lazada 是东南亚知名电商平台,提供海量商品资源。通过其商品详情接口,开发者和商家可获取商品标题、价格、库存、描述、图片、用户评价等详细信息,助力市场竞争分析、商品优化及库存管理。接口采用 HTTP GET 请求,返回 JSON 格式的响应数据,支持 Python 等语言调用。应用场景包括竞品分析、价格趋势研究、用户评价分析及电商应用开发,为企业决策和用户体验提升提供有力支持。

270 21
|
7月前
|
人工智能 搜索推荐 算法
|

高性价比| OpenSearch智能问答版开箱即用DeepSeek-R1

本文介绍了如何使用OpenSearch LLM智能问答版,一分钟快速搭建RAG系统

290 0
来自: 智能搜索推荐  版块
|
7月前
|
安全 Java 关系型数据库
|

ssm019社区文化宣传网站(文档+源码)_kaic

社区文化宣传网站采用JSP技术和Mysql数据库开发,旨在通过现代化技术手段提升社区文化的宣传效果。系统开发过程中,首先进行需求分析,明确主要功能,随后进行总体设计与详细设计,涵盖系统结构、数据结构、功能和安全设计等方面。系统详细设计包括前台首页、管理员及用户功能模块,确保操作简便、页面简洁,具备良好的可读性、实用性和扩展性。整个开发过程注重系统的稳定性和安全性,最终通过功能测试优化系统性能,为后续维护和类似系统开发提供参考。关键词:社区文化宣传网站、JSP技术、Mysql数据库。

171 64
|
7月前
|
人工智能 数据可视化 数据挖掘
|

零售行业数据分析工作模式革新

在零售行业,干数据分析和汇报的小伙伴肯定懂,每个月、每季度、每年都要做各种报告往上交。随着公司业务的拓展,销售的类目从几种到几十种,甚至到上百种,数据量也不断往上涨。以前做个Excel表、画几张图就能搞定的事情,现在光是整理这些数据就够让人头疼了,更别说还要从中找出有用的信息,做成清晰易懂的报告。因为,面对这么庞大的数据量,我们真是遇到了前所未有的挑战。DataV Note作为一个智能分析文档,解决了我们的困境。

127 11
|
7月前
|
数据采集 API 数据库
|

为什么用源码搭建体育比分直播系统更高效

使用源码搭建体育比分直播系统比从零开发或第三方服务更高效。它节省开发时间和成本,提供灵活定制功能,支持品牌化与UI优化;掌控数据源与更新机制,提高数据实时性;优化系统性能,减少冗余功能;增强数据安全与隐私控制,避免依赖第三方;具备长期维护和扩展性,支持新功能和技术兼容。适合希望打造自有品牌、优化用户体验的企业或开发者。

205 12
|
7月前
|
人工智能 自然语言处理 供应链
|

做国际物流为什么要做代购系统

国际物流企业引入代购系统,旨在应对全球化购物需求、提升服务竞争力并优化业务效率。该系统整合采购、支付、清关、运输等环节,提供一站式服务,解决语言障碍和物流复杂等问题。通过代购服务费、商品差价等方式拓展收入来源,同时提升客户粘性和留存率。代购系统还能优化物流安排,降低空载率和单件成本,形成差异化竞争优势,并通过自动合规和透明化流程降低风险。最终,物流企业从单纯的运输服务商升级为跨境供应链管理者,实现利润增长与市场竞争力的双重突破。

165 4
|
7月前
|
SQL 人工智能 关系型数据库
|

Flink CDC YAML:面向数据集成的 API 设计

本文整理自阿里云智能集团 Flink PMC Member & Committer 徐榜江(雪尽)在 FFA 2024 分论坛的分享,涵盖四大主题:Flink CDC、YAML API、Transform + AI 和 Community。文章详细介绍了 Flink CDC 的发展历程及其优势,特别是 YAML API 的设计与实现,以及如何通过 Transform 和 AI 模型集成提升数据处理能力。最后,分享了社区动态和未来规划,欢迎更多开发者加入开源社区,共同推动 Flink CDC 的发展。

630 12
来自: 实时计算 Flink  版块
|
7月前
|
vr&ar UED
|

产品经理-产品设计详解 - AxureMost

《产品设计详解 - AxureMost》探讨了影响用户体验的五大方面:可用性、心流、沉浸感、情感和美感。可用性强调产品的易用性和效率,确保用户能顺利完成任务且体验良好;心流关注用户在使用过程中达到忘我状态的心理体验;沉浸感通过多感知体验让用户感觉身临其境;情感化设计旨在引发用户情绪共鸣,提升互动积极性;美感设计则注重激发用户的审美愉悦,创造深层次的情感连接。本文还介绍了各方面的具体设计原则和应用场景,帮助设计师更好地理解并应用这些概念。

184 77
|
7月前
|
机器学习/深度学习 缓存 自然语言处理
|

DeepSeek背后的技术基石:DeepSeekMoE基于专家混合系统的大规模语言模型架构

DeepSeekMoE是一种创新的大规模语言模型架构,融合了专家混合系统(MoE)、多头潜在注意力机制(MLA)和RMSNorm归一化。通过专家共享、动态路由和潜在变量缓存技术,DeepSeekMoE在保持性能的同时,将计算开销降低了40%,显著提升了训练和推理效率。该模型在语言建模、机器翻译和长文本处理等任务中表现出色,具备广泛的应用前景,特别是在计算资源受限的场景下。

968 29
|
8月前
|
供应链 数据挖掘 API
|

1688app 商品详情接口系列(1688API)

1688作为国内知名批发采购平台,提供了一系列商品详情接口(API),助力企业和开发者获取商品基础、价格、库存及供应商信息。通过Python示例代码展示如何调用这些接口,应用场景涵盖采购决策辅助、数据分析与市场调研、电商平台整合及供应链管理系统的优化,为企业和采购商提供有力的数据支持,提升业务效率和竞争力。

276 15
|
8月前
|
数据采集 监控 定位技术
|

不同用户使用代理 IP,有效率千差万别的原因剖析

在信息化时代,网络成为生活不可或缺的一部分,代理IP的应用日益广泛。不同用户使用代理IP的有效率差异主要源于三个方面:代理服务器的性能与稳定性、IP资源质量;目标网站的防护策略和负载响应速度;以及用户的并发请求控制和网络环境。为提高效率,建议选择高质量代理、使用就近服务器、定期轮换IP并监控代理池。

199 38
来自: 大数据计算 MaxCompute  版块
|
8月前
|
机器学习/深度学习 人工智能 算法
|

Meta-CoT:通过元链式思考增强大型语言模型的推理能力

大型语言模型(LLMs)在处理复杂推理任务时面临挑战,尤其在高级数学和抽象问题解决方面表现不足。为弥补这一差距,研究人员引入了元链式思考(Meta-CoT),该方法通过引入搜索、验证和回溯机制,使LLMs能够模拟人类的系统2思维,实现迭代和审慎推理。实验证明,Meta-CoT显著提升了LLMs在复杂任务中的表现,推动了AI从模式识别向更深层次的逻辑推理转变。

272 16
|
8月前
|
供应链 Go 区块链
|

基于区块链技术实现供应链的全程可追溯性

基于区块链技术实现供应链的全程可追溯性

384 17

产品经理-通用能力

产品经理的通用能力涵盖需求分析、产品设计与UI知识。核心能力包括:1) **沟通能力**:口头和书面表达清晰;2) **学习能力**:持续学习新知识,多渠道拓展视野;3) **思考能力**:形成独立见解,追问本质,定期复盘;4) **积极主动能力**:对事情、他人、产品和自己负责;5) **决策能力**:平衡取舍,站在用户角度,优先处理重要事项。

153 1
|
8月前
|
存储 供应链 安全
|

区块链技术在选举中的应用:透明与安全的新时代

区块链技术在选举中的应用:透明与安全的新时代

299 16
|
8月前
|
数据可视化 JavaScript 前端开发
|

HttpClient和HttpGet实现音频数据的高效爬取与分析

HttpClient和HttpGet实现音频数据的高效爬取与分析

108 0
来自: 大数据计算 MaxCompute  版块
|
8月前
|
边缘计算 负载均衡 监控
|

静态代理IP与动态网络拓扑的协同发展

随着科技和互联网的发展,越来越多企业依赖代理服务。静态代理IP与网络拓扑结构的有效融合能显著提升网络性能、安全性和管理效率。通过合理设计网络拓扑、分配静态代理IP,并结合监控和安全策略,可优化数据流、实现负载均衡,确保高效安全的数据传输。未来,云计算、边缘计算及AI技术将进一步推动这一融合,形成更灵活高效的网络架构。

109 1
来自: 大数据计算 MaxCompute  版块
|
8月前
|
供应链 算法 安全
|

探索区块链技术中的隐私保护机制

探索区块链技术中的隐私保护机制

317 27
|
8月前
|
JSON 数据挖掘 API
|

京东app商品详情API接口系列(京东 API)

本文介绍了使用 Python 调用京东商品详情 API 的方法。前期需安装 `requests` 库处理 HTTP 请求,导入 `json` 库解析 JSON 数据。接口通过商品 ID 获取详细信息,如价格、图片、评价等。示例代码展示了如何构建请求并处理响应数据。应用场景包括电商开发、市场调研和数据分析等,帮助提升用户体验、优化推荐系统及制定市场策略。

417 1
|
8月前
|
数据采集 Oracle Java
|

如何使用Scala和Selenium爬取知乎视频并保存到本地

如何使用Scala和Selenium爬取知乎视频并保存到本地

226 16
来自: 大数据运维SREWorks  版块
|
8月前
|
机器学习/深度学习 算法 计算机视觉
|

基于CNN卷积神经网络的金融数据预测matlab仿真,对比BP,RBF,LSTM

本项目基于MATLAB2022A,利用CNN卷积神经网络对金融数据进行预测,并与BP、RBF和LSTM网络对比。核心程序通过处理历史价格数据,训练并测试各模型,展示预测结果及误差分析。CNN通过卷积层捕捉局部特征,BP网络学习非线性映射,RBF网络进行局部逼近,LSTM解决长序列预测中的梯度问题。实验结果表明各模型在金融数据预测中的表现差异。

362 10
|
8月前
|
算法 决策智能
|

基于SA模拟退火优化算法的TSP问题求解matlab仿真,并对比ACO蚁群优化算法

本项目基于MATLAB2022A,使用模拟退火(SA)和蚁群优化(ACO)算法求解旅行商问题(TSP),对比两者的仿真时间、收敛曲线及最短路径长度。SA源于金属退火过程,允许暂时接受较差解以跳出局部最优;ACO模仿蚂蚁信息素机制,通过正反馈发现最优路径。结果显示SA全局探索能力强,ACO在路径优化类问题中表现优异。

241 4
|
8月前
|
数据可视化 数据挖掘 atlas
|

地图不只是导航:DataV Atlas 揭示地理数据的深层价值

随着互联网场景的快速衍生,打车、外卖、智能驾驶等领域的空间数据爆发式增长,海量数据分析成为日常需求。然而,传统地图服务面临性能、安全和成本挑战。为此,我们推出「DataV Atlas 地理数据服务」,提供高效、安全、易用的地理数据解决方案。通过简单的 SQL 查询即可生成专业地理服务,支持多源数据整合、实时更新与分析,确保数据安全,并深度集成 DataV Board 数据看板,实现一键上屏和交互式分析。适用于大屏展示、城市规划等多种场景,助力企业轻松挖掘空间数据价值。

444 6
来自: 数据可视化DataV  版块
|
8月前
|
人工智能 分布式计算 DataWorks
|

大数据& AI 产品月刊【2024年12月】

大数据& AI 产品技术月刊【2024年12月】,涵盖本月技术速递、产品和功能发布、市场和客户应用实践等内容,帮助您快速了解阿里云大数据& AI 方面最新动态。

410 21
|
8月前
|
机器学习/深度学习 资源调度 算法
|

增强回归模型的可解释性:基于MCMC的混合建模与特征选择方法研究

本文介绍了一种基于正态回归混合模型的通用实现方法,结合MCMC算法,在参数估计的同时实现模型选择和特征选择。该方法突破了正态性假设限制,适用于非正态和非线性数据集,并通过回归混合和特征选择机制提升模型可解释性和性能。实验结果表明,该模型在复杂数据分类和参数估计方面表现出色,错误率仅为6%。此方法在客户群体识别、医疗数据分析等领域具有广泛应用价值。

208 10
|
8月前
|
算法 Serverless
|

基于魏格纳函数和焦散线方法的自加速光束matlab模拟与仿真

本项目基于魏格纳函数和焦散线方法,使用MATLAB 2022A模拟自加速光束。通过魏格纳函数法生成多种自加速光束,并设计相应方法,展示仿真结果。核心程序包括相位和幅度的计算、光场分布及拟合分析,实现对光束传播特性的精确控制。应用领域涵盖光学成像、光操控和光束聚焦等。 关键步骤: 1. 利用魏格纳函数计算光场分布。 2. 模拟并展示自加速光束的相位和幅度图像。 3. 通过拟合分析,验证光束加速特性。 该算法原理基于魏格纳函数描述光场分布,结合数值模拟技术,实现对光束形状和传播特性的精确控制。通过调整光束相位分布,可改变其传播特性,如聚焦或加速。

203 20
|
8月前
|
分布式计算 数据处理 MaxCompute
|

云产品评测|分布式Python计算服务MaxFrame

云产品评测|分布式Python计算服务MaxFrame

159 2
|
8月前
|
TensorFlow 算法框架/工具 Python
|

Restoring from checkpoint failed,Assign requires shapes of both tensors to match. lhs shape= [700,8] rhs shape= [660,8]

模型恢复出错,是特征参数不一致问题

103 5
来自: 人工智能平台PAI  版块
|
8月前
|
机器学习/深度学习 存储 设计模式
|

特征时序化建模:基于特征缓慢变化维度历史追踪的机器学习模型性能优化方法

本文探讨了数据基础设施设计中常见的一个问题:数据仓库或数据湖仓中的表格缺乏构建高性能机器学习模型所需的历史记录,导致模型性能受限。为解决这一问题,文章介绍了缓慢变化维度(SCD)技术,特别是Type II类型的应用。通过SCD,可以有效追踪维度表的历史变更,确保模型训练数据包含完整的时序信息,从而提升预测准确性。文章还从数据工程师、数据科学家和产品经理的不同视角提供了实施建议,强调历史数据追踪对提升模型性能和业务洞察的重要性,并建议采用渐进式策略逐步引入SCD设计模式。

311 8
|
8月前
|
数据采集 存储 数据挖掘
|

构建电商数据采集系统初定位

构建电商数据采集系统需经历需求分析、技术选型、系统设计、开发实现、测试优化及部署维护六大步骤。过程中要明确目标与数据范围,选择合适的工具和数据库,并设计合理的架构与采集策略。还需考虑合法合规、分布式采集、数据质量控制及动态调整等策略,确保系统高效、稳定运行,适应电商环境变化。

250 8
|
8月前
|
存储 分布式计算 算法
|

企业级推荐开发平台 PAI-Rec

本文介绍了企业推荐系统的关键技术和解决方案。主要内容分为四部分:1) 推荐系统面临的挑战,如数据治理和算法优化;2) 提高开发效率的解决方案,通过配置化和自动化减少重复工作;3) 高性能推荐算法和推理服务,包括GPU优化和特征组合;4) 高效特征管理平台PAI FeatureStore,支持离线和实时特征处理。文中还提到了EasyRecTorch框架,用于加速训练和推理,并分享了如何通过这些工具提升推荐系统的性能和降低成本。

234 2
来自: 人工智能平台PAI  版块
|
8月前
|
算法 5G
|

基于MSWA相继加权平均的交通流量分配算法matlab仿真

本项目基于MSWA(Modified Successive Weighted Averaging)相继加权平均算法,对包含6个节点、11个路段和9个OD对的交通网络进行流量分配仿真。通过MATLAB2022A实现,核心代码展示了迭代过程及路径收敛曲线。MSWA算法在经典的SUE模型基础上改进,引入动态权重策略,提高分配结果的稳定性和收敛效率。该项目旨在预测和分析城市路网中的交通流量分布,达到用户均衡状态,确保没有出行者能通过改变路径减少个人旅行成本。仿真结果显示了27条无折返有效路径的流量分配情况。

137 1
|
8月前
|
安全 UED
|

IM系统在体育直播网站中的重要性

IM(即时通讯)系统在体育直播平台中至关重要,提升用户体验、促进社交互动和增强平台活跃度。它支持实时互动、增强观赛氛围、构建社交网络、推送即时信息、创造商业价值并提供多元化互动体验。高并发性能、实时稳定性和用户安全是实现的关键。通过集成IM系统,平台能更好地满足观众互动需求,提升运营效益。 代码示例展示了如何在比赛数据响应中设置比赛ID、游戏ID、系列赛ID等基本信息,并检查是否有计划和关注标记。

240 3
|
8月前
|
API 数据处理 开发者
|

获取淘宝分类详情:深入解析taobao.cat_get API接口

淘宝开放平台推出的`taobao.cat_get` API接口,帮助开发者和商家获取淘宝、天猫的商品分类详情。该接口支持获取类目列表、属性及父类目信息,通过指定分类ID(cid)实现精准查询,并提供灵活的参数设置和高效的数据处理。使用流程包括注册账号、创建应用、获取App Key/Secret、构造请求、发送并解析响应。示例代码展示了如何用Python调用此API。开发者可借此为电商项目提供数据支持。

273 5
|
8月前
|
人工智能 分布式计算 容灾
|

MaxCompute年度发布

本次分享介绍了阿里云MaxCompute在过去一年中的企业级数仓新功能。MaxCompute自2009年诞生,现已服务阿里巴巴集团、蚂蚁集团及众多第三方客户,日处理千万级任务。新功能包括湖仓一体开放性、Data+AI结合、非结构化数据处理(如Object Table)、实时数据处理(如增量物化视图)、性能优化(如MCU2.0和智能调优)以及企业级安全合规能力(如同城容灾和数据脱敏)。这些改进提升了数据处理的效率、安全性和性价比。

237 6
来自: 大数据计算 MaxCompute  版块
|
8月前
|
机器学习/深度学习 存储 运维
|

为什么要用PAI-FeatureStore来管理特征?

125 1
|
8月前
|
机器学习/深度学习 边缘计算 运维
|

机器学习在网络安全中的防护:智能化的安全屏障

机器学习在网络安全中的防护:智能化的安全屏障

427 15
|
8月前
|
算法
|

基于梯度流的扩散映射卡尔曼滤波算法的信号预处理matlab仿真

本项目基于梯度流的扩散映射卡尔曼滤波算法(GFDMKF),用于信号预处理的MATLAB仿真。通过设置不同噪声大小,测试滤波效果。核心代码实现数据加载、含噪信号生成、扩散映射构建及DMK滤波器应用,并展示含噪与无噪信号及滤波结果的对比图。GFDMKF结合非线性流形学习与经典卡尔曼滤波,提高对非线性高维信号的滤波和跟踪性能。 **主要步骤:** 1. 加载数据并生成含噪测量值。 2. 使用扩散映射捕捉低维流形结构。 3. 应用DMK滤波器进行状态估计。 4. 绘制不同SNR下的轨迹示例。

231 6
|
9月前
|
人工智能 数据可视化 数据挖掘
|

【产品】G 端产品经理

G端产品经理在政府数字化转型中扮演着关键角色,连接政府需求与技术实现。他们负责挖掘需求、规划方案、推动跨部门协作,并监督项目进展。具体职责包括需求调研、产品规划与设计、原型制作、文档撰写及交互与视觉设计等。面对复杂多变的需求、快速更新的技术和严格的项目验收,G端产品经理需不断提升专业技能,以适应挑战并推动政府治理体系现代化。

210 10
|
9月前
|
供应链 监控 API
|

1688.item_search_shop API:开启电商数据新纪元

1688.item_search_shop API是阿里巴巴1688平台提供的核心接口之一,支持根据关键词搜索指定店铺的商品,并获取商品详情、图片、价格等信息。该API允许设定搜索结果排序方式,如按销量或价格排序,满足不同需求。开发者可将其集成到电商应用中,提升用户体验;市场分析人员可利用其进行趋势和竞争对手分析;供应链管理人员则能监控库存,优化策略。示例代码展示了如何使用Python调用该API,帮助开发者快速上手。这一API的推出标志着B2B电商领域商品搜索技术的重要进步,推动行业向更高效、智能的方向发展。

213 1
|
9月前
|
算法 图形学
|

三维球体空间中光线反射模拟与三维点云提取matlab仿真

本项目使用MATLAB2022A模拟三维椭球体内光线反射并提取三维点云。通过设置椭球模型作为墙壁,根据几何光学原理计算光线在曲面上的反射路径,记录每次反射点坐标,生成三维点云图。核心代码实现多次反射的循环计算与绘图,并展示反射点的位置变化及其平滑处理结果。最终,通过光线追踪技术模拟真实场景中的光线行为,生成精确的三维点云数据,适用于计算机图形学和光学仿真领域。

335 27
|
9月前
|
安全 API 数据安全/隐私保护
|

速卖通AliExpress商品详情API接口深度解析与实战应用

速卖通(AliExpress)作为全球化电商的重要平台,提供了丰富的商品资源和便捷的购物体验。为了提升用户体验和优化商品管理,速卖通开放了API接口,其中商品详情API尤为关键。本文介绍如何获取API密钥、调用商品详情API接口,并处理API响应数据,帮助开发者和商家高效利用这些工具。通过合理规划API调用策略和确保合法合规使用,开发者可以更好地获取商品信息,优化管理和营销策略。

414 2
|
9月前
|
安全 架构师 大数据
|

DataWorks 安全中心

DataWorks的安全中心,作为云上大数据体系的安全门户,致力于向您提供面向数据安全生命周期全过程的安全能力,同时在符合安全规范要求的前提下,提供各类安全诊断的最佳实践。帮助您快速构建平台的数据内容、个人隐私等相关的安全能力,满足企业面向高风险场景的各类安全要求。

172 0
|
9月前
|
SQL 数据可视化 架构师
|

DataWorks Notebook

DataWorks的Notebook提供了一个交互式、灵活且可复用的数据处理和分析环境,增强了直观性、模块化和交互性,帮助您更轻松地进行数据处理、探索、可视化和模型构建。

169 0
|
9月前
|
算法
|

基于EO平衡优化器算法的目标函数最优值求解matlab仿真

本程序基于进化优化(EO)中的平衡优化器算法,在MATLAB2022A上实现九个测试函数的最优值求解及优化收敛曲线仿真。平衡优化器通过模拟生态系统平衡机制,动态调整搜索参数,确保种群多样性与收敛性的平衡,高效搜索全局或近全局最优解。程序核心为平衡优化算法,结合粒子群优化思想,引入动态调整策略,促进快速探索与有效利用解空间。

184 0