|
7月前
|
存储 人工智能 自然语言处理
|

从零搭建RAG应用:跳过LangChain,掌握文本分块、向量检索、指代消解等核心技术实现

本文详解如何从零搭建RAG(检索增强生成)应用,跳过LangChain等框架,深入掌握文本解析、分块、向量检索、对话记忆、指代消解等核心技术,提升系统可控性与优化能力。

672 0
|
7月前
|
JavaScript 关系型数据库 MySQL
|

基于python的医院智慧门诊系统研究

本系统基于Python和Django框架,结合MySQL、Vue等技术,构建功能全面、易用性强的医院智慧门诊平台。系统涵盖患者与医务人员信息管理、在线挂号、智能导诊、电子病历、远程医疗等功能,优化就医流程,提升医疗效率与服务质量,助力医疗服务数字化转型。

230 0
|
7月前
|
机器学习/深度学习 算法
|

Proximal SFT:用PPO强化学习机制优化SFT,让大模型训练更稳定

本文介绍了一种改进的监督微调方法——Proximal Supervised Fine-Tuning (PSFT),旨在解决传统SFT易过拟合、泛化能力差及导致“熵坍塌”的问题。受PPO强化学习算法启发,PSFT通过引入参数更新的稳定性机制,防止模型在训练中变得过于确定,从而提升探索能力与后续强化学习阶段的表现。实验表明,PSFT在数学推理、模型对齐及泛化能力方面均优于传统SFT。

705 3
|
7月前
|
JSON API 数据安全/隐私保护
|

天猫商品详情API 数据解析(附代码)

天猫商品详情API(tmall.item_get)通过商品ID获取标题、价格、库存、图片、SKU等信息,支持高并发,适用于电商数据分析与价格策略优化。接口采用HTTP请求与JSON返回,需AppKey+签名认证。附Python请求示例,含签名验证与异常处理。前往体验:c0b.cc/R4rbK2

268 1
|
7月前
|
数据采集 数据可视化 数据挖掘
|

基于python大数据的nba球员可视化分析系统

本课题围绕NBA球员数据分析与可视化展开,探讨如何利用大数据与可视化技术提升篮球运动的表现评估与决策支持能力。研究涵盖数据采集、处理与可视化呈现,结合SQLite、Flask、Echarts等技术构建分析系统,助力球队训练、战术制定及球迷观赛体验提升。

481 2
|
7月前
|
机器学习/深度学习 存储 算法
|

Memento:基于记忆无需微调即可让大语言模型智能体持续学习的框架

Memento是一种创新的LLM智能体框架,通过基于记忆的在线强化学习实现低成本持续适应,无需微调模型参数。其核心理念借鉴人类学习机制,利用情景记忆库中的历史轨迹指导决策,结合案例推理与工具调用,构建了适用于动态环境的自适应智能体系统。

402 2
|
7月前
|
数据采集 数据库 索引
|

新闻网站的数据采集与更新思路

该方案设计了一个跨站点的增量更新引擎,用于高效采集央视新闻、中国新闻网和环球网等多源新闻数据。通过代理IP和内容哈希签名技术,实现新闻的新增与更新检测,大幅降低冗余抓取和带宽消耗。实验表明,该方法在多源新闻采集中具备高效性和实用性,可拓展为行业级舆情雷达系统,支持事件追踪与趋势分析。

401 2
|
8月前
|
算法 Linux
|

数据分布平滑化技术:核密度估计KDE解决直方图不连续问题

核密度估计(KDE)通过平滑处理解决直方图密度估计中的不连续问题,提供连续密度函数。其核心在于使用核函数对数据点进行加权,避免区间划分带来的信息丢失。带宽参数h影响估计效果,过小导致波动大,过大则过度平滑。常用核函数包括高斯核与Epanechnikov核,实际应用中可借助Statsmodels或Seaborn库快速实现。

441 0
|
8月前
|
数据采集 消息中间件 监控
|

单机与分布式:社交媒体热点采集的实践经验

在舆情监控与数据分析中,单机脚本适合小规模采集如微博热榜,而小红书等大规模、高时效性需求则需分布式架构。通过Redis队列、代理IP与多节点协作,可提升采集效率与稳定性,适应数据规模与变化速度。架构选择应根据实际需求,兼顾扩展性与维护成本。

244 2
|
8月前
|
数据采集 存储 关系型数据库
|

全量抓取还是增量采集?二手房数据采集实战解析

本文以链家二手房数据采集为例,探讨全量抓取与增量采集的优劣与适用场景,并结合代理IP技术实现高效、稳定的爬虫方案。通过SQLite/PostgreSQL存储、内容哈希去重、定时任务调度等手段,构建可持续运行的数据更新与统计系统。适用于房产数据分析、市场监测等场景,兼顾资源效率与数据质量。

439 0
|
8月前
|
存储 人工智能 算法
|

Java 大视界 -- Java 大数据在智能医疗影像数据压缩与传输优化中的技术应用(227)

本文探讨 Java 大数据在智能医疗影像压缩与传输中的关键技术应用,分析其如何解决医疗影像数据存储、传输与压缩三大难题,并结合实际案例展示技术落地效果。

260 0
|
8月前
|
自然语言处理 DataWorks 算法
|

数据开发再提速!DataWorks正式接入Qwen3-Coder

阿里云DataWorks平台正式接入Qwen3-Coder模型,用户通过Copilot智能助手可实现自然语言交互生成代码,提升数据开发效率。支持SQL/Python代码生成、优化及Notebook文件创建,适用于数据分析与算法构建,助力企业高效开发。

696 9
|
8月前
|
人工智能 自然语言处理 前端开发
|

《10分钟开发电商页!CodeBuddy自然语言转代码实测:程序员效率革命》

CodeBuddy AI编程助手,实现自然语言到代码全流程生成,支持React开发、Figma转代码,提升效率,限时抽奖送体验码!

359 0
来自: 大数据计算 MaxCompute  版块
|
8月前
|
JSON 算法 API
|

小红书商品详情签名算法Python

本文分享了作者在对接小红书商品详情API过程中的实战经验,涵盖权限申请、签名算法、限流控制、数据解析及Webhook接入等关键技术环节,并附有实用Python代码示例。

548 0
|
8月前
|
机器学习/深度学习 存储 分布式计算
|

Java 大视界 --Java 大数据机器学习模型在金融风险压力测试中的应用与验证(211)

本文探讨了Java大数据与机器学习模型在金融风险压力测试中的创新应用。通过多源数据采集、模型构建与优化,结合随机森林、LSTM等算法,实现信用风险动态评估、市场极端场景模拟与操作风险预警。案例分析展示了花旗银行与蚂蚁集团的智能风控实践,验证了技术在提升风险识别效率与降低金融风险损失方面的显著成效。

461 0
|
8月前
|
机器学习/深度学习 人工智能 算法
|

金融大佬的“新核弹”:量子计算能不能看穿期权的“心思”?

金融大佬的“新核弹”:量子计算能不能看穿期权的“心思”?

297 0
|
8月前
|
机器学习/深度学习 供应链 算法
|

你吃的每一口放心饭,背后都有“大数据”撑腰!

你吃的每一口放心饭,背后都有“大数据”撑腰!

155 0
|
9月前
|
负载均衡 Linux 定位技术
|

做网站第一步:如何选择最适合的云服务器配置?

在互联网世界中,选择一台合适的云服务器对建站至关重要。它不仅影响网站性能和用户体验,还关系到运营成本。面对众多云服务商和产品,需从网站规模、技术架构、地理位置等多方面考量,明确需求,精准选型。无论是个人博客、企业官网,还是电商平台,都应找到匹配自身发展的服务器类型。当前各大云服务商也推出多项优惠活动,助力中小企业快速起步。通过试用体验,更易找到“本命”服务器。愿你拨开迷雾,找到最适合自己的那一款,开启数字世界的精彩篇章。

311 0
|
9月前
|
机器学习/深度学习 人工智能 测试技术
|

【ICML2025】大模型后训练性能4倍提升!阿里云PAI团队研究成果ChunkFlow中选

阿里云 PAI 团队、通义实验室联合中国科学院大学在 ICML 2025 发表论文,提出 ChunkFlow 方案,实现变长及超长序列数据的高效训练。该方案显著提升 Qwen 模型训练性能,端到端性能最高提升 4.53 倍,大幅降低 GPU 成本。

422 0
|
9月前
|
存储 安全 Java
|

Java 学习路线 35 掌握 List 集合从入门到精通的 List 集合核心知识

本文详细解析Java中List集合的原理、常用实现类(如ArrayList、LinkedList)、核心方法及遍历方式,并结合数据去重、排序等实际应用场景,帮助开发者掌握List在不同业务场景下的高效使用,提升Java编程能力。

563 0
|
9月前
|
机器学习/深度学习 算法 Java
|

Java 大视界 -- Java 大数据机器学习模型在舆情分析中的情感倾向判断与话题追踪(185)

本篇文章深入探讨了Java大数据与机器学习在舆情分析中的应用,重点介绍了情感倾向判断与话题追踪的技术实现。通过实际案例,展示了如何利用Java生态工具如Hadoop、Hive、Weka和Deeplearning4j进行舆情数据处理、情感分类与趋势预测,揭示了其在企业品牌管理与政府决策中的重要价值。文章还展望了多模态融合、实时性提升及个性化服务等未来发展方向。

375 0
|
9月前
|
监控 API 数据处理
|

淘宝商品详情API响应数据解析的详细说明

本内容介绍了淘宝商品详情API的调用与数据解析方法,涵盖商品基础信息、价格、库存、规格、促销、物流等关键数据的获取方式。提供了核心接口如taobao.item.get、taobao.itemprops.get、taobao.item.sku.get的功能说明及Python请求示例,适用于跨平台数据整合、价格监控、自动化运营等场景,并提示了字段兼容性、错误处理及数据更新等注意事项。

299 0
|
9月前
|
人工智能 缓存 并行计算
|

《VGSP-C (Virtual GPU Scheduling Platform on CPU):基于CPU的虚拟GPU调度平台》

VGSP-C(基于CPU的虚拟GPU调度平台)提出通过“软仿真+并行调度+多机协同”三大路径,在普通CPU上模拟GPU并行计算行为。适用于资源受限或低成本场景,支持单机推理、分布式训练与极简CPU集群部署,提供统一编程接口与弹性扩展能力,助力AI普惠与算力再平衡。

328 0
|
9月前
|
存储 供应链 调度
|

构建面向电子行业的垂直信息采集系统:Digikey元器件搜索实战

本文介绍了一个面向电子行业的自动化信息采集系统,以Digikey平台为例,实现从关键词搜索、代理请求、页面解析到数据存储的全流程抓取。系统采用模块化设计,支持定时采集与数据归档,助力企业提升采购决策效率与数据化水平。

211 0
|
9月前
|
分布式计算 监控 大数据
|

大数据之路:阿里巴巴大数据实践——离线数据开发

该平台提供一站式大数据开发与治理服务,涵盖数据存储计算、任务调度、质量监控及安全管控。基于MaxCompute实现海量数据处理,结合D2与DataWorks进行任务开发与运维,通过SQLSCAN与DQC保障代码质量与数据准确性。任务调度系统支持定时、周期、手动运行等多种模式,确保高效稳定的数据生产流程。

394 0
|
9月前
|
存储 算法 API
|

还社交一个自由的未来:去中心化社交网络,会是下一个“推特”吗?

还社交一个自由的未来:去中心化社交网络,会是下一个“推特”吗?

270 5
|
9月前
|
机器学习/深度学习 人工智能 PyTorch
|

零基础入门CNN:聚AI卷积神经网络核心原理与工业级实战指南

卷积神经网络(CNN)通过局部感知和权值共享两大特性,成为计算机视觉的核心技术。本文详解CNN的卷积操作、架构设计、超参数调优及感受野计算,结合代码示例展示其在图像分类、目标检测等领域的应用价值。

495 7
|
9月前
|
传感器 算法 安全
|

机器人路径规划和避障算法matlab仿真,分别对比贪婪搜索,最安全距离,RPM以及RRT四种算法

本程序基于MATLAB 2022A实现机器人路径规划与避障仿真,对比贪婪搜索、最安全距离、RPM和RRT四种算法。通过地图模拟环境,输出各算法的路径规划结果,展示其在避障性能与路径优化方面的差异。代码包含核心路径搜索逻辑,并附有测试运行图示,适用于机器人路径规划研究与教学演示。

1009 64
|
9月前
|
机器学习/深度学习 人工智能 自然语言处理
|

OpenSearch 视频 RAG 实践

本文介绍了 OpenSearch LLM 版中视频 RAG 的具体实现流程。

901 4
来自: 智能搜索推荐  版块
|
9月前
|
SQL JSON 分布式计算
|

Spark SQL架构及高级用法

Spark SQL基于Catalyst优化器与Tungsten引擎,提供高效的数据处理能力。其架构涵盖SQL解析、逻辑计划优化、物理计划生成及分布式执行,支持复杂数据类型、窗口函数与多样化聚合操作,结合自适应查询与代码生成技术,实现高性能大数据分析。

586 2
|
9月前
|

淘宝图搜接口功能解析

淘宝图搜是基于图像识别的便捷购物工具,支持通过图片查找商品,省去手动输入关键词的麻烦。本文详解其功能、常见问题及解决方法,助你高效使用这一工具。

645 0
|
9月前
|
存储 并行计算 算法
|

CUDA性能优化实战:7个步骤让并行归约算法提升10倍效率

https://avoid.overfit.cn/post/af59d0a6ce474b8fa7a8eafb2117a404

531 1
|
9月前
|
数据采集 人工智能 自然语言处理
|

DistillQwen-ThoughtY:通过变长思维链蒸馏,全面提升模型推理能力!

阿里云 PAI 团队基于 EasyDistill 框架,创新性地采用推理冗余度(RV)和认知难度(CD)双指标筛选机制,实现思维链与模型能力的精准匹配,发布新一代推理模型 DistillQwen-ThoughtY。相关模型和数据集已在 hugging face/ModelScope 等开源社区开放,配套 EasyDistill 框架支持高效知识蒸馏。近期内将推出 DistillQwen-ThoughtY 模型在 PAI-ModelGallery 的一键部署、训练和评测实践。

829 2
来自: 人工智能平台PAI  版块
|
10月前
|
开发者
|

HarmonyOS实战:GIF图下载突破5M限制保存到相册

本文介绍了在鸿蒙开发中解决图片下载问题的方法,包括突破5M流限制及识别图片真实格式(如GIF)。通过分段下载和类型判断,有效解决了大图下载失败及格式错误问题,适合开发者参考实践。

269 0
|
10月前
|
存储 人工智能 运维
|

企业级MLOps落地:基于PAI-Studio构建自动化模型迭代流水线

本文深入解析MLOps落地的核心挑战与解决方案,涵盖技术断层分析、PAI-Studio平台选型、自动化流水线设计及实战构建,全面提升模型迭代效率与稳定性。

433 6
|
10月前
|
人工智能 自然语言处理 前端开发
|

AI + 低代码,程序员的副驾还是替代者?

AI + 低代码,程序员的副驾还是替代者?

357 0
|
10月前
|
缓存 人工智能 负载均衡
|

PAI 重磅发布模型权重服务,大幅降低模型推理冷启动与扩容时长

阿里云人工智能平台PAI 平台推出模型权重服务,通过分布式缓存架构、RDMA高速传输、智能分片等技术,显著提升大语言模型部署效率,解决模型加载耗时过长的业界难题。实测显示,Qwen3-32B冷启动时间从953秒降至82秒(降幅91.4%),扩容时间缩短98.2%。

634 1
来自: 人工智能平台PAI  版块
|
10月前
|
JSON API 数据格式
|

深入研究:淘宝天猫关键词搜索接口详解

淘宝和天猫提供关键词搜索商品的API接口,支持开发者按关键词获取商品列表及相关数据。功能包括通过搜索关键词(q)返回商品基本信息,如ID、标题、价格、图片、销量等。支持排序(sort)、分页(page_no/page_size)、价格区间筛选(start_price/end_price)及分类搜索(cat)。返回JSON格式数据,含商品ID、标题、价格、图片链接、详情页链接和销量等字段。

429 0
|
10月前
|
API 开发者
|

1688API接口终极宝典:列表、详情全掌握,图片搜索攻略助你一臂之力

1688为开发者提供涵盖商品、交易、物流等核心业务的丰富API。商品类API支持搜索、详情获取及图片搜索等功能;交易类API可实现订单创建、查询与支付;物流类API提供报价、轨迹查询及服务商列表获取等服务,满足多样化开发需求。

380 0
|
10月前
|
JSON 监控 API
|

深入研究:shopee商品详情API接口Python攻略

Shopee 商品详情 API 是用于获取 Shopee 平台商品详细信息的接口,支持开发者提取商品标题、价格、库存、描述和图片等多维度数据。该接口适用于电商数据分析、比价工具开发及商品监控等场景。请求方式为 GET,需提供 itemid(商品 ID)和 shopid(店铺 ID),返回格式为 JSON。部分功能可能需要 API 密钥或访问令牌认证。以马来西亚站点为例,URL 为 shopee.com.myapi/v4/item/get,不同国家站点域名可能有所不同。

318 5
|
10月前
|
机器学习/深度学习 监控 Android开发
|

AppTrace技术全景:开发者视角下的工具链与实践经验

本文全面介绍了AppTrace技术,涵盖其核心价值、实现方案及实战经验。通过性能剖析、行为分析、异常诊断和优化验证等功能,开发者可深入了解应用行为并解决性能问题。文章详细解析了iOS与Android平台的原生工具(如Signpost API、Android Profiler)以及跨平台解决方案(如Firebase Performance Monitoring)。同时分享了列表滚动卡顿优化和内存泄漏排查等实战案例,并探讨商业级APM工具与开源工具的应用场景。最后展望了AI驱动异常检测、端侧机器学习分析等未来趋势,强调在追踪深度与用户隐私间寻求平衡的重要性。

167 2
|
10月前
|
数据采集 Python
|

如何通过requests和time模块限制爬虫请求速率?

如何通过requests和time模块限制爬虫请求速率?

371 3
|
10月前
|
监控 安全 测试技术
|

5步快速获取电商API接口

电商API接口是实现电商平台数据交互的重要工具。获取途径主要包括电商平台开放平台(如淘宝、京东等)和第三方API市场,涵盖商品管理、订单处理等功能。获取步骤包括:明确需求、选择服务、注册开发者账号、获取API密钥、阅读文档、开发测试、部署上线及监控优化。过程中需注意法律法规、使用限制和技术支持,确保接口安全稳定运行,满足业务需求。

668 1
|
10月前
|
Java 关系型数据库 MySQL
|

2025 年互联网公司校招 Java 面试题总结及答案实操示例解析

本项目基于Spring Boot 3与Java 17技术栈,围绕校园招聘常见面试题,提供核心知识点的实操示例。涵盖多线程、RESTful API设计、数据库操作(Spring Data JPA)、事务管理及异常处理等。通过完整代码实现与运行步骤,帮助理解用户管理、线程池配置等实际应用场景。资源包含项目结构、关键代码示例(如User实体类、UserService服务层、ThreadService多线程实现)及数据库迁移脚本,适合深入学习与实践。环境要求:JDK 17+、Maven 3.8+、MySQL 8.0+。

344 3
|
11月前
|
XML 数据挖掘 API
|

1688商品详情API接口指南

1688 商品详情 API 是阿里巴巴提供的开发者接口,用于获取 1688 平台商品的详细信息,包括 ID、标题、价格、销量、评价、SKU 等。通过构造 HTTP 请求并使用 App Key 和 App Secret 验证,可实现安全调用。该接口适用于电商网站、内容管理系统、数据分析工具及第三方开发场景,助力商品信息同步、市场分析与应用开发。

554 0
|
11月前
|
JSON 算法 API
|

淘宝天猫店铺商品API接口全方位接入指南

本攻略介绍淘宝天猫店铺商品API接口的使用方法,涵盖接口概述、请求方式、参数说明及响应数据等内容。核心接口如`tb.items.onsale.get`和`tb.items.inventory.get`,支持获取出售中或库存商品信息,采用HTTP POST请求,返回JSON格式数据。通用参数包括`app_key`、`timestamp`等,业务参数涉及`seller_nick`、分页设置等。响应数据包含商品ID、标题、价格、图片URL等关键信息,助力开发者高效整合与分析店铺商品数据,并提供Python请求示例方便实践。

392 3
|
11月前
|
Java 开发者
|

华为仓颉语言初识:结构体struct和类class的异同

华为仓颉语言是一种基于鸿蒙系统的新型编程语言,结合了Java和C的特点,支持与ArkTs互相调用,提升应用性能。本文详细对比了仓颉语言中结构体(struct)和类(class)的区别:struct不支持继承,赋值时为值传递;而class支持单继承、多实现,赋值时为引用传递。两者均支持构造函数及成员访问修饰符,但struct新增internal修饰符限制包内访问。开发者需根据实际需求选择合适的使用场景。

409 3
|
11月前
|
存储 缓存 测试技术
|

80510次/秒,阿里云图计算引擎刷新全球纪录!

近日,LDBC公布最新SNB Interactive基准测试结果,阿里云开源的GraphScope Flex以超80,000 QPS打破历史纪录,性能较第二名提升1倍。作为首个开源的大规模图计算引擎,GraphScope在金融风控、网络安全等领域广泛应用。其通过全栈优化与自研GOpt框架,在声明式与命令式查询双场景全面领先,大幅提升了图查询性能,研究成果已被SIGMOD 2025收录。

286 12

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

0
今日
69327
内容
128
活动
439807
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务