|
7月前
|
存储 机器学习/深度学习 人工智能
|

文档切分实战:5种方法详解,打造高效RAG系统的第一步

本文深入解析RAG中至关重要的文档切分技术,系统介绍5种主流策略(句子、定长、重叠、递归、语义切分),结合代码示例与实战调优技巧,涵盖PDF/Markdown/代码等多格式处理,并提供质量评估与避坑指南,助你打造高精度、高效率的私有知识库。

1336 7
|
7月前
|
数据采集 人工智能 监控
|

AI也能“专业进修”?不用写代码,教你用微调打造行业专属模型

本文深入浅出解析AI微调(Fine-tuning)技术,聚焦如何让通用大模型成长为行业专才。详解LoRA等高效微调原理,对比RAG优劣,提供数据准备、模型选择、在线训练到效果评估的四步实战指南,助力零基础用户低成本打造专属专业AI。(239字)

485 10
|
7月前
|
人工智能 自动驾驶 算法
|

智能体来了!2026 AI 元年:在全新赛道上重构人类生产力边界

2026年被定义为“智能体元年”:AI从“能说”跃升为“能干”,实现自主决策、跨系统协作与具身执行。产业迎来智能体市场、数字劳动力网络和可信治理三大爆发点,人类角色转向目标设定与智能体调度。技术终指向人的升华。(239字)

578 3
|
7月前
|
机器学习/深度学习 供应链 监控
|

淘宝图片搜索API(taobao.item_search_img)

淘宝图片搜索API是阿里基于深度学习的视觉检索服务,支持以图搜同款/相似商品,毫秒级响应、高准确率。提供商品、交易、店铺等结构化数据,适配选品、同款监控、智能上架等场景,合规高效,助力电商数字化升级。(239字)

838 7
|
7月前
|
缓存 搜索推荐 算法
|

RAG 的上限不在模型,而在你怎么切文档

RAG失效常因切分不当:碎片化chunk导致信息割裂、语义丢失。本文直击核心——切分不是预处理,而是知识工程:需结构感知、保留标题/表格/步骤完整性,以“可独立阅读、可直接引用”为黄金标准,避免“检索准、答案错”。

460 1
|
7月前
|
缓存 网络协议 安全
|

若无 DNS 与代理 IP,我们的上网体验会崩塌吗?

DNS是互联网“快递员”,负责将域名精准解析为IP地址;代理IP则是“神秘信使”,隐匿真实身份、中转请求,保障隐私与访问自由。二者协同如接力赛:DNS先定位代理,代理再查目标IP,共同构建高效、安全、灵活的网络访问通路。

362 3
|
7月前
|
机器学习/深度学习 搜索推荐 算法
|

推荐系统为啥都长一个样?聊聊「离线训练 + 在线召回 + 排序」这套大数据架构

推荐系统为啥都长一个样?聊聊「离线训练 + 在线召回 + 排序」这套大数据架构

435 0
|
7月前
|
机器学习/深度学习 存储 自然语言处理
|

量子模拟:我们正在用“不确定性”,重新理解这个确定的世界

量子模拟:我们正在用“不确定性”,重新理解这个确定的世界

217 0
|
7月前
|
存储 人工智能 安全
|

重构认知——AI智能体来了从0到1的落地工程全指南

本文系统阐述AI智能体开发方法论:突破“调参”思维,以感知、决策、执行、记忆四大架构为基,提出从场景锁定到评估优化的“五步跃迁法”,助力开发者构建具备行业深度与自主行动力的数字生命。(239字)

494 0
|
7月前
|
机器学习/深度学习 安全 算法
|

为什么很多团队从 PPO 转向 DPO,却又离不开 PPO

PPO与DPO并非新旧替代关系,而是分属对齐不同阶段的工具:PPO用于行为“塑形”(强干预、纠偏乱序),DPO用于偏好“定型”(稳定微调、精细排序)。选型关键看模型是否已基本可控——乱则用PPO,稳则用DPO。

312 1
|
7月前
|
安全 算法 C++
|

PPO 真正的应用场景,和你想的可能不一样

PPO并非“万能增强器”,而是精准解决模型“行为偏好错位”的工具:当模型“会但总选错”(如安全拒答生硬、风格不稳、高风险下过度自信)时,PPO通过人类偏好反馈重塑其选择倾向;若问题本质是“不会”,则PPO无效甚至有害。用对场景,事半功倍。

618 1
|
7月前
|
自然语言处理 安全 机器人
|

智能客服不是问答机器人,微调更不是“多训点数据”

智能客服失败常因误将“问答机器人”当“服务处理器”。其核心不在答对,而在判断:是否该答、答到哪、何时转人工、如何安抚。微调非万能,仅适用于稳定风格、固化明确规则、强化安全拒答三类场景;知识更新、动态状态、争议判断等问题,应交由RAG或规则系统处理。

260 1
|
7月前
|
人工智能 监控 API
|

Opus 4.5、GPT-5.2 与 Gemini 3 Pro:企业级场景下的大模型工程表现对比

本文从工程与生产视角,对比Opus 4.5、GPT-5.2、Gemini 3 Pro三款大模型在输出一致性、可控性、长上下文、接口确定性等维度的表现,强调企业级AI选型应重稳定性与系统友好度,而非单纯比拼能力。

502 4
来自: 人工智能平台PAI  版块
|
7月前
|
SQL 存储 人工智能
|

数据工程新范式:NoETL 语义编织如何激活海量埋点数据价值?

数据工程师将从重复、低价值的 SQL 脚本编写和 ETL 运维中解放出来,转向更具战略性的工作。

326 2
|
7月前
|
数据库
|

向量数据库实战:从“看起来能用”到“真的能用”,中间隔着一堆坑

本文揭示向量数据库实战的七大关键陷阱:选型前需明确业务本质(模糊匹配 or 精确查询?);embedding 比数据库本身更重要,决定语义“世界观”;文档切分是核心工程,非辅助步骤;建库成功≠可用,TopK 准确率会随数据演进失效;“相似但不可用”是常态,必须引入 rerank;需建立可追溯的bad case排查路径;向量库是长期系统,非一次性组件。核心结论:难在“用对”,不在“用上”。

517 4
|
7月前
|
数据采集 人工智能 自然语言处理
|

Agentic Search: AI驱动的下一代企业搜索

Agentic Search是阿里云OpenSearch推出的AI搜索新范式,以智能体(Agent)为核心,融合深度检索、多步推理、工具调用与多模态理解,实现从“被动响应”到“主动执行”的跃迁。支持对话、规划、自适应三模式,覆盖问答、研究、客服、报告生成等全场景,助力企业知识库升级为动态业务引擎。

1810 2
|
7月前
|
人工智能 搜索推荐 数据挖掘
|

深度 AI 学术是怎样学习百度学术、谷歌学术的先进经验的?

深度AI学术融合百度学术与Google Scholar优势,聚合2.8亿文献,支持中英文语义检索、AI自动摘要、引用追踪及趋势分析;创新提供批量翻译、自定义维度解析与学术报告生成,打造智能科研助手。(239字)

532 7
来自: 智能搜索推荐  版块
|
7月前
|
XML JSON API
|

淘宝商品详情API(tb.item_get)

本文详解淘宝开放平台商品详情核心API(如item_get),涵盖对接流程、权限申请、请求规范、参数说明及返回字段,并列举代购集运、选品分析、比价导购等典型应用场景,助力开发者合规高效获取商品数据。(239字)

892 3
|
7月前
|
算法 安全 量子技术
|

当量子计算敲门:密码学真的要“下岗”了吗?——量子计算对密码学的冲击,没你想的那么玄,也没你想的那么远

当量子计算敲门:密码学真的要“下岗”了吗?——量子计算对密码学的冲击,没你想的那么玄,也没你想的那么远

266 6
|
7月前
|
人工智能 搜索推荐 API
|

智能体来了从 0 到 1:数据、工具与规则的协同范式

随着AI深入产业,单一模型已难支撑复杂流程。智能体作为以大模型为核心、融合数据(知识/记忆)、工具(执行接口)与规则(行为约束)的协同系统,实现感知—推理—执行闭环。其价值在于三者可复用、可治理的工程化协同,而非模型本身。

298 6
|
7月前
|
人工智能 资源调度 供应链
|

智能体对传统行业冲击:中后台,才是产业重塑的第一现场

本文探讨AI从“流程自动化”迈向“认知自主化”后,对传统行业结构性变革的影响:中后台(非一线岗位)正率先被智能体重构——因其任务具数字原生性、决策密度高、协调成本大。供应链、财务、人力三大场景首当其冲。组织正加速演进为“沙漏型”:价值重心转向决策自动化与智能体策略成熟度。(239字)

358 8
|
7月前
|
数据采集 监控 算法
|

模型不是坏了,是世界变了——聊聊数据偏差(Data Drift)检测与自动化响应这件“迟早要还的债”

模型不是坏了,是世界变了——聊聊数据偏差(Data Drift)检测与自动化响应这件“迟早要还的债”

357 4
|
7月前
|
安全 数据库 C++
|

为什么你用了向量数据库,系统反而更复杂了

向量数据库并非万能解药:它擅长模糊检索与长尾问题,但仅解决“相似性”而非“正确性”。其优势依赖文档质量、切分合理与embedding适配;反之易致结果玄学、不可解释、调试困难。用前须问:这真是个相似性问题?

322 3
|
7月前
|
存储 机器学习/深度学习 人工智能
|

别让大模型“失忆”:手把手教你用向量数据库打造它的专属知识库

本文深入浅出地讲解向量数据库原理与实践:用“语义身份证”比喻Embedding,以图书管理员类比关键词与语义搜索差异;手把手用Python+Faiss+BGE搭建中文语义检索系统,并详解RAG流程、效果评估与调优要点,助你为大模型装配真正懂业务的“外挂大脑”。

752 4
|
7月前
|
算法 安全 物联网
|

PPO 实战:第一次跑通 PPO,到底难在哪

PPO实战难点不在算法理解,而在系统性不确定:动态数据、不稳reward、多目标冲突。关键在于明确对齐目标、用SFT模型起步、必备reference、设计偏好型reward、聚焦policy更新、善用KL系数调控风险,并以行为变化而非loss曲线评估进展——耐心跑通最小闭环,才是成功核心。

486 0
|
7月前
|
存储 安全 数据安全/隐私保护
|

企业硬盘加密软件选型指南:DiskCrypt与BitLocker功能、性能与应用场景全对比

本文对比国产安得卫士DiskCrypt与微软BitLocker两款硬盘加密软件,在加密深度(扇区级vs分区级)、认证机制、密钥管理、应急恢复、国产化兼容及集中管控等维度展开分析,助力用户按安全等级、合规要求与使用场景科学选型。(239字)

428 0
|
7月前
|
算法 安全 C++
|

PPO 微调的本质:它不是在教模型“更聪明”

PPO微调本质是“行为选择”而非“知识学习”:它不教模型新能力,而是通过奖励信号与KL约束,在已有能力空间中重校输出概率分布,对齐人类偏好。核心只更新Policy,Reward引导方向,KL保障安全,专治风格、安全、边界问题。

303 0
|
7月前
|
机器学习/深度学习 人工智能 监控
|

从原理到实践:零代码也能搞定的PPO微调全攻略

本文深入浅出解析PPO(近端策略优化)算法——大模型对齐人类偏好的核心技术。通过“温和教练”比喻、四步原理拆解与实操指南,零基础也能理解其剪切机制、优势函数与稳定训练逻辑,并亲手微调出更懂你的AI。(239字)

644 0
|
7月前
|
机器学习/深度学习 人工智能 算法
|

告别关键词搜索:手把手教你用向量数据库,解锁大模型的“最新”知识

本文用通俗语言详解向量数据库原理与实践:它通过“语义向量化”实现按意思而非关键词检索,是RAG系统中连接大模型与私有数据的核心“外挂大脑”。附Faiss+Sentence-Transformers实战Demo,10分钟搭建可运行的语义检索系统。(239字)

928 0
|
7月前
|
数据采集 安全 机器人
|

慢一点,并不会让你更安全

本文讲述了作者在编写爬虫时,从依赖固定延时避免被封IP的错误做法,到意识到代理IP和随机延时的重要性。作者分享了使用代理IP和随机延时的最小可行方案,并强调了代理IP在爬虫项目中的基础性作用。

294 1
|
7月前
|
存储 分布式计算 数据挖掘
|

NumPy技术文档:科学计算的基石

本教程系统讲解NumPy核心知识:从环境搭建与Hello World入门,到ndarray、广播机制、向量化运算三大核心概念;通过销售额分析实战,涵盖统计计算、移动平均、异常检测等典型应用;并总结最佳实践、常见陷阱及进阶方向,助你高效掌握科学计算基石。

519 13
|
7月前
|
SQL 存储 分布式计算
|

【赵渝强老师】基于Hudi的大数据湖仓一体架构

Apache Hudi(Hadoop Upserts Delete and Incremental)是开源的流式数据湖平台,支持事务、高效upsert/delete、增量处理、多引擎SQL读写(Spark/Flink/Trino等),自动管理小文件与压缩,兼容云存储,助力构建湖仓一体架构。

993 3
|
7月前
|
搜索推荐 C++ 索引
|

RAG 的失败,大多在“切文档”那一刻就已经注定

RAG项目常败在文档切分:切得过小导致语义断裂,固定长度破坏表格/列表/步骤等关键结构。真正决定效果的,不是模型或向量库,而是chunk是否具备“语义完整性”——能否独立支撑答案。切分应以“生成可用性”为第一标准,而非检索便利性。

326 4
|
7月前
|
供应链 监控 前端开发
|

淘宝商品详情API接口:赋能电商全链路数据化运营的核心工具

淘宝商品详情API是官方合规接口,提供稳定、结构化商品数据,涵盖基础信息、价格库存、规格服务及评价销量四大维度,助力商家选品、定价、营销与优化,显著提升数据获取效率与合规性。(239字)

290 1
|
7月前
|
运维 Linux 定位技术
|

别只看 QPS:一级 NTP 时间服务器在工程现场到底靠什么兜底

本文以NTS-H-442002为例,剖析企业级Stratum 1时间服务器的关键设计:x86高并发架构保障稳定授时;GPS/北斗+蜂窝多源冗余提升可用性;高稳OCXO实现失锁后72小时<1ms守时精度;1PPS/10MHz/TOD物理接口满足硬同步需求;双电源、热备、加密与运维能力确保长期可靠。

285 4
|
7月前
|
Java 程序员 量子技术
|

从经典到量子:当编程不再是“一步一步来”

从经典到量子:当编程不再是“一步一步来”

302 6
|
7月前
|
运维 安全 算法
|

RAG 不是万能解,这些场景你一开始就不该用

RAG并非万能,默认滥用反致系统复杂、效果难测。它仅解决“信息获取”,不提升模型能力。最适合四类场景:动态知识更新、需答案溯源、长尾问题密集、需求尚不明确。慎用于强推理、隐性经验、高实时性及高确定性要求场景。核心判断:问题是“找不到信息”,还是“不会处理信息”?

484 10
|
7月前
|
机器学习/深度学习 缓存 分布式计算
|

别再把 Spark / Dask 当“放大版 Pandas”了——聊聊大规模特征计算那些真能救命的技巧

别再把 Spark / Dask 当“放大版 Pandas”了——聊聊大规模特征计算那些真能救命的技巧

320 5
|
7月前
|
自然语言处理 监控
|

RAG 效果差,80% 的问题和模型无关

RAG效果差,往往错不在模型,而在检索环节:切分不当、检索不相关、TopK过载、缺乏Rerank等。本文揭示RAG本质是“自然语言检索系统”,80%问题源于数据组织与检索质量,而非模型能力。重拾工程思维,先夯实检索,再谈生成。

481 7
|
7月前
|
人工智能 API
|

智能体来了从 0 到 1:为什么一开始必须划清智能体的任务边界?

智能体开发切忌“全能幻想”!本文指出:任务边界(输入范围、工具权限、决策规则)是智能体从Demo走向落地的生命线——它不设限能力,而是将LLM的概率输出转化为可控、稳定、可评估的工程系统。边界清晰,方能降幻觉、控成本、提准确率。

820 6
|
7月前
|
机器学习/深度学习 人工智能 并行计算
|

想打造专属AI?微调大模型前,你必须搞懂这13个关键概念

本文系统解析大模型微调的13个核心概念,涵盖硬件基石(GPU/显存/精度)、训练目标(SFT/RLHF等)、关键设置(Batch Size/Epoch)及模型结构(层数/隐藏维度/显存开销),并提供LoRA实战路径与效果评估方法,助力个人与企业低成本打造专属AI。(239字)

438 0
|
7月前
|
人工智能 安全 物联网
|

企业专属AI从0到1:避开隐私雷区,用你的数据安全微调大模型

本文详解企业如何安全微调大模型:直击隐私痛点,融合差分隐私(梯度裁剪+噪声注入)与LoRA高效微调,在保障GDPR/HIPAA合规前提下,实现数据不出域、模型更懂业务。附低代码平台推荐与实操路径,兼顾安全性与可用性。(239字)

711 0
|
7月前
|
SQL 存储 人工智能
|

数据工程新范式:基于 NoETL 语义编织实现自助下钻分析

将分析需求响应时间从“周级”缩短至“分钟级”,实现真正的自助探索与归因分析。

267 0
|
7月前
|
安全 测试技术 数据安全/隐私保护
|

微调与安全隐私:为什么微调会放大风险

微调不是“温和调教”,而是将敏感信息固化进模型参数的风险交换过程。它会放大偶然数据中的隐私隐患,导致过拟合式泄露、隐式模式记忆与不可撤回的记忆固化。安全边界模糊,内部使用反而更易触发风险。真正可控的路径:先RAG,再小步微调,始终以风险而非效果为决策核心。

348 0

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

14
今日
69958
内容
128
活动
440116
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务