|
8月前
|
数据采集 消息中间件 缓存
|

别再一把梭TF-IDF了:从文本清洗到向量化,一条真正“能用”的NLP数据管道

别再一把梭TF-IDF了:从文本清洗到向量化,一条真正“能用”的NLP数据管道

706 2
|
8月前
|
SQL 搜索推荐 数据挖掘
|

检索的终局是决策:OLAP 如何重塑 Hologres 多模混合检索的价值边界

HSAP 2.0是Hologres提出的混合搜索与实时分析架构,首次将全文/向量检索与OLAP能力深度集成,实现“边查边算”。支持一条SQL完成语义匹配、结构化过滤与多维聚合,消除ETL延迟,保障强一致性,让检索系统从信息工具跃升为驱动商业决策的实时洞察引擎。

485 2
来自: 实时数仓 Hologres  版块
|
8月前
|
监控 数据挖掘 API
|

从踩坑到高效落地:淘宝商品详情API的实操心得

淘宝商品详情API提供全维度商品数据,含基础信息、详情页HTML、SKU、价格、销量等,支持比价、代购、数据分析及内容电商等场景,涵盖item.get、item.get_pro等核心接口,接入便捷高效。

818 4
|
8月前
|
人工智能 vr&ar 开发工具
|

基于 Rokid 灵珠与 UXR 3.0 的 AR 智能卡路里识别系统实战

本项目为“AR智能卡路里计算器”,基于Rokid灵珠(AR Lite/Studio)与UXR 3.0 SDK开发。用户佩戴眼镜直视食物,系统通过空间计算实时识别并弹出热量数据,支持水果/正餐双模式切换。采用程序化3D建模、零美术资源依赖、多模态交互(键鼠→手柄→手势捏合),实现“空间即看即得”的沉浸式健康饮食辅助体验。(239字)

638 3
|
8月前
|
自然语言处理 调度 语音技术
|

一行 Python,三种世界:聊聊文本 + 图像 + 音频的多模态协同生成

一行 Python,三种世界:聊聊文本 + 图像 + 音频的多模态协同生成

494 4
|
9月前
|
数据采集 供应链 物联网
|

别再只会调用 API 了:一步步教你用 Python Fine-Tune 一个定制化大模型

别再只会调用 API 了:一步步教你用 Python Fine-Tune 一个定制化大模型

776 4
|
9月前
|
机器学习/深度学习 人工智能 物联网
|

春节祝福“AI味”太重?我用30分钟微调了一个能记住你我故事的专属模型

用30分钟微调Qwen3-32B,打造专属“马年祝福语创意伙伴”。借助LLaMA-Factory Online与PPO强化学习,让AI从“说正确的话”升级为“说走心的话”——懂关系、记细节、会调侃、有温度。技术不冰冷,祝福才动人。

556 10
|
9月前
|
人工智能 算法 物联网
|

别再骂AI不懂人情世故了,是你没把它“喂”对

春节祝福别再复制粘贴!本文分享如何用30分钟微调Qwen3-32B模型,借助LLaMA-Factory Online平台,注入“关系颗粒度”六维数据(称呼、关系、交往细节等),让AI告别公文腔,学会因人制宜、带梗走心的拜年话——技术不炫技,只为一句刚刚好的祝福。(239字)

516 1
|
9月前
|
人工智能 小程序 物联网
|

为了不让拜年文案像“电子挽联”,我把Qwen3拉去做了30分钟特殊训练

春节前,团队开发马年祝福生成器,直面大模型“懂语法却不懂人情”的痛点。放弃Qwen3的深度思考能力,微调其基座模型,聚焦“关系感知”与场景适配;用人工种子+结构化数据(称呼/关系/交往细节等)训练,让祝福更自然、有分寸。实践证明:选模型不在最强,而在最听话。(239字)

450 1
|
9月前
|
机器学习/深度学习 人工智能 自然语言处理
|

PPO算法解密:AI是如何从“机械回复”进化到“自然对话”的

PPO(近端策略优化)是RLHF核心技术,通过限制策略更新幅度、结合价值函数估计,让大模型学会生成自然、得体、符合人类偏好的文本,真正实现“说人话”。

531 6
|
9月前
|
数据库 C++
|

向量维度、距离函数,如何影响召回结果

本文揭示向量检索效果不佳的根源常被误判:问题不在embedding模型本身,而在于被忽视的底层选择——向量维度与距离函数。二者共同定义了“相似性”的本质,而非仅调节精度。维度决定语义表达自由度与错误类型,距离函数(L2/Cosine/Dot)则确立“何为相近”的世界观。二者强耦合,直接塑造召回空间。调参前,先问:你更怕漏召,还是误召?

500 6
|
9月前
|
安全 数据可视化 物联网
|

LoRA rank 越大越好?你可能在放大不可控行为

本文揭示LoRA微调中最隐蔽的陷阱:rank并非“效果旋钮”,而是“行为自由度开关”。调大rank不等于提升能力,实则放大不可控行为——松绑参数约束、固化数据隐性偏好、削弱可解释性,并掩盖系统设计缺陷。安全使用的关键,在于以“能否清晰归因风险”为阈值,而非追求表面效果。

597 2
|
9月前
|
SQL 人工智能 自然语言处理
|

指标中台选型技术实测:如何通过 NoETL 语义层驾驭复杂 SQL 生成

支持“存量挂载、增量原生、存量替旧”的渐进式策略,平衡价值与风险,平滑实现架构升级。

429 1
|
9月前
|
机器学习/深度学习 人工智能 JSON
|

让ChatGPT更懂你:深入浅出解析大模型微调中的强化学习(PPO/DPO篇)

本文深入浅出解析大模型对齐人类偏好的两大核心方法:PPO(需训练奖励模型、在线优化,强但复杂)与DPO(直接学习“好vs差”对比数据、离线高效、更易用)。对比原理、流程与实践,揭示为何DPO正成为主流选择,并强调高质量偏好数据与平台化工具的关键价值。(239字)

1024 9
|
9月前
|
监控 安全 网络安全
|

8080 和 3128 端口的核心区别及使用场景

HTTP代理常用端口8080与3128各有侧重:8080多用于管理监控(如Web配置界面),易记但可能被防火墙拦截;3128为标准端口,稳定性高,主供客户端正常请求转发。端口可自定义,需据安全与性能需求合理选用。

820 9
|
9月前
|
算法
|

标注不规范,大模型全白练:聊聊训练大模型背后的规模化数据治理与标注流水线

标注不规范,大模型全白练:聊聊训练大模型背后的规模化数据治理与标注流水线

685 2
|
10月前
|
自然语言处理
|

DLM在RAG中的最佳实践

ChatDLM是面向RAG的扩散语言模型,首创将Diffusion范式与MoE架构引入文本生成。通过区块扩散实现线性复杂度长文本处理,结合动态检索-生成协同、多文档深度合成与交互式可控生成,显著突破自回归模型在效率、一致性与可解释性上的瓶颈。

398 7
|
10月前
|
人工智能 供应链
|

智能体来了:2026,AI 元年开启的新赛道

2026年,AI从“能说会写”的模型跃升为“能想会做”的智能体:目标驱动、自主规划、调用工具、持续修正。它不再仅是工具,更成为现实世界的参与者。人类由此面临根本命题——重定义“参与者”,重构角色、责任与文明边界。(239字)

615 4
|
10月前
|
机器学习/深度学习 搜索推荐 算法
|

推荐系统为啥都长一个样?聊聊「离线训练 + 在线召回 + 排序」这套大数据架构

推荐系统为啥都长一个样?聊聊「离线训练 + 在线召回 + 排序」这套大数据架构

617 0
|
10月前
|
存储 机器学习/深度学习 人工智能
|

别让大模型“失忆”:手把手教你用向量数据库打造它的专属知识库

本文深入浅出地讲解向量数据库原理与实践:用“语义身份证”比喻Embedding,以图书管理员类比关键词与语义搜索差异;手把手用Python+Faiss+BGE搭建中文语义检索系统,并详解RAG流程、效果评估与调优要点,助你为大模型装配真正懂业务的“外挂大脑”。

992 4
|
10月前
|
算法 安全 物联网
|

PPO 实战:第一次跑通 PPO,到底难在哪

PPO实战难点不在算法理解,而在系统性不确定:动态数据、不稳reward、多目标冲突。关键在于明确对齐目标、用SFT模型起步、必备reference、设计偏好型reward、聚焦policy更新、善用KL系数调控风险,并以行为变化而非loss曲线评估进展——耐心跑通最小闭环,才是成功核心。

664 0
|
10月前
|
供应链 监控 前端开发
|

淘宝商品详情API接口:赋能电商全链路数据化运营的核心工具

淘宝商品详情API是官方合规接口,提供稳定、结构化商品数据,涵盖基础信息、价格库存、规格服务及评价销量四大维度,助力商家选品、定价、营销与优化,显著提升数据获取效率与合规性。(239字)

379 1
|
10月前
|
安全 测试技术 数据安全/隐私保护
|

微调与安全隐私:为什么微调会放大风险

微调不是“温和调教”,而是将敏感信息固化进模型参数的风险交换过程。它会放大偶然数据中的隐私隐患,导致过拟合式泄露、隐式模式记忆与不可撤回的记忆固化。安全边界模糊,内部使用反而更易触发风险。真正可控的路径:先RAG,再小步微调,始终以风险而非效果为决策核心。

457 0
|
10月前
|
物联网 测试技术
|

为什么 loss 几乎没用:微调里最容易让人“自嗨”的指标

本文揭示了大模型微调中一个常见误区:过度依赖loss曲线判断训练效果。loss仅反映模型对训练数据的拟合程度,并不衡量实际表现。它可能平稳下降,但模型输出无改善甚至变差。尤其在SFT/LoRA微调中,loss易被“虚假优化”,掩盖行为偏移、泛化缺失等问题。真正关键的是人工对照输出变化,结合loss作为辅助参考,而非决策核心。

1335 5
|
10月前
|
数据采集 并行计算 算法
|

从 0 到跑通一次微调:别急着追效果,先让它“真的动起来”

微调最难的不是算法,而是“跑通全流程”。首次微调应聚焦简单目标:让模型回答更规范、语气更一致。避免复杂数据与环境折腾。loss下降不等于成功,关键看输出是否按预期改变。跑通一次,复盘流程,才是真正入门。

435 5
|
10月前
|
算法 C++
|

PPO vs DPO:不是谁淘汰谁,而是你用错了位置

PPO与DPO并非替代关系,而是解决不同问题的工具:PPO适合行为对齐与动态探索,DPO擅长偏好学习与精细优化。选择应基于业务阶段,而非盲目跟风。

710 1
|
10月前
|
存储 传感器 缓存
|

边缘到云:数据不是“搬家”,而是一场精打细算的流动博弈

边缘到云:数据不是“搬家”,而是一场精打细算的流动博弈

260 8
|
10月前
|
数据采集 人工智能 监控
|

从原理到实操:大模型微调效果评估完全指南

微调大模型后如何判断效果?本文系统讲解评估核心方法:结合人工与自动化评估,覆盖通用能力与专项技能。通过明确目标、构建测试集、选用工具(如OpenCompass)、分析结果四步,打造完整评估体系。强调“对比”与“迭代”,助你避免灾难性遗忘,真实提升模型性能。

839 3
|
10月前
|
机器学习/深度学习 人工智能 算法
|

光伏预测算法:AI 如何“看天吃饭”,把不确定性算明白

光伏预测算法:AI 如何“看天吃饭”,把不确定性算明白

529 10
|
10月前
|
消息中间件 分布式计算 Kafka
|

别再纠结了:Lambda 还是 Kappa?流批统一这件事,真没你想得那么玄乎

别再纠结了:Lambda 还是 Kappa?流批统一这件事,真没你想得那么玄乎

586 5
|
10月前
|
人工智能 缓存 算法
|

【AI大模型面试宝典九】- 推理部署篇

【AI大模型面试宝典】聚焦推理加速核心技术:KV-Cache优化、连续批处理、投机解码、模型并行等,结合vLLM实战与面试高频题解析,帮你系统掌握得分要点,高效斩获offer!点赞关注,持续更新中~

1153 0
来自: 人工智能平台PAI  版块
|
10月前
|
机器学习/深度学习 传感器 算法
|

Python | K折交叉验证的参数优化的弹性网络回归预测及可视化算法

本教程介绍基于Python的K折交叉验证与参数优化的弹性网络回归预测算法,涵盖贝叶斯、随机及网格搜索三种调参方法,结合SHAP分析、密度散点图与热力图等可视化技术,适用于多领域回归任务,代码及数据完整可复现。

475 0
|
10月前
|
人工智能 自然语言处理 搜索推荐
|

当AI搜索“偏爱”某些信息:GEO优化的技术逻辑与生活影响

AI搜索时代,信息分发由GEO优化主导:它通过语义匹配、结构化呈现与可信度背书,让优质内容被AI“选中”。从亲子游到咖啡机推荐,企业、个人皆需掌握这一新规则,重塑信息传播方式,提升曝光效率。

814 2
|
10月前
|
SQL 存储 运维
|

企业落地 ChatBI,如何构建可信可靠的数据底座?

传统宽表架构在数据口径一致性、维护成本和灵活性上已难以支撑企业级 ChatBI 的规模化应用,而基于 NoETL 明细语义层的方案正成为新一代数据底座的主流选择。

442 7
|
10月前
|
JSON 安全 JavaScript
|

闲鱼商品列表API接口指南

本指南基于逆向分析,提供闲鱼商品列表数据获取的技术方案,适用于关键词、地区、价格等条件筛选。支持网页端GET与移动端POST请求,返回HTML或JSON格式数据,需注意登录态与参数编码,仅用于学习研究。

1285 2
|
10月前
|
API 数据格式 Windows
|

通过 KlineCharts 获取和展示印度股票数据

本文介绍如何通过KlineCharts对接印度股票数据,涵盖获取股票PID、调用K线接口、数据格式转换及图表渲染全流程。支持日线、小时线等周期,并可扩展实时更新功能,助力快速实现K线图展示。

515 1
|
11月前
|
Java 测试技术 API
|

从Google线上故障,谈灰度发布的重要性

2025年6月12日,Google Cloud因新功能未充分测试且配置未灰度发布,导致Service Control系统出现空指针异常,引发全球大规模服务中断,持续超7小时。事件凸显配置灰度发布的重要性。Nacos等配置中心支持IP、标签等多种灰度策略,可有效降低变更风险,保障系统稳定。

285 0
|
11月前
|
Dubbo 安全 Java
|

2.RMI

RMI协议基于JDK的java.rmi.*实现,采用短连接、TCP传输和Java标准序列化,支持多连接同步调用,适用于常规远程方法调用及与原生RMI互操作。需注意:传参需实现Serializable接口,超时需通过JVM参数设置。若依赖老旧common-collections包,存在反序列化安全风险,建议升级至安全版本。支持Spring兼容模式。

309 0
|
11月前
|
C++
|

C++常量

C++常量包括整数、浮点、布尔、字符和字符串常量,支持不同进制与转义序列。可通过#define或const定义,推荐使用大写命名,提升代码可读性与安全性。

1254 0
|
11月前
|
存储 SQL 关系型数据库
|

MySQL 开发进阶:从初级到数据库工程师的能力提升路径

本文系统梳理MySQL开发从初级到数据库工程师的四阶段进阶路径:从规范表结构设计、掌握三大范式,到搭建主从复制与读写分离架构保障高可用,再到通过分库分表、参数调优应对大数据量性能瓶颈,最后强调业务驱动、实践复盘与技术沉淀,助力开发者实现职业跃迁。

405 0
|
11月前
|
存储 负载均衡 算法
|

负载均衡算法

本文介绍多种负载均衡算法:随机、轮询、最小活跃数、源地址哈希及一致性哈希,涵盖适用场景与实现原理,结合代码与图示解析其调度机制,适用于分布式系统流量管理。

195 1
|
11月前
|
关系型数据库 MySQL Java
|

开发环境搭建

本课程指导导入CentOS 7虚拟机,配置网络与IP(192.168.101.68),使用VMware和FinalShell远程连接,并搭建开发环境,包括IDEA、Maven、Git及MySQL数据库,最终拉取并运行黑马商城项目。

272 0
|
11月前
|
负载均衡 Java 中间件
|

Nacos配置中心

本文介绍如何使用Nacos实现微服务配置中心。通过引入nacos-config依赖与bootstrap.yaml文件,实现应用启动时优先拉取Nacos集中化配置,支持动态热更新。结合@Value与@RefreshScope或@ConfigurationProperties,可实现毫秒级配置生效,避免频繁重启导致服务中断,提升系统可用性与维护效率。(238字)

330 0
|
11月前
|
负载均衡 Java Nacos
|

Gateway服务网关

网关是微服务的统一入口,实现请求路由、权限控制、限流与负载均衡。基于SpringCloud Gateway可构建高性能响应式网关,支持断言与过滤器工厂,灵活实现路由匹配及请求处理,并可通过全局过滤器扩展功能,解决跨域等问题。

887 0
|
11月前
|
开发者
|

业务架构图

本文介绍了业务架构图的核心概念与绘制方法,涵盖业务定义、架构域分类及业务架构图的分层、分模块、分功能三大要义,旨在帮助理解业务逻辑,提升客户认知与开发效率。

202 0
|
11月前
|
关系型数据库 MySQL Java
|

开发环境搭建

工欲善其事,必先利其器。本文指导学生配置开发环境:要求电脑内存16G以上(建议32G),推荐使用便携显示器分屏开发。需下载并安装虚拟机(CentOS 7)、IDEA、Maven、Git等工具,导入项目并配置数据库与前端运行环境,确保高效完成黑马商城项目开发。

269 0
|
11月前
|
存储 运维 Java
|

微服务概述

本文对比单体与微服务架构,解析微服务定义、优缺点及技术实现方案。微服务通过业务拆分、独立部署、轻量通信提升系统可维护性与扩展性,虽带来运维复杂度,但仍是现代分布式系统演进方向。

487 0
|
11月前
|
Java 数据安全/隐私保护
|

脱敏工具

提供Java实现的敏感信息脱敏方法,包括身份证、姓名和手机号的脱敏处理,通过正则替换隐藏关键信息,保障数据安全。

311 0
|
11月前
|
前端开发 Java 数据库
|

低代码技术架构

后端采用Spring Boot + Spring Cloud Alibaba微服务架构,基于Java 8+/17、Maven、MybatisPlus、Shiro+Jwt、Redis、Druid、Nacos等技术;前端使用Vue3.0 + TypeScript + Vite5 + Ant-Design-Vue4,支持权限控制与动态菜单。需IDEA、WebStorm/Vscode、Node 20+等开发环境。

234 0
|
11月前
|
机器学习/深度学习 存储 物联网
|

大模型优化与压缩术语解释

模型压缩技术如知识蒸馏、量化、剪枝、稀疏化、低秩分解与权重共享,可显著减小大模型体积与计算开销。这些方法在保持性能的同时,提升部署效率,推动大模型在边缘设备上的广泛应用。

877 0

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

0
今日
71103
内容
128
活动
440390
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 日志服务
  • 检索分析服务 Elasticsearch版