|
4月前
|
机器学习/深度学习 数据采集 人工智能
|

大模型训练方法与技术术语解释

预训练、微调、RLHF等技术构成大模型核心训练体系:预训练打基础,微调适配具体任务,RLHF融入人类偏好,思维链提升推理,少/零样本实现快速迁移,指令微调增强指令理解,自监督利用海量无标注数据,温度控制生成风格,蒸馏压缩模型,缩放定律指导高效扩展。

348 0
|
4月前
|
机器学习/深度学习 人工智能 自然语言处理
|

大模型伦理与公平性术语解释

大语言模型中的偏见、公平性、可解释性、安全对齐、人类对齐与隐私保护是AI伦理核心议题。偏见源于训练数据,导致性别、种族等歧视;公平性追求无差别对待,需技术与社会协同;可解释性提升模型透明度,增强信任;安全对齐防止有害输出;人类对齐确保价值观一致;隐私保护防范数据泄露。这些维度共同构成负责任AI的发展基石,需多学科协作持续优化,以实现安全、公正、可信的AI系统。

225 0
|
4月前
|
消息中间件 SQL 存储
|

每日必会5

通过生产者确认、消息持久化、消费者ACK机制确保RabbitMQ消息不丢失;使用DelayExchange插件实现延迟消息;通过扩容消费者或队列解决消息积压。MyBatis中#{}预编译防注入,${}直接拼接;一级缓存基于SqlSession,二级缓存跨SqlSession共享;SQL执行经Executor、StatementHandler等组件完成。

70 0
|
4月前
|
SQL 安全 关系型数据库
|

了解SQL注入

SQL是一种用于管理数据库的标准语言,广泛应用于MySQL、Oracle等系统。它支持数据查询、操作与管理,常为Web应用提供后端服务。通过用户输入动态构建SQL语句时,若缺乏有效验证,易遭SQL注入攻击。攻击者可借此绕过认证、窃取数据、篡改内容,甚至执行系统命令。OWASP将其列为头号Web安全威胁。防御措施包括输入验证(白名单优于黑名单)、使用参数化查询、错误信息屏蔽及部署入侵防御系统。尤其推荐在代码层面采用预编译语句,防止恶意SQL执行。

90 0
|
4月前
|
存储 NoSQL 关系型数据库
|

4-MongoDB索引知识

MongoDB索引基于B树结构,支持单字段、复合、地理空间、文本及哈希索引,有效提升查询效率,避免全表扫描,适用于等值、范围、排序与全文检索,显著优化大数据量下的查询性能。

49 0
|
4月前
|
Linux 数据安全/隐私保护 虚拟化
|

虚拟机安装(CentOS7)

准备CentOS7镜像及VMware Workstation(可从百度云下载),提取码已提供。使用VMware创建虚拟机,参考指定教程完成安装。默认登录用户为root,密码由用户自设。确保电脑配置满足运行需求。(238字)

306 0
|
4月前
|
人工智能 NoSQL 前端开发
|

面试真题

多套AI与Java面试题涵盖RAG、智能体、大模型部署、分布式系统、JVM调优、数据库设计等核心技术,深入考察项目经验、架构能力与技术深度,适用于中高级工程师岗位选拔。

200 0
|
4月前
|
存储 NoSQL 关系型数据库
|

MongoDB相关概念

MongoDB是一款高性能、无模式的文档型数据库,采用BSON格式存储,支持海量数据、高并发读写、水平扩展与高可用,适用于社交、游戏、物联网等场景,尤其适合数据模型灵活、迭代快速的应用,是Web2.0时代理想的数据库解决方案。

75 0
|
4月前
|
NoSQL Shell Redis
|

Redis集群伸缩,转移插槽失败

Redis集群出现slots状态异常,提示节点间配置不一致,部分slot处于importing状态。需登录对应实例,执行`cluster setslot <id> stable`命令恢复slot稳定状态,修复问题后方可重新平衡集群。注意根据实际slot ID调整参数。

80 0
|
4月前
|
机器学习/深度学习 存储 自然语言处理
|

大模型基础概念术语解释

大语言模型(LLM)基于Transformer架构,通过海量文本训练,实现强大语言理解与生成。其核心为自注意力机制,结合Token化、位置编码与嵌入层,支持万亿级参数规模。参数增长带来涌现能力,如复杂推理与泛化性能。混合专家模型(MoE)提升效率,推动模型持续扩展。

696 0
|
4月前
|
消息中间件 存储 人工智能
|

基于 RocketMQ LiteTopic 打造企业级 Session 管理

AI场景下,Session需满足低延迟、时序性、隔离性与上下文压缩四大要求。基于RocketMQ LiteTopic实现,可提供会话持久化、断点恢复、多会话隔离与流量削峰能力,保障会话不丢失、可追溯、高并发稳定,助力构建企业级多智能体系统。(238字)

130 0
|
4月前
|
消息中间件 人工智能 决策智能
|

AgentScope x RocketMQ:构建多智能体应用组合

AgentScope是阿里开源的多智能体开发框架,支持模块化、透明化、可定制的智能体构建。集成RocketMQ实现高效A2A通信,助力打造如“智能旅行助手”等复杂协作应用,推动开发者友好型AI生态发展。

280 0
|
4月前
|
消息中间件 人工智能 NoSQL
|

RocketMQ for AI:重新定义 AI 应用通信范式

RocketMQ LiteTopic 专为 AI 场景设计,应对长时会话、高延迟、大上下文等挑战。支持百万级轻量队列,实现会话级私有通道与细粒度订阅。LiteConsumer 可动态管理节点级订阅,免去 Redis 依赖与广播开销,简化架构,提升稳定性。原生支持断点续传、状态恢复,保障 AI 多轮交互的可靠闭环,构建高效、弹性的新一代通信模型。(239字)

387 0
|
4月前
|
人工智能 NoSQL Java
|

参考简历模板

本系列项目涵盖教育、金融、物流、家政等领域,基于SpringBoot+Spring Cloud Alibaba构建微服务架构,融合Spring AI与大模型技术,实现智能推荐、风险控制、路径优化与服务调度等核心功能,结合RAG、知识图谱、MCP协议与多模态数据处理,提升系统智能化与自动化水平。(238字)

74 0
|
4月前
|
存储 人工智能 Java
|

面试回答示例篇

本文系统介绍了AI开发核心技术:SpringAI、LangChain4J与LangChain框架对比,智能体设计原理,RAG增强生成、Tool Calling工具调用、MCP协议、向量知识库等关键技术,并结合实际项目讲解AI集成、模型选型、私有化部署、流式输出、上下文管理及大模型幻觉解决方案,涵盖从架构设计到落地优化的完整实践路径。(239字)

796 0
|
4月前
|
存储 缓存 运维
|

一场FullGC故障排查

本文记录了一次线上CPU使用率异常升高的排查过程,最终定位为JVM频繁Full GC导致。通过对比机器监控与JVM堆内存监控,发现根本原因是处理Excel样本时大对象长期驻留内存,引发内存膨胀。结合JProfiler分析堆 dump 文件,定位到List<Map>结构存储导致内存占用激增,空间效率不足15%。提出“激进治疗”(数据外存化)与“保守治疗”(减少冗余字段)两类解决方案,并总结了排查思路:优先排查Full GC、关注JVM而非机器内存、利用工具精准定位大对象,避免被表象误导。

137 0
|
4月前
|
安全 数据安全/隐私保护 微服务
|

SpringSecurity权限管理

权限管理包含认证与授权两大核心:认证校验用户身份(登录),授权分配角色权限,控制可访问的资源与操作。通过ACL、RBAC等通用模型,构建安全可靠的系统访问控制机制,保障数据与流程安全。

38 0
|
4月前
|
关系型数据库 MySQL 数据库
|

用 Python 实现 MySQL 数据库定时自动备份

本文介绍如何用Python脚本实现MySQL数据库的自动化备份。通过调用`mysqldump`工具,结合时间戳命名、文件压缩与定时任务(如crontab),可轻松实现“无人值守”备份。涵盖配置修改、安全建议及日志管理,提升备份效率与可靠性,适用于日常开发与生产环境。

232 0
|
4月前
|
存储 负载均衡 算法
|

负载均衡算法

随机调用适用于性能均衡的服务器,可升级为加权随机以适配性能差异。轮询按序调用,支持加权提升调度精度,如权重[3,1]对应调用序列AAABA。最小活跃数优先选择负载低的节点,动态均衡负载。源地址哈希通过IP取模确保同一IP访问固定节点。一致性哈希将节点与请求映射至Hash环,实现节点变动时最小化数据迁移,保障服务稳定。

112 4
|
4月前
|
安全 数据安全/隐私保护 微服务
|

SpringSecurity权限管理

权限管理涵盖认证与授权:认证验证用户身份(如登录),授权分配角色权限,控制资源访问。通过ACL、RBAC等模型,构建安全的访问控制机制,保障系统数据与流程安全,防止越权操作与信息泄露。(238字)

86 0
|
4月前
|
前端开发 程序员
|

SpringCloud常见注解及使用说明

本文介绍了SpringMVC中@RequestMapping注解的作用及原理,它用于将HTTP请求映射到控制器方法,实现前后端接口路径对应。并通过@GetMapping等派生注解简化常用请求类型处理,提升开发效率。

496 1
|
4月前
|
存储 缓存 Java
|

SpringCloud自定义注解

本文介绍Java自定义注解的实现与应用,结合Spring AOP与过滤器,演示日志处理、权限控制等场景。通过@Target、@Retention等元注解定义注解,并在Controller中结合AOP或拦截器实现功能增强,提升代码可读性与复用性。(238字)

66 0
|
4月前
|
消息中间件 弹性计算 决策智能
|

五、实战演练:三步构建高可靠多智能体应用

本方案基于阿里云ECS与RocketMQ,构建多智能体协同系统,实现天气查询与行程规划。通过一键部署资源、创建Topic/Group、发布智能体应用三步,快速搭建支持异步通信的Agent架构。用户输入需求后,SupervisorAgent协调WeatherAgent和TravelAgent完成任务,全程可通过RocketMQ追踪消息轨迹,验证执行流程。

294 0
|
4月前
|
NoSQL Java MongoDB
|

MongoDB实战演练

本项目基于SpringDataMongoDB实现头条文章评论功能,涵盖增删改查、按文章ID查询及评论点赞。通过MongoTemplate优化操作效率,结合索引提升查询性能,构建高效稳定的评论微服务模块。

202 0
|
4月前
|
设计模式 Linux 开发工具
|

每日必会3

熟悉Docker部署,掌握docker run、Dockerfile、docker-compose等;熟练使用镜像与容器相关命令。Linux常用命令如ls、cd、grep、ps、top、chmod、find、ssh等操作熟练,查日志常用cat、grep、vim及管道组合。了解SpringMVC执行流程、设计模式与常用注解。

83 0
|
4月前
|
前端开发 NoSQL Java
|

低代码IDEA启动项目

本文介绍如何在IDEA中启动Jeecg-Boot前后端项目。先启动Java后端:初始化MySQL与Redis,安装Maven依赖,修改数据库及Redis配置,运行主类启动服务;再启动Vue3前端:安装pnpm/yarn依赖,配置代理与接口地址,执行dev命令启动前端,访问http://localhost:3100,使用admin/123456登录系统。

176 0
|
4月前
|
人工智能 自然语言处理 API
|

全面认识MCP:大模型连接真实世界的“USB-C接口”

MCP(模型上下文协议)是AI时代的“万能接口”,由Anthropic提出,旨在统一大模型与工具、数据源的连接标准。它简化集成、提升任务处理能力,支持多步流程与安全合规,推动AI智能体从对话走向行动,正重塑全球AI应用生态。

235 0
|
4月前
|
前端开发 Java 数据库
|

低代码技术架构

后端采用Spring Boot + Spring Cloud Alibaba微服务架构,基于Java 8+/17、Maven、MybatisPlus、Shiro+Jwt、Redis、Druid、Nacos等技术;前端使用Vue3.0 + TypeScript + Vite5 + Ant-Design-Vue4,支持权限控制与动态菜单。需IDEA、WebStorm/Vscode、Node 20+等开发环境。

108 0
|
4月前
|
存储 JSON NoSQL
|

MongoDB常用命令

本文介绍如何使用MongoDB存储文章评论数据,涵盖数据库与集合的创建、文档的增删改查、批量操作、投影查询、排序分页及更新修饰符等基本操作,助你快速掌握MongoDB应用。

37 0
|
4月前
|
消息中间件 存储 人工智能
|

基于 RocketMQ LiteTopic 打造企业级 Session 管理

AI场景下,Session需满足低延迟、时序性、隔离性与上下文压缩四大要求。基于RocketMQ LiteTopic,实现会话持久化、断点恢复、多会话隔离与流量削峰,保障会话不丢失、可追溯、高并发稳定,助力企业级多智能体系统构建。(238字)

150 0
|
4月前
|
人工智能 JSON 数据挖掘
|

大模型应用开发中MCP与Function Call的关系与区别

MCP与Function Call是大模型应用的两大关键技术。MCP为模型与外部工具提供标准化通信协议,实现跨模型、跨平台集成;Function Call则是模型调用外部函数的内置机制。前者如“蓝牙协议”,支持多设备互联,后者像“语音助手”,限于单机操作。两者在功能上互补:MCP支持工具热插拔、权限控制与远程调用,适用于企业级复杂系统;Function Call开发简单,适合快速验证单一模型能力。未来趋势将走向融合,形成“模型解析-协议传输-工具执行”的分层架构,推动AI应用生态标准化发展。

362 0
|
4月前
|
机器学习/深度学习 存储 自然语言处理
|

大模型基础概念术语解释

大语言模型(LLM)基于Transformer架构,通过海量文本训练,具备强大语言理解与生成能力。其核心组件包括注意力机制、位置编码与嵌入层,支持文本分割为Token进行处理。参数量达十亿乃至万亿级,展现涌现与泛化能力,能完成多任务推理。混合专家模型(MoE)提升效率与扩展性,推动大模型持续发展。(237字)

599 0
|
4月前
|
消息中间件 人工智能 Linux
|

基于 RocketMQ 构建 高可靠 A2A 通信通道

A2A协议由Google发起,旨在实现跨厂商AI智能体的标准化通信。通过RocketMQ异步支持,提供高可靠、开箱即用的多智能体协同方案,助力构建开放、可扩展的智能体生态体系。

120 0
|
4月前
|
机器学习/深度学习 人工智能 安全
|

大模型伦理与公平性术语解释

简介:大语言模型中的偏见源于训练数据,可能导致性别、种族等歧视,影响公平性。公平性要求模型无差别对待各群体,需通过数据与算法去偏。可解释性助力理解模型决策,提升信任与改进。安全对齐防止有害输出,人类对齐确保价值观一致,隐私保护防范数据泄露。这些是构建负责任AI的核心要素,需技术、伦理与法规协同推进。(238字)

122 0
|
4月前
|
Java 测试技术 Linux
|

生产环境发布管理

本文介绍大型团队如何通过自动化部署平台实现多环境(dev/test/pre/prod)高效发布与运维。涵盖各环境职责、基于Jenkins+K8S的CI/CD流程、分支管理、一键发布及Skywalking日志链路追踪,提升发布效率与故障排查能力。

77 1
|
4月前
|
机器学习/深度学习 数据采集 人工智能
|

大模型训练方法与技术术语解释

预训练、微调、RLHF、思维链等技术共同构建大模型核心能力。预训练夯实语言基础,微调适配特定任务,RLHF对齐人类偏好,思维链提升推理,少/零样本实现快速迁移,指令微调增强指令理解,自监督利用海量文本,温度控制生成风格,蒸馏压缩模型规模,缩放定律指引性能增长路径。

406 0
|
4月前
|
消息中间件 存储 SQL
|

每日必会5

为确保消息不丢失,RabbitMQ通过生产者确认、消息持久化和消费者确认机制保障。生产者发送消息后根据返回结果判断投递状态;消息及队列均持久化存储;消费者处理完成后需返回ACK。我们采用auto模式+重试机制提升可靠性。

104 0
|
4月前
|
存储 缓存 Java
|

SpringCloud自定义注解

本文介绍Java自定义注解的实现与应用,结合Spring AOP与过滤器,演示日志、权限控制等场景。通过@Target、@Retention等元注解定义注解,配合AOP或拦截器实现功能增强,适用于登录验证、数据校验等,提升代码可读性与复用性。(238字)

248 0
|
4月前
|
自然语言处理 监控
|

大模型评估与调试术语解释3

困惑度衡量语言模型预测能力,越低越好;过拟合指模型记背训练数据而泛化差;泛化能力体现模型应对新任务的适应性;人工评估是生成质量“金标准”;BLEU、ROUGE分别基于n-gram和召回率评估生成文本相似度;混淆矩阵用于分类任务的细粒度错误分析。各项指标需结合使用以全面评估大模型性能。(238字)

144 0
|
4月前
|
前端开发 Java 数据库
|

低代码技术架构

后端采用Spring Boot + Spring Cloud Alibaba微服务架构,基于Java 8+/17、Maven、MybatisPlus、Shiro+Jwt、Redis、Druid、Nacos等技术;前端使用Vue3.0 + TypeScript + Vite5 + Ant-Design-Vue4,支持权限控制与动态菜单。需IDEA、WebStorm/Vscode、Node 20+等开发环境。

90 0
|
4月前
|
Linux 网络安全 开发工具
|

每日必会3

熟悉Docker部署,掌握docker run、Dockerfile及docker-compose集群部署;熟练使用镜像与容器相关命令如pull、push、run、exec等;常用Linux命令包括ls、cd、grep、ps、top、chmod、find、ssh、scp、wget等,排查日志常用cat、grep、vim及管道组合查询。

86 0
|
4月前
|
存储 NoSQL 关系型数据库
|

MongoDB相关概念

MongoDB是一款高性能、无模式的文档型数据库,适用于数据量大、读写频繁、事务要求不高的场景。广泛应用于社交、游戏、物流、物联网和视频直播等领域,支持海量数据存储、水平扩展、高可用及复杂查询,尤其适合需要快速迭代和灵活数据模型的应用。相比MySQL,其开发运维成本更低,是Web2.0时代理想的数据存储解决方案。

54 0
|
4月前
|
敏捷开发 Dubbo Java
|

需求开发人日评估

随着敏捷开发在国内的风靡,越来越多的团队开始推行敏捷开发,这其中有一个关键事项就是:工时的人日评估。简单来说就是:项目经理会让开发人员自己评估自己负责的模块大概需要的开发周期。 人日,即按照1人几天完成,如1/人日:表示这个需求需要1个人1天完成,如果有2个人一起做,可能就是0.5天(需求开发一般1+1 < 2,因为有代码合并的兼容性要处理)。

82 0
|
4月前
|
SQL Dubbo Java
|

线程池:故障梳理总结

本文从故障与技术双重视角,总结线程池满导致服务不可用的常见原因及应对策略。涵盖数据库慢查询、连接池配置不当、超时设置缺失等典型问题,结合真实案例分析,提出fast-fail、流控、背压、合理重试等最佳实践,助力开发者提升系统稳定性与容错能力。

96 0
|
4月前
|
存储 NoSQL 关系型数据库
|

MongoDB索引知识

MongoDB索引通过B树结构提升查询效率,避免全表扫描。支持单字段、复合、地理空间、文本及哈希索引,适用于等值、范围、排序、全文检索等场景,显著提升大数据量下的查询性能。

62 0
|
4月前
|
NoSQL Linux Shell
|

MongoDB单机部署

本文介绍MongoDB在Windows与Linux系统的安装启动方法,包括下载32/64位安装包、解压配置、命令行或配置文件方式启动服务,并设置数据目录与端口。同时说明如何通过mongo shell连接数据库,使用Compass图形化工具管理,以及Linux下的部署、防火墙配置和安全关闭服务等操作,助你快速搭建MongoDB运行环境。(238字)

519 0
|
4月前
|
SQL 缓存 Java
|

MyBatis

MyBatis配置优先级:方法参数 > resource/url > properties体内。支持多环境、事务管理(JDBC/MANAGED),XML实现一对一、一对多关联映射,分页支持逻辑与物理方式,推荐BatchExecutor批量操作,一级缓存默认开启,二级缓存需手动配置。

58 1
|
4月前
|
XML Java 数据库连接
|

MyBatis映射关系(1-1 1-n n-n)

本文介绍了MyBatis中四种核心关联映射:一对一(属性与字段映射)、一对多(如用户关联多个角色,使用`<collection>`)、多对一(如博客关联作者,使用`<association>`)和多对多(通过中间类实现,如用户与部门)。适用于解决实体间复杂关系映射问题。

225 1
|
4月前
|
运维 Devops 开发工具
|

生产环境缺陷管理

在一个大型团队中,bug协同管理是一件复杂的事情,发布经理要追版本bug,运维同学要评估bug影响范围,开发同学要在多个开发分支同时修复同一个bug,很容易出现bug漏提交、漏确认等生产安全问题。 本团队也出现过一起不同分支漏提交bugfix导致的一起P1故障(最高等级),该bug在生产环境进行hotfix时,漏掉了少量集群导致该二次故障。举个相似的例子,某品牌汽车发现潜在安全隐患进行召回,但却遗漏了某个小地区,偏偏在遗漏的地区,发生了安全事故导致有人员伤亡。 我们基于go-git开发实现了通用化的git-poison,通过分布式源码管理bug追溯、查询,可复制性高,适用于所有git仓库,与分

61 0
|
4月前
|
存储 JSON NoSQL
|

MongoDB常用命令

本文介绍如何使用MongoDB存储文章评论数据,涵盖数据库与集合的创建、删除,文档的增删改查、批量操作、投影查询、排序分页及更新修饰符的使用,帮助快速掌握MongoDB基本操作。

131 1

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

4
今日
69440
内容
128
活动
439896
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务