|
4月前
|
机器学习/深度学习 数据采集 人工智能
|

大模型训练方法与技术术语解释

预训练、微调、RLHF、思维链等技术共同构建大模型能力。预训练打基础,微调适配具体任务,RLHF融入人类偏好,思维链提升推理,少/零样本学习增强泛化,指令微调优化交互,自监督学习利用海量无标注数据,温度控制生成风格,蒸馏实现知识迁移,缩放定律指导模型扩展。这些核心技术推动大模型在多领域智能应用中持续突破,实现从理解到创造的跨越。(238字)

406 0
|
4月前
|
机器学习/深度学习 存储 物联网
|

大模型优化与压缩术语解释

模型压缩技术如知识蒸馏、量化、剪枝、稀疏化、低秩分解与权重共享,可显著减小大模型体积与计算开销。这些方法在保持性能的同时,提升部署效率,推动大模型在边缘设备上的广泛应用。

198 0
|
4月前
|
敏捷开发 Java 测试技术
|

为什么要单元测试

本文探讨单元测试如何让软件开发“加速”而非“踩刹车”。通过剖析测试体系演进、测试金字塔理念,揭示单元测试在提升代码质量、调试效率、重构信心和研发效能方面的核心价值,助力项目长期高效迭代。

41 0
|
4月前
|
Java 测试技术 Linux
|

生产环境发布管理

本文介绍大型团队如何通过自动化部署平台实现多环境(dev/test/pre/prod)高效发布与运维,涵盖环境职责、CI/CD流程、分支管理、容器化部署及基于Skywalking的日志链路追踪,提升发布效率与系统稳定性。

106 0
|
4月前
|
自然语言处理 监控
|

大模型评估与调试术语解释

困惑度衡量语言模型预测能力,值越低越好;过拟合指模型记住了训练数据却泛化差;泛化能力体现模型应对新任务的适应性;人工评估是生成质量的“金标准”;BLEU和ROUGE分别基于n-gram和召回率评估生成文本与参考的相似度;混淆矩阵用于分析分类错误模式。这些指标共同构成大模型评估体系,需结合使用以全面评价性能。

529 0
|
4月前
|
设计模式 缓存 Java
|

每日必会4

在订单支付完成后通知配送中心等异步、解耦场景中常用MQ,如使用TopicExchange话题模式实现灵活路由。结合Spring的IOC、AOP、三级缓存及事务管理,有效解决循环依赖与事务失效等问题,提升系统稳定性与可扩展性。(238字)

51 0
|
4月前
|
SQL Java 数据库连接
|

MyBatis分页

本文介绍MyBatis分页实现方式:RowBounds为内存分页,大数据易溢出;PageHelper等插件通过SQL改写实现物理分页,支持多数据库;还可借助subList或自定义拦截器分页。总结:大数据场景推荐物理分页,性能更优,优先于逻辑分页。(238字)

111 0
|
4月前
|
前端开发 程序员
|

SpringCloud常见注解及使用说明

本文介绍了SpringMVC中@RequestMapping注解的作用及原理,它用于将HTTP请求映射到控制器方法,实现前后端接口路径对应。并通过@GetMapping等派生注解简化常用请求类型处理。

39 0
|
4月前
|
存储 缓存 安全
|

Java基础篇

本文系统讲解Java核心知识,涵盖final关键字、重载与重写、==与equals区别、反射机制及其应用、String类对比、集合框架、线程安全、HashMap原理、ConcurrentHashMap实现、线程池使用与参数配置、JVM组成及运行时数据区、类加载机制、双亲委派模型、Stream流与JDK8新特性等内容,深入剖析底层原理与项目实战应用。

37 0
|
4月前
|
机器学习/深度学习 存储 自然语言处理
|

大模型基础概念术语解释

大语言模型(LLM)基于Transformer架构,通过海量文本训练,实现强大语言理解与生成。其核心包括注意力机制、位置编码、嵌入层等,支持万亿级参数与涌现能力,能完成翻译、问答等多任务,展现卓越泛化与推理能力。

464 0
|
4月前
|
XML 算法 安全
|

详解RAG五种分块策略,技术原理、优劣对比与场景选型之道

RAG通过检索与生成结合,提升大模型在企业场景的准确性与安全性。分块策略是其核心,直接影响检索效果与生成质量。本文系统解析五种主流分块方法:固定大小、语义、递归、基于结构和基于LLM的分块,对比其优缺点及适用场景,助力构建高效、可信的RAG系统,尤其适用于金融、医疗等高精度领域。(239字)

178 0
|
4月前
|
XML JSON Java
|

什么是RESTful

RESTful是一种基于资源的API设计规范,主张用URI唯一标识资源,通过HTTP动词(GET、POST、PUT、DELETE)操作资源,实现统一、标准的接口行为。它解决了传统接口路径混乱、行为不一致的问题,具有结构清晰、易于理解与扩展的优势。

90 0

每日必会7

CAP理论指出分布式系统中一致性(C)、可用性(A)、分区容错性(P)不可兼得,P必然存在,故只能在A与C间权衡。BASE理论提出基本可用、软状态、最终一致性的解决方案。Seata AT模式通过全局事务ID(XID)协调分支事务注册、执行与提交/回滚,实现分布式事务一致性。MQ防消息丢失需生产者确认、持久化、消费者手动ACK;防重复消费可借助幂等机制;百万消息积压可通过扩容、批量处理、异步削峰解决。

73 0
|
4月前
|
缓存 Java 数据库连接
|

MyBatis常见配置

MyBatis配置优先级:方法参数 > resource/url > properties。支持缓存、延迟加载、自动生成主键等配置,可通过environments配置多环境,默认使用development。事务管理支持JDBC和MANAGED,与Spring集成时由Spring接管事务。

42 0
|
4月前
|
SQL NoSQL 前端开发
|

大厂如何解决订单幂等问题

为保障分布式系统数据一致性,需实现接口幂等性。创建订单时,通过预生成唯一订单号,利用数据库主键唯一约束防止重复插入;支付场景中,结合Redis或数据库唯一索引标记请求处理状态,避免重复扣款。针对ABA问题,采用版本号机制,更新时校验并自增版本号,确保数据更新的正确性与一致性。

61 0
|
4月前
|
运维 Devops 开发工具
|

生产环境缺陷管理

git-poison基于go-git实现,通过“投毒-解毒”机制在多分支环境中精准追踪bug,自动化阻塞带未修复bug的发布,降低协同成本,避免漏修、漏发问题,提升发布安全性与效率。

113 0
|
4月前
|
存储 数据库
|

数据库设计三范式

数据库三范式简介:第一范式要求字段原子性,不可再分;第二范式在满足第一范式基础上,消除部分依赖,确保主键唯一确定非主键;第三范式消除传递依赖,避免非主键间相互决定。范式旨在减少数据冗余、提升一致性,但实际设计需结合业务需求灵活应用,不必生搬硬套。(238字)

58 0
|
4月前
|
消息中间件 存储 SQL
|

每日必会5

为确保消息不丢失,RabbitMQ提供三大机制:生产者确认、消息持久化、消费者确认。生产者通过唯一ID与返回状态判断消息是否送达;消息及队列均支持持久化存储;消费者处理完成后需返回ACK,项目中常用auto模式+重试机制保障消费成功。

68 0
|
4月前
|
敏捷开发 Dubbo Java
|

需求开发人日评估

本文介绍敏捷开发中的人日评估方法,涵盖开发、自测、联调、测试及发布各阶段工时分配,提供常见需求如增删改查、接口调用、MQ消费等的参考人日,助力团队科学规划项目周期。(238字)

78 0
|
4月前
|
Dubbo Java 应用服务中间件
|

入门运行Soul

Soul是一款基于WebFlux的高性能响应式API网关,支持Dubbo、Spring Cloud等多协议,具备异步、跨语言、插件化扩展、动态配置同步(如WebSocket)、A/B测试等功能,适用于高并发场景下的流量管理与控制。

83 0
|
4月前
|
监控 Java 调度
|

XXLJob定时任务概述

定时任务指通过时间表达式调度执行的任务,适用于定时对账、超时取消等场景。单体架构可用Timer、ScheduledExecutorService、Quartz、SpringTask等;分布式下需解决重复执行、动态调度、故障转移等问题,主流方案有XXL-JOB、Elastic-Job、Saturn、ScheduleX等。

102 0
|
4月前
|
人工智能 Java 网络安全
|

Spring AI Alibaba:本地运行(☆)

简介:本任务要求使用SSH方式拉取私有Git仓库代码,基于SpringCloud、MySQL、Maven技术栈,完成聊天机器人、智能体、工作流三大功能模块的本地运行。需录制8分钟以上视频,结构化输出项目理解,包括技术栈、核心功能、数据库关系及未解困惑,帮助新人快速融入开发环境。(239字符)

556 0
|
4月前
|
存储 Java Nacos
|

第九章 SpringCloud框架

本文介绍了Nacos与Eureka的服务注册发现机制、OpenFeign的调用流程、Sentinel与Hystrix的限流熔断对比、滑动窗口算法原理,以及Spring Cloud Gateway的路由断言、过滤器功能,涵盖微服务架构中核心组件的工作原理与实践应用。

61 0
|
4月前
|
缓存 安全 Java
|

第五章 Spring框架

Spring的IOC(控制反转)将对象创建交给容器管理,实现解耦;DI(依赖注入)则自动为Bean注入所需依赖。默认单例Bean非线程安全,需开发者保障。Bean作用域包括singleton、prototype等,可通过@Scope设置。循环依赖通过三级缓存解决,但构造函数循环依赖需@Lazy注解规避。AOP基于动态代理实现日志、事务等功能,事务传播行为如REQUIRED、REQUIRES_NEW可灵活控制。常用注解涵盖Bean声明、注入、作用域、配置及AOP等方面。

94 0
|
4月前
|
缓存 NoSQL Java
|

[ERP]SpringBoot集成Redis技术(☆)

本文介绍如何克隆并运行Java项目,通过Redis缓存优化商品查询接口。涵盖Git、Maven、SpringBoot等技术,强调主动请教与规范测试,提升新人在真实开发环境中的实战能力。

38 0
|
4月前
|
存储 人工智能 NoSQL
|

示例模块及逐字稿

基于Ollama+DeepSeek+MaxKB等技术,构建医疗、金融、教育、电商领域的AI智能体,实现智能诊断、理财顾问、个性化学习、智能推荐等功能,提升行业效率与用户体验。

94 0
|
4月前
|
Java 关系型数据库 BI
|

银行业务

参与多个金融系统项目开发,涵盖征信、数据治理、监管报送及消费金融APP。主导接口设计、数据校验、流程审批与报表模块,使用SSM、SpringBoot等技术栈,实现高效稳定的金融服务功能,日均请求超万次,保障系统持续稳定运行。

101 0
|
4月前
|
消息中间件 物联网 测试技术
|

语音通知

适用于科技公司服务器或物联网设备异常时的语音告警场景。通过语音服务,可拨打电话并播放含变量的预设模板通知。需先开通服务,申请资质、话术、号码及模板,支持公共/专属模式。可通过API发起呼叫并查询记录,推荐使用消息回执接收结果。

113 0
|
4月前
|
Java 关系型数据库 MySQL
|

低代码平台RuoYi:代码本地运行(☆☆)

简介:掌握SpringCloud、MySQL、Maven技术栈,通过SSH拉取若依项目代码并本地运行,观看文档与视频,录制8分钟以上讲解视频,结构化输出项目理解(技术栈、业务功能、数据库关系)及入职困惑,提升新人适应能力。(239字)

63 0
|
4月前
|
NoSQL Shell Redis
|

Redis集群伸缩,转移插槽失败

Redis集群出现节点配置不一致,提示slot 0处于importing状态。需登录对应实例,执行`cluster setslot 0 stable`命令,恢复slot稳定状态,修复问题后再进行集群重平衡操作。注意根据实际slot ID调整命令参数。

215 0
|
4月前
|
JSON 缓存 前端开发
|

什么是跨域

CORS(跨域资源共享)是W3C标准,允许浏览器向跨源服务器发起XMLHttpRequest请求,突破AJAX同源限制。需浏览器和服务器共同支持,现代浏览器均兼容。通信过程由浏览器自动完成,开发者无需特殊处理。CORS将请求分为简单和非简单两类,前者直接发送Origin头,后者需预检。服务器通过Access-Control-开头的响应头控制权限。相比仅支持GET的JSONP,CORS支持所有HTTP方法,更灵活安全。

50 0
|
4月前
|
SQL 安全 关系型数据库
|

了解SQL注入

SQL是一种用于管理数据库的标准语言,广泛应用于MySQL、Oracle等系统。若Web应用未严格验证用户输入,攻击者可利用SQL注入篡改查询逻辑,实现绕过登录、窃取数据、破坏系统等目的,危害极大。OWASP将其列为头号Web威胁。防御需结合输入验证、参数化查询及网络防护措施。

52 0
|
4月前
|
SQL NoSQL 前端开发
|

大厂如何解决订单幂等问题

本文介绍分布式系统中接口幂等性的实现方案。通过订单场景,分析重复请求成因,提出利用全局唯一ID+数据库唯一约束防止重复创建,结合Redis与版本号机制解决ABA问题,确保数据一致性。方案适用于各类数据库操作,保障服务在复杂网络环境下的可靠性。

103 0
|
4月前
|
Java BI 数据库连接
|

OA业务

参与OA人事管理子系统及Broz协同办公平台开发,负责管理员模块升级、审批流程实现、Echarts报表渲染及权限管理等功能,使用SpringBoot、MyBatis等技术,助力企业无纸化办公与信息化建设。(238字)

64 0
|
4月前
|
消息中间件 监控 Java
|

RocketMQ:底层Netty频繁OS OOM

本文记录了一例Java应用因Netty多ClassLoader加载多个PooledByteBufAllocator,导致堆外内存超限引发OS OOM的排查过程。通过NMT、Arthas等工具分析,发现多个中间件独立加载Netty,各自绕过MaxDirectMemorySize限制申请堆外内存,总量远超配置。最终建议业务调低堆内存以腾出空间,并推动中间件优化。

102 0
|
4月前
|
运维 NoSQL 测试技术
|

Redis:内存陡增100%深度复盘

本文复盘了一次Redis因大KEY和缓冲区溢出导致服务不可用的事故。根本原因为业务高峰时大KEY调用量激增,引发带宽占满、内存使用率快速升至100%,最终导致Redis全面超时。分析指出,虽然Redis有淘汰机制,但输入/输出缓冲区过度占用内存仍可致其崩溃。后续提出开发运维规范,涵盖部署、Key设计、SDK使用、命令规范及监控优化,强调压测与日常巡检的重要性,以避免类似问题。

101 0
|
4月前
|
存储 缓存 运维
|

一场FullGC故障排查

本文记录了一次JVM CPU使用率飙升至104%的问题排查过程,通过分析发现是Full GC频繁触发导致。根本原因为大对象(List<Map>)长期驻留内存,造成老年代空间不足。借助JProfiler分析堆 dump 文件,定位到用户上传的Excel数据以低效结构存储,导致内存膨胀近10倍。最终提出“治本”与“治标”两类解决方案,并总结了线上高CPU问题的排查思路:关注JVM而非机器监控,结合工具与现象推理,精准定位根因。

92 0
|
4月前
|
SQL 监控 机器人
|

钉钉通知

本文介绍如何通过Java代码调用钉钉机器人API实现系统告警消息的实时发送。内容涵盖机器人创建、Webhook配置、PostMan测试及Java代码实现,并提供封装建议与常见失败原因分析,助力高效集成监控告警功能。

225 0
|
4月前
|
Java 关系型数据库 MySQL
|

低代码平台芋道:代码本地运行(☆)

简介:本任务面向新人,要求基于SpringBoot、MySQL、Maven技术栈,完成Gitee项目本地拉取与运行(预计2小时)。需自行解决JDK、Maven、Idea版本等问题,并录制8分钟以上视频,结构化阐述项目技术架构、核心功能与表关系,提出理解中的困惑,提升入职适应效率。

50 0
|
4月前
|
自然语言处理 fastjson Java
|

FastJson:大面积故障规避案例

本文记录了一次由Kotlin语法误用引发的FastJson反序列化故障排查过程。因将 `{}` 错误赋值给Java对象字段,导致FastJson解析时触发 `kotlin_error` 静态标记位异常,进而使整个工程反序列化链路中断。问题根源为多语言混编下语法混淆及框架对异常状态处理不当。通过深入分析源码与依赖,最终定位并修复,强调了对框架不信任原则和代码严谨性的重要性。(238字)

475 0
|
4月前
|
SQL Dubbo Java
|

线程池:故障梳理总结

本文从故障与技术双视角,总结线程池满导致服务不可用的典型场景与根因,涵盖数据库慢查询、连接池配置不当、超时设置缺失等问题,结合真实案例剖析,并提出fast-fail、流控背压、谨慎重试等防护策略,助力开发者提升系统稳定性。

113 0
|
4月前
|
SQL 安全 网络协议
|

常见的网络攻击

恶意软件指具有险恶目的的程序,如病毒、勒索软件、间谍软件等,常通过钓鱼邮件或漏洞入侵系统,窃取数据、破坏功能。网络钓鱼伪装成可信来源骗取敏感信息。中间人攻击窃听通信,DDoS攻击以海量流量瘫痪服务,SQL注入操控数据库,零日漏洞利用未修复缺陷,DNS隧道则隐蔽传输数据,均为常见网络安全威胁。

62 0
|
4月前
|
机器学习/深度学习 数据采集 存储
|

融合共生的智能时代引擎

本文系统解析大数据与机器学习的融合价值,阐述二者“数据喂养模型、模型激活数据”的协同关系,涵盖技术流程、典型应用场景及发展挑战,并展望轻量化模型、可信AI、行业定制化与AutoML等未来趋势,揭示智能时代的核心驱动力。

167 0
|
4月前
|
SQL Dubbo Java
|

线程池:故障梳理总结

本文从故障与技术双重视角,总结线程池类常见问题及避坑指南。通过真实案例剖析,揭示数据库慢查询、连接池配置不当、超时设置缺失等引发线程池满的根因,并分享Dubbo、HTTP、Druid、Redis等连接池的最佳实践,强调fast-fail理念与流控保护机制,助力开发者提升系统稳定性。

134 0
|
4月前
|
前端开发 Java 程序员
|

SpringCloud常见注解及使用说明

本文介绍了Spring MVC中用于映射HTTP请求的常用注解,重点讲解@RequestMapping的作用与用法。它可将前端请求路径映射到后端控制器方法,实现增删改查等接口定位,如“/staff/add”对应新增操作。此外,@GetMapping、@PostMapping等是其衍生注解,简化了特定请求类型的映射。

66 0

每日必会7

分布式系统需在一致性(C)、可用性(A)和分区容错性(P)间权衡,P不可避免,故只能在A与C间取舍。BASE理论提供解决思路:基本可用、软状态、最终一致。Seata AT模式通过全局事务ID协调分支事务,实现两阶段提交,保证分布式事务一致性。

68 0
|
4月前
|
存储 缓存 安全
|

Java基础篇

本文系统讲解Java核心知识,涵盖final关键字、重载与重写、==与equals区别、反射机制及应用、String类对比、集合框架、线程安全、HashMap原理、ConcurrentHashMap实现、线程创建与线程池使用、JVM组成与内存模型、类加载机制及Stream流等,深入剖析底层原理与项目实战应用,助力掌握Java关键技术。

32 0
|
4月前
|
设计模式 缓存 Java
|

每日必会4

在订单支付完成后通知配送中心等异步、解耦场景中常用MQ,如使用TopicExchange话题模式实现灵活路由。结合Spring的IOC、AOP、三级缓存及事务管理,保障系统稳定与高效。

58 0
|
4月前
|
前端开发 NoSQL Java
|

低代码IDEA启动项目

本文介绍如何在IDEA中启动Jeecg-Boot前后端项目。先启动Java后端:初始化MySQL与Redis,安装Maven依赖,修改数据库及Redis配置,运行主类启动服务;再启动Vue3前端:安装pnpm依赖,配置代理与接口地址,执行dev命令启动。前端访问http://localhost:3100,账号admin/123456。支持IDEA或VSCode开发。

183 0
|
4月前
|
Dubbo Java 应用服务中间件
|

每日必会2

Gateway基于Spring WebFlux与Netty实现非阻塞高性能通信,启动时创建Netty Server接收请求,通过路由匹配和过滤器处理后转发至目标服务,响应反向经滤器返回。项目远程调用采用OpenFeign,底层为HTTP,也曾使用Dubbo。JVM部分涵盖模型、GC、类加载及调优。

46 0

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

3
今日
69439
内容
128
活动
439895
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务