|
10月前
|
关系型数据库 应用服务中间件 nginx
|

容器化部署引擎Docker

Docker是一种容器化技术,通过镜像打包应用及依赖,实现跨环境快速部署。它利用容器隔离运行应用程序,解决依赖冲突与环境差异问题,相比虚拟机更轻量、高效。

430 0
|
10月前
|
程序员 开发者 微服务
|

SpringCloud(2024)

本系列内容主要学习SpringCloud知识,源自传智教育·黑马程序员课程,旨在总结与拓展微服务技术。内容分为重点掌握(实用、高级、面试篇)和学术涉猎两部分,兼顾深度与广度,助力开发者系统提升微服务技能,尊重原创,推广优质教学资源。

188 0
|
10月前
|
安全 数据库 数据安全/隐私保护
|

1.RememberMe简介及用法

RememberMe功能并非简单记住用户名密码,而是通过服务端生成令牌(Token)实现持久登录。用户勾选后,浏览器会携带该令牌自动认证,避免重复登录。为提升安全性,可将Token持久化至数据库并增加二次校验机制,防止泄露风险。

190 0
|
10月前
|
Dubbo 应用服务中间件
|

zookeeper创建节点

本文通过Dubbo源码解析,深入讲解服务提供者失效踢出的实现原理,结合ZooKeeper的临时节点机制,揭示其与客户端会话绑定的生命周期特性,并以分布式协调场景为例,阐明该设计在实际应用中的价值。

173 0
|
10月前
|
Dubbo Java 应用服务中间件
|

入门运行Soul

Soul 是基于 WebFlux 构建的响应式 API 网关,支持高性能、异步处理与多语言集成,兼容 Dubbo、Spring Cloud 等主流框架。具备插件化架构、动态配置、流量控制、鉴权限流等丰富功能,支持集群部署与灰度发布,网关延迟低至 1~2ms,适用于高并发微服务场景。

161 0
|
10月前
|
缓存 Dubbo Java
|

什么是API网关

API网关是一种统一接收外部请求并转发至后端服务的中间层,具备请求路由、协议转换、鉴权、限流、熔断降级等功能。它简化了客户端与多个微服务之间的交互,提升了系统安全性与可维护性,常见实现有Kong、SOUL、Zuul等。

250 0
|
10月前
|
存储 算法 Java
|

持久化FileTxnLog

本文深入分析Zookeeper持久化机制,重点解读TxnLog与FileTxnLog源码。涵盖事务日志结构、append追加、truncate截断、commit提交等核心操作,解析日志格式、文件预分配及zxid管理,揭示数据存储与恢复原理。

159 0
|
10月前
|
Dubbo 安全 Java
|

RMI

RMI协议基于JDK标准实现,采用阻塞短连接和Java默认序列化,支持多连接同步传输,适用于常规远程调用及与原生RMI互操作。需注意反序列化安全风险,建议升级commons-collections至安全版本。

267 0
|
10月前
|
存储 NoSQL 关系型数据库
|

MongoDB索引知识

MongoDB索引通过B树结构提升查询效率,避免全表扫描。支持单字段、复合、地理空间、文本及哈希索引,优化相等匹配、范围查询、排序等操作,显著提升大数据量下的查询性能。

126 0
|
10月前
|
Linux 数据安全/隐私保护 虚拟化
|

虚拟机安装(CentOS7)

准备CentOS7镜像及VMware Workstation虚拟机工具,可从百度云下载(提取码:h1y9/bkz3)。使用VMware创建虚拟机,参考知乎教程完成安装。默认登录用户为root,密码由用户自定义设置。需准备一台具备运行虚拟机条件的电脑。

492 0
|
10月前
|
存储 数据库
|

数据库设计三范式

第一范式要求字段原子性,不可再分;第二范式要求消除部分依赖,一张表只描述一件事;第三范式要求消除传递依赖。三者旨在减少数据冗余、提升维护效率,但实际设计应结合业务需求灵活应用,不必拘泥范式。

314 0
|
10月前
|
SQL 缓存 Java
|

MyBatis

MyBatis配置优先级:方法参数 > resource/url > properties体内;支持多环境配置与事务管理(JDBC/MANAGED),XML实现一对一、一对多关联映射,分页支持逻辑与物理方式,推荐BatchExecutor批量操作,一级缓存默认开启,二级缓存需手动配置。

140 0
|
10月前
|
机器学习/深度学习 自动驾驶 算法
|

基于深度学习的交通标志识别系统

本研究聚焦基于深度学习的交通标志识别系统,针对传统方法在复杂环境下识别率低的问题,结合YOLOv8模型与Python技术,实现高效、精准的实时检测,提升智能交通系统的安全性和自动化水平。

590 4
|
10月前
|
机器学习/深度学习 安全 算法
|

基于yolov8的安全帽检测系统

本研究基于YOLOv8目标检测算法,构建安全帽佩戴智能识别系统,针对建筑、矿山等高危作业场景,实现对人员头部防护的实时监控与预警。系统结合深度学习与计算机视觉技术,通过高效标注数据集、优化模型结构,提升检测精度与速度,在1080P图像下可达35FPS以上,满足工业级实时性需求。相比传统人工巡查,显著降低漏检率,提高监管效率,助力高危行业向智能化安全管理转型,具有重要应用价值与推广前景。

617 1
|
10月前
|
机器学习/深度学习 人工智能 自然语言处理
|

大模型伦理与公平性术语解释

大语言模型中的偏见、公平性、可解释性、安全对齐、人类对齐与隐私保护是AI伦理核心议题。偏见源于数据,需通过去偏技术缓解;公平性要求无歧视输出;可解释性提升透明度与信任;安全对齐防止有害内容;人类对齐确保价值观一致;隐私保护防范数据泄露。六者共同构成负责任AI发展基石,需技术、伦理与法规协同推进。(238字)

419 0
|
10月前
|
前端开发 Java 数据库
|

低代码技术架构

后端采用Spring Boot + Spring Cloud Alibaba微服务架构,Java 8+/17,Maven管理,集成MybatisPlus、Shiro+Jwt、Redis、Druid、Nacos等;前端基于Vue3.0 + TypeScript + Vite5 + Ant-Design-Vue4,支持权限控制、动态菜单等,需Node 20环境。

259 0
|
10月前
|
监控 Java 调度
|

XXLJob定时任务概述

定时任务是基于时间表达式调度执行的任务,适用于定时对账、超时取消等场景。单体架构可使用轮询、Timer、ScheduledExecutorService、Quartz或SpringTask;分布式环境下需解决重复执行、故障转移等问题,主流方案有XXL-JOB、Elastic-Job、Saturn和ScheduleX。

387 0
|
10月前
|
人工智能 自然语言处理 API
|

全面认识MCP:大模型连接真实世界的“USB-C接口”

MCP(模型上下文协议)是Anthropic推出的AI“万能接口”,旨在统一大模型与工具、数据源的连接标准。它简化集成、提升任务处理能力,被誉为AI时代的“USB-C”。通过标准化通信,MCP让智能体可自主调用工具、执行复杂任务,推动AI应用迈向高效、安全、可扩展的新阶段。

716 0
|
10月前
|
机器学习/深度学习 存储 物联网
|

大模型优化与压缩术语解释

模型压缩技术如知识蒸馏、量化、剪枝、稀疏化、低秩分解与权重共享,可显著减小大模型体积与计算开销。这些方法在保持性能的同时,提升部署效率,推动大模型在边缘设备上的广泛应用。

845 0
|
10月前
|
Java 测试技术 Linux
|

生产环境发布管理

本文介绍大型团队如何通过自动化部署平台实现多环境(dev/test/pre/prod)高效发布与运维,涵盖环境职责、CI/CD流程、分支管理、容器化部署及基于Skywalking的日志链路追踪,提升发布效率与系统稳定性。

425 0
|
10月前
|
SQL Java 数据库连接
|

MyBatis分页

本文介绍MyBatis分页实现方式:RowBounds为内存分页,大数据易溢出;PageHelper等插件通过SQL改写实现物理分页,支持多数据库;还可借助subList或自定义拦截器分页。总结:大数据场景推荐物理分页,性能更优,优先于逻辑分页。(238字)

425 0
|
10月前
|
JSON 缓存 前端开发
|

什么是跨域

CORS(跨域资源共享)是W3C标准,允许浏览器向跨源服务器发起XMLHttpRequest请求,突破AJAX同源限制。需浏览器和服务器共同支持,现代浏览器均兼容。通信过程由浏览器自动完成,开发者无需特殊处理。CORS将请求分为简单和非简单两类,前者直接发送Origin头,后者需预检。服务器通过Access-Control-开头的响应头控制权限。相比仅支持GET的JSONP,CORS支持所有HTTP方法,更灵活安全。

159 0
|
10月前
|
存储 缓存 运维
|

一场FullGC故障排查

本文记录了一次JVM CPU使用率飙升至104%的问题排查过程,通过分析发现是Full GC频繁触发导致。根本原因为大对象(List<Map>)长期驻留内存,造成老年代空间不足。借助JProfiler分析堆 dump 文件,定位到用户上传的Excel数据以低效结构存储,导致内存膨胀近10倍。最终提出“治本”与“治标”两类解决方案,并总结了线上高CPU问题的排查思路:关注JVM而非机器监控,结合工具与现象推理,精准定位根因。

183 0
|
10月前
|
人工智能 JSON 安全
|

大模型应用开发中MCP与Function Call的关系与区别

MCP与Function Call是大模型应用的两大关键技术。前者为跨模型工具调用的标准化协议,实现系统解耦与生态扩展;后者是模型调用外部功能的内置机制。二者互补协同,推动AI应用向高效、开放、安全演进。

580 0
|
10月前
|
SQL 存储 关系型数据库
|

慢SQL说起:淘天交易订单表如何做索引优化

本文以淘天电商订单表一条非典型慢SQL为切入点,系统剖析了索引优化理论与实践。内容涵盖B+Tree与B-Tree结构差异、索引下推、排序机制、EXPLAIN与Query Profile等诊断工具使用,并结合大规模线上集群经验,总结慢SQL常见成因及治理策略,提出标准化索引变更SOP,助力高效稳定数据库性能优化。

210 0
|
10月前
|
存储 数据库
|

数据库设计三范式

本文详解数据库三范式:第一范式要求字段原子性,不可再分;第二范式在满足第一范式基础上,消除部分依赖,确保主键唯一确定非主键;第三范式消除传递依赖,避免非主键间推导。通过实例分析,说明范式优化可减少冗余、提升维护性,但也需结合实际灵活设计表结构。

267 0
|
10月前
|
负载均衡 中间件 Java
|

每日必会1

微服务并非绝对优于单体,需结合业务场景。简单应用用单体更轻量,避免分布式复杂性;复杂业务适合微服务,降低耦合,利于扩展。常用中间件如Nacos(注册/配置中心)、OpenFeign(远程调用)、Gateway(网关)。Nacos通过心跳机制维护实例状态,支持临时(心跳剔除)与非临时(主动检测)实例,相比Eureka,兼具AP/CP模式,服务发现更及时。负载均衡常用轮询、加权轮询等,项目中多用轮询策略。

411 0
|
10月前
|
XML 算法 安全
|

详解RAG五种分块策略,技术原理、优劣对比与场景选型之道

RAG通过检索与生成结合,提升大模型在企业场景的准确性与安全性。分块策略是其核心,直接影响检索效果与回答质量。本文系统解析五种主流分块方法:固定大小、语义、递归、基于文档结构及LLM分块,对比其优缺点与适用场景,并提出组合优化路径,助力构建高效、可信的RAG系统。

820 0

每日必会7

CAP理论指出分布式系统中一致性(C)、可用性(A)、分区容错性(P)不可兼得,P必然存在,故只能在A和C间权衡。BASE理论提出基本可用、软状态、最终一致性的解决方案。Seata AT模式通过全局事务ID(XID)协调分支事务注册、提交或回滚,实现分布式事务一致性。MQ防消息丢失需生产者确认、持久化、消费者手动ACK;防重复消费靠幂等设计;防积压可扩容、批量处理、限流降级。

112 0
|
10月前
|
Linux 数据安全/隐私保护 虚拟化
|

虚拟机安装(CentOS7)

准备CentOS7镜像及VMware Workstation(可从百度云下载),提取码已提供。使用VMware创建虚拟机,参考指定教程完成安装。默认登录用户为root,密码由用户自设。确保电脑配置满足运行需求。(238字)

624 0
|
10月前
|
NoSQL Shell Redis
|

Redis集群伸缩,转移插槽失败

Redis集群出现slots状态异常,提示节点间配置不一致,部分slot处于importing状态。需登录对应实例,执行`cluster setslot <id> stable`命令恢复slot稳定状态,修复问题后方可重新平衡集群。注意根据实际slot ID调整参数。

171 0
|
10月前
|
消息中间件 存储 人工智能
|

基于 RocketMQ LiteTopic 打造企业级 Session 管理

AI场景下,Session需满足低延迟、时序性、隔离性与上下文压缩四大要求。基于RocketMQ LiteTopic实现,可提供会话持久化、断点恢复、多会话隔离与流量削峰能力,保障会话不丢失、可追溯、高并发稳定,助力构建企业级多智能体系统。(238字)

418 0
|
10月前
|
安全 数据安全/隐私保护 微服务
|

SpringSecurity权限管理

权限管理涵盖认证与授权:认证验证用户身份(如登录),授权分配角色权限,控制资源访问。通过ACL、RBAC等模型,构建安全的访问控制机制,保障系统数据与流程安全,防止越权操作与信息泄露。(238字)

177 0
|
10月前
|
Java Sentinel 微服务
|

服务保护、分布式事务

本课程聚焦微服务保护核心技能,涵盖雪崩问题、熔断降级、限流隔离等机制,学习Sentinel实现熔断、降级、限流策略配置,掌握FallbackFactory降级逻辑编写,理解CAP原理与Seata分布式事务,全面提升微服务高可用设计能力。

228 0
|
10月前
|
SQL Java 数据库连接
|

持久层框架MyBatisPlus

MyBatisPlus是MyBatis的增强工具,简化单表CRUD操作,支持条件构造器、分页、逻辑删除等功能,提升开发效率。

189 0
|
10月前
|
关系型数据库 MySQL Java
|

开发环境搭建

配置开发环境是高效学习的第一步。要求电脑内存16G以上(推荐32G),建议配备便携显示器分屏开发。下载并安装虚拟机(CentOS 7,IP:192.168.101.68)、IDEA、Maven、Git等工具,导入课程提供的虚拟机与资料,配置SSH远程连接及本地仓库。通过Gitee Fork黑马商城项目,使用DataGrip创建数据库并导入SQL,启动Docker服务与Nginx运行前端,完成整体环境搭建,确保开发顺利进行。

202 0
|
10月前
|
关系型数据库 应用服务中间件 nginx
|

容器引擎Docker

本节介绍Docker技术,解决微服务部署中环境不一致、依赖冲突等问题。通过镜像打包应用及依赖,实现跨环境无缝迁移;利用容器隔离机制保障服务独立运行;结合Docker Compose快速部署分布式应用,提升开发、测试、运维效率。

166 0
|
10月前
|
存储 SpringCloudAlibaba 负载均衡
|

Nacos注册中心

本文详细介绍Nacos的安装部署、服务注册中心整合、分级模型、负载均衡策略、权重控制、环境隔离及实例类型,涵盖从入门到实战的核心知识点。通过SpringCloud Alibaba集成,实现微服务注册与发现,并深入解析Nacos在多集群、多环境下的应用实践,助力构建高效稳定的微服务体系。(238字)

180 0
|
10月前
|
安全 Java 数据库
|

用户自定义认证

本文深入分析Spring Security认证流程,从UsernamePasswordAuthenticationFilter过滤器入手,解析用户登录认证的实现机制,重点讲解AuthenticationManager与AuthenticationProvider的协作过程,并揭示DaoAuthenticationProvider如何通过UserDetailsService完成自定义用户认证,为集成数据库认证提供源码级指导。

139 0
|
10月前
|
存储 安全 Java
|

认证源码分析与自定义后端认证逻辑

本文深入分析Spring Security认证流程,从UsernamePasswordAuthenticationFilter到AuthenticationManager、ProviderManager,最终解析DaoAuthenticationProvider如何通过UserDetailsService实现自定义认证。重点揭示了自定义用户服务需实现loadUserByUsername并返回含权限的UserDetails对象,结合配置类注册服务,实现数据库认证。附完整代码仓库。

132 0
|
10月前
|
Java 大数据
|

ArrayList扩容机制

ArrayList的add方法添加元素时,先调用ensureCapacityInternal()确保容量。首次添加时,最小容量设为10,触发扩容;后续添加若超出当前容量,则调用grow()将容量扩为原来的1.5倍。grow()通过位运算高效计算新容量,确保集合动态扩展性能。注意:length用于数组,length()用于字符串,size()用于集合。

158 0
|
10月前
|
人工智能 Cloud Native 编译器
|

ARM 与 x86 之争,已经不是“谁干掉谁”,而是“谁更像未来”

ARM 与 x86 之争,已经不是“谁干掉谁”,而是“谁更像未来”

628 7
|
10月前
|
数据采集 自然语言处理 JavaScript
|

不写规则也能抽数据?

本文探讨了企业在招聘数据分析中对薪资信息采集的挑战,分析了从纯规则采集到智能解析的发展,并指出智能解析在招聘场景中的局限性。推荐企业采用人工规则与智能解析相结合的策略,以确保数据的稳定性和可解释性。

540 2
|
10月前
|
JSON 前端开发 API
|

京东商品详情 API 实战指南

京东商品详情API通过抓包分析前端异步请求,获取商品标题、价格、库存等核心信息,适用于电商数据分析与比价系统。本文详解接口逻辑、关键参数及Python实现,并强调反爬策略与合规性,助力开发者安全高效采集数据。(238字)

538 3
|
10月前
|
存储 文字识别 数据可视化
|

实用代码工具:Python打造PDF选区OCR / 截图批量处理工具(支持手动/全自动模式)

一款基于Python的PDF区域OCR与截图工具,支持精准框选、文字识别、图片截取及Excel一键导出。内置手动审核与全自动批量处理模式,结合PyMuPDF、easyocr等技术,实现高效、可视化的PDF数据提取,适用于发票、报表等场景,显著提升办公效率。

1336 11
|
10月前
|
人工智能 调度 芯片
|

Chiplet 技术:芯片终于不再“憋大招”,而是开始像搭积木一样干活了

Chiplet 技术:芯片终于不再“憋大招”,而是开始像搭积木一样干活了

457 0
|
10月前
|
机器学习/深度学习 人工智能 芯片
|

当算力变成“新石油”:AI 芯片的战争、底层逻辑与未来爆点

当算力变成“新石油”:AI 芯片的战争、底层逻辑与未来爆点

531 15
|
10月前
|
存储 数据采集 供应链
|

CNFans模式淘宝1688代购系统搭建指南

CNFans代购系统整合1688供应链与淘宝渠道,为跨境用户提供一站式代购服务。通过API对接实现商品、订单、支付数据自动化,支持多币种结算与全程物流追踪。面向小微电商、海外代购及价格敏感型消费者,提供代购、质检、仓储、物流等全流程服务,保障正品与性价比。盈利涵盖服务费、增值服务、广告与会员订阅,打造安全透明的跨境代购生态平台。(239字)

1012 0
|
10月前
|
JSON API 数据格式
|

1688商品快递费用API概述

1688商品快递费用API是阿里巴巴提供的标准接口,支持通过POST/GET请求以JSON格式实时查询商品运费。可获取不同快递公司的费用、时效、明细及支持的快递列表,助力电商系统精准展示运费,优化用户购物体验。

437 0
|
10月前
|
消息中间件 关系型数据库 MySQL
|

别再迷信“你给我一次,我还你一次”:聊聊数据流水线里的 Exactly-Once 神话

别再迷信“你给我一次,我还你一次”:聊聊数据流水线里的 Exactly-Once 神话

362 5

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

0
今日
70453
内容
128
活动
440246
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务