|
11月前
|
SQL 关系型数据库 MySQL
|

三、Sqoop 全量导入核心命令

在大数据处理过程中,数据库表怎么高效导入到 Hadoop?这一篇我带大家实战讲解 Sqoop 全量导入 的用法,从基础命令到常用参数配置,再到导入到 HDFS、Hive 的各种格式案例,配合实操示例,帮你一步步掌握全量导入技巧。最后还有练习题,供大家动手巩固一下。

510 2
|
11月前
|
Java
|

Java基础语法与面向对象

重载(Overload)指同一类中方法名相同、参数列表不同,与返回值无关;重写(Override)指子类重新实现父类方法,方法名和参数列表必须相同,返回类型兼容。重载发生在同类,重写发生在继承关系中。

268 1
|
11月前
|
JavaScript Java 关系型数据库
|

基于springboot的电影购票管理系统

本系统基于Spring Boot框架,结合Vue、Java与MySQL技术,实现电影信息管理、在线选座、购票支付等核心功能,提升观众购票体验与影院管理效率,推动电影产业数字化发展。

604 9
|
11月前
|
机器学习/深度学习 自然语言处理 PyTorch
|

Transformer自回归关键技术:掩码注意力原理与PyTorch完整实现

掩码注意力是生成模型的核心,通过上三角掩码限制模型仅关注当前及之前token,确保自回归因果性。相比BERT的双向注意力,它实现单向生成,是GPT等模型逐词预测的关键机制,核心仅需一步`masked_fill_`操作。

771 0
|
11月前
|
机器学习/深度学习 算法 数据可视化
|

从另一个视角看Transformer:注意力机制就是可微分的k-NN算法

注意力机制可理解为一种“软k-NN”:查询向量通过缩放点积计算与各键的相似度,softmax归一化为权重,对值向量加权平均。1/√d缩放防止高维饱和,掩码控制信息流动(如因果、填充)。不同相似度函数(点积、余弦、RBF)对应不同归纳偏置,多头则在多个子空间并行该过程。

715 7
|
11月前
|
JavaScript Java 关系型数据库
|

基于springboot的家政服务预约系统

随着社会节奏加快与老龄化加剧,家政服务需求激增,但传统模式存在信息不对称、服务不规范等问题。基于Spring Boot、Vue、MySQL等技术构建的家政预约系统,实现服务线上化、标准化与智能化,提升用户体验与行业效率,推动家政服务向信息化、规范化发展。

569 3
|
11月前
|
数据采集 机器学习/深度学习 搜索推荐
|

MIT新论文:数据即上限,扩散模型的关键能力来自图像统计规律,而非复杂架构

MIT与丰田研究院研究发现,扩散模型的“局部性”并非源于网络架构的精巧设计,而是自然图像统计规律的产物。通过线性模型仅学习像素相关性,即可复现U-Net般的局部敏感模式,揭示数据本身蕴含生成“魔法”。

405 3
|
11月前
|
搜索推荐 算法 JavaScript
|

基于springboot的健康饮食营养管理系统

本系统基于Spring Boot、Vue与MySQL技术,融合大数据与AI算法,构建个性化健康饮食管理平台。结合用户身体状况、目标需求,智能推荐营养方案,助力科学饮食与健康管理。

772 2
|
11月前
|
人工智能 自然语言处理 算法
|

现代AI工具深度解析:从GPT到多模态的技术革命与实战应用

蒋星熠Jaxonic,AI技术探索者,深耕代码生成、多模态AI与提示词工程。分享AI工具架构、实战应用与优化策略,助力开发者提升效率,共赴智能编程新纪元。

489 4
|
11月前
|
存储 人工智能 监控
|

看得清、判得准、动得快:智能摄像头如何优化安全监控系统

看得清、判得准、动得快:智能摄像头如何优化安全监控系统

317 3
|
11月前
|
人工智能 搜索推荐 SEO
|

【1分钟解密】如何让 AI 大模型推荐你的品牌

随着AI逐渐取代传统搜索,企业如何让AI“看见”并“信任”你?GEO(生成式引擎优化)应运而生,它不仅是SEO的延伸,更是让AI主动推荐你的关键策略。通过优化内容结构、提升权威性与可读性,GEO助力企业在AI生成的答案中占据一席之地,赢得未来流量入口。

888 5
来自: 智能搜索推荐  版块
|
11月前
|
数据采集 JSON 自然语言处理
|

超越传统XPath:用LLM理解复杂网页信息

本文深入探讨网页信息抽取技术的演进,从传统 XPath/CSS 结构匹配,到结合 LLM(大语言模型)的语义理解方法。分析了旧技术在动态渲染、结构变化和语义识别方面的局限,并通过架构图、实验数据和示例代码展示 LLM 在新闻、电商、社交等复杂场景中的高效应用。同时强调爬虫代理等基础设施的重要性,为信息抓取提供稳定网络环境。

476 1
|
11月前
|
机器学习/深度学习 数据采集 算法
|

量子机器学习入门:三种数据编码方法对比与应用

在量子机器学习中,数据编码方式决定了量子模型如何理解和处理信息。本文详解角度编码、振幅编码与基础编码三种方法,分析其原理、实现及适用场景,帮助读者选择最适合的编码策略,提升量子模型性能。

833 8
|
11月前
|
算法 API 数据安全/隐私保护
|

深度解析京东图片搜索API:从图像识别到商品匹配的算法实践

京东图片搜索API基于图像识别技术,支持通过上传图片或图片URL搜索相似商品,提供智能匹配、结果筛选、分页查询等功能。适用于比价、竞品分析、推荐系统等场景。支持Python等开发语言,提供详细请求示例与文档。

894 5
|
11月前
|
数据采集 监控 C#
|

构建一个“会思考”的房地产数据获取脚本

本文探讨如何借鉴认知科学中的“自适应”理念,设计具备环境反馈调整能力的智能爬虫系统,用于高效监测房地产市场信息。

173 0
|
11月前
|
搜索推荐 数据挖掘 大数据
|

数据能不能养出“死忠粉”?聊聊用数据驱动品牌忠诚度的那些事

数据能不能养出“死忠粉”?聊聊用数据驱动品牌忠诚度的那些事

265 6
|
11月前
|
SQL 人工智能 分布式计算
|

ODPS十五周年实录|构建 AI 时代的大数据基础设施

本文根据 ODPS 十五周年·年度升级发布实录整理而成,演讲信息如下: 张治国:阿里云智能集团技术研究员、阿里云智能计算平台事业部 ODPS-MaxCompute 负责人 活动:【数据进化·AI 启航】ODPS 年度升级发布

492 9
|
11月前
|
机器学习/深度学习 人工智能 JSON
|

微软rStar2-Agent:新的GRPO-RoC算法让14B模型在复杂推理时超越了前沿大模型

Microsoft Research最新推出的rStar2-Agent在AIME24数学基准测试中以80.6%的准确率超越超大规模模型DeepSeek-R1,展现“思考更聪明”而非“更长”的AI推理新方向。

384 8
|
11月前
|
数据采集 算法 搜索推荐
|

面向教育平台的分层内容采集思路

随着在线教育平台快速发展,其内容采集需应对层级化、动态更新及访问限制等挑战。本文提出分层采集方案,结合代理服务与异步爬虫技术,实现高效稳定的数据抓取,适用于教育平台及其他内容型平台的数据采集需求。

244 1
|
12月前
|
算法 机器人 定位技术
|

基于机器视觉和Dijkstra算法的平面建筑群地图路线规划matlab仿真

本程序基于机器视觉与Dijkstra算法,实现平面建筑群地图的路径规划。通过MATLAB 2022A读取地图图像,识别障碍物并进行路径搜索,支持鼠标选择起点与终点,最终显示最优路径及长度,适用于智能导航与机器人路径规划场景。

318 5
|
12月前
|
机器学习/深度学习 自然语言处理 监控
|

保险行业的“算命术”?——数据驱动的风险评估真相

保险行业的“算命术”?——数据驱动的风险评估真相

286 6
|
12月前
|
机器学习/深度学习 数据采集 搜索推荐
|

手表只会报步数?别闹了,用神经网络优化健康监测才是王道

手表只会报步数?别闹了,用神经网络优化健康监测才是王道

391 24
|
12月前
|
JSON 缓存 供应链
|

1688图片搜索API秘籍!轻松获取相似商品数据

1688图片搜索API基于图像识别技术,支持通过上传商品图片搜索同款或相似商品,适用于电商选品、供应链管理等场景。提供多种搜索模式与结果过滤条件,支持Python等开发语言,提升采购效率。

691 0
|
12月前
|
机器学习/深度学习 人工智能 自然语言处理
|

Java 大视界 -- Java 大数据机器学习模型在自然语言生成中的可控性研究与应用(229)

本文深入探讨Java大数据与机器学习在自然语言生成(NLG)中的可控性研究,分析当前生成模型面临的“失控”挑战,如数据噪声、标注偏差及黑盒模型信任问题,提出Java技术在数据清洗、异构框架融合与生态工具链中的关键作用。通过条件注入、强化学习与模型融合等策略,实现文本生成的精准控制,并结合网易新闻与蚂蚁集团的实战案例,展示Java在提升生成效率与合规性方面的卓越能力,为金融、法律等强监管领域提供技术参考。

435 0
|
12月前
|
机器学习/深度学习 算法 Java
|

Java 大视界 -- Java 大数据在智能物流运输车辆智能调度与路径优化中的技术实现(218)

本文深入探讨了Java大数据技术在智能物流运输中车辆调度与路径优化的应用。通过遗传算法实现车辆资源的智能调度,结合实时路况数据和强化学习算法进行动态路径优化,有效提升了物流效率与客户满意度。以京东物流和顺丰速运的实际案例为支撑,展示了Java大数据在解决行业痛点问题中的强大能力,为物流行业的智能化转型提供了切实可行的技术方案。

898 0
|
12月前
|
JSON API 数据格式
|

京东商品评论API秘籍!轻松获取商品评论数据

京东商品评论API是京东开放平台提供的数据接口,支持按商品ID获取评论,具备分页、评分筛选、排序等功能,适用于电商数据分析与用户反馈收集。接口采用HTTPS请求,数据格式为JSON,具备高并发处理能力。附Python请求示例代码,便于开发者快速集成。

425 0
|
12月前
|
JSON 监控 API
|

京东商品详情API秘籍!轻松获取商品详情数据

京东商品详情API提供商品SPU/SKU的完整信息,涵盖基础属性、价格、库存及促销等120+字段,支持HTTPS协议与JSON格式,适用于电商多场景。

571 0
|
12月前
|
人工智能 算法 量子技术
|

北京百思可瑞教育:模拟天气这件事,量子计算机轻松实现模拟天气气候

本文探讨了气候预测的复杂性及量子计算在该领域的潜力。传统超级计算机难以应对气候模型的庞大计算量,而量子计算凭借其并行性和量子纠缠特性,有望大幅提升气候模拟的效率与精度。文章介绍了量子计算的基本原理、相关实验进展,以及其在碳捕捉、城市微气候预测等方面的应用前景,展望了未来量子技术在气候科学中的深远影响。

351 0
|
12月前
|
Cloud Native 前端开发 Java
|

WebAssembly 与 Java 结合的跨语言协作方案及性能提升策略研究

本文深入探讨了WebAssembly与Java的结合方式,介绍了编译Java为Wasm模块、在Java中运行Wasm、云原生集成等技术方案,并通过金融分析系统的应用实例展示了其高性能、低延迟、跨平台等优势。结合TeaVM、JWebAssembly、GraalVM、Wasmer Java等工具,帮助开发者提升应用性能与开发效率,适用于Web前端、服务器端及边缘计算等场景。

428 0
|
12月前
|
存储 SQL Java
|

Java 大视界 -- Java 大数据在智能医疗手术风险评估与术前方案制定中的应用探索(203)

本文探讨了Java大数据技术在智能医疗手术风险评估与术前方案制定中的创新应用。通过多源数据整合、智能分析模型构建及知识图谱技术,提升手术风险预测准确性与术前方案制定效率,助力医疗决策智能化,推动精准医疗发展。

324 0
|
1月前
|

【FFA 2026】主论坛

158
来自: 实时计算 Flink  版块
|
2月前
|
机器学习/深度学习 SQL 运维
|

Aloudata Agent 分析技能详解:从一个业务问题到一份可用分析

一场完整的分析闭环:口径确认、名单融合、结果呈现、因子拆解、维度下钻、明细验证、What-if 测算、报告交付。

117 0
|
2月前
|
监控 搜索推荐 算法
|

Java 获取淘宝图搜接口(拍立淘)开发文档

本文系统介绍淘宝图片搜索API(拍立淘)在Java环境下的两种主流接入方案:淘宝开放平台TOP接口与阿里云图像搜索服务,涵盖接入准备、图片要求、签名算法、完整代码实现及常见问题解决方案,适用于电商比价、内容带货等场景。

362 0
|
2月前
|
数据采集 监控 JavaScript
|

全面复盘:BeautifulSoup在处理大规模脏数据时的崩溃问题与解法

本文深度剖析BeautifulSoup在大规模脏数据处理中的三大崩溃场景:内存溢出、中文乱码、畸形HTML卡死,并提供经生产验证的解决方案——流式解析+SoupStrainer、多级智能编码探测、解析器降级+超时熔断,以及进程隔离重启机制。(239字)

158 0
|
2月前
|
人工智能 JSON 自然语言处理
|

从RAG工程到企业数字资产:艾索四标融合GEO方法论V2.0升级版的技术架构解读

本文介绍福建艾索“四标融合GEO方法论V2.0”,将GB/T 23011、45341、45988及ISO/IEC 42001四大国标深度嵌入RAG架构,聚焦语义匹配度、证据密度与信源权威性三大权重维度,实现品牌知识在大模型检索中的高权重工程化落地。(239字)

228 1
来自: 智能搜索推荐  版块
|
2月前
|
机器学习/深度学习 人工智能 自然语言处理
|

人工智能|大白话GPT

GPT-1是首个基于Transformer解码器的生成式预训练模型,采用自回归方式逐词生成文本:以起始,依上下文预测下一词,循环直至。其核心为12层Decoder-only架构,通过掩码自注意力实现单向语言建模,并支持分类、蕴含等下游任务微调。(239字)

258 1
|
2月前
|
机器学习/深度学习 编解码 算法
|

基于YOLO11的无人机影像 海上油污分类与分割 (数据集+代码+模型+界面)

用无人机影像进行海上油污分类与分割 1. 引言 在这里插入图片描述 随着全球工业化进程的加速,海洋石油泄漏事件的发生频率逐年增加。这些事故不仅对环境造成巨大破坏,也给人类健康和社会经济带来了严重影响。为了有效应对和管理这类突发事件,及时准确地检测、分类并分割出海面上的油污区域变得至关重要。近年来,借助无人机(UAV, Unmanned Aerial Vehicle)获取高分辨率影像数据,并结合先进的图像处理和机器学习技术,为实现这一目标提供了新的解决方案。 本篇文章将详细介绍如何利用无人机拍摄的视频片段来完成海上油污的分类与分割任务,涵盖从数据收集到模型训练再到结果分析的全流程。 2.

171 0
|
2月前
|
机器学习/深度学习 数据采集 TensorFlow
|

基于ResNet50的鱼类识别系统设计 图像分类识别

基于ResNet50的鱼类识别系统设计 图像分类识别

155 0
|
2月前
|
机器学习/深度学习 数据可视化 PyTorch
|

PyTorch深度学习实战 |手算​​变分自编码器(VAE)

本文详解变分自编码器(VAE)原理:指出传统自编码器因潜在空间无序而无法生成新图像;VAE通过引入概率建模,用高斯分布近似后验,并结合重构损失与KL散度优化,使潜在空间连续可采样,从而实现可控图像生成。含公式推导、重参数化技巧及完整代码实现。(239字)

292 1
|
2月前
|
机器学习/深度学习 数据采集 自然语言处理
|

基于LSTM的时间序列预测研究

基于LSTM的时间序列预测研究

133 0
|
2月前
|
机器学习/深度学习 人工智能 数据可视化
|

手算神经网络

本文介绍了使用2×3×1神经网络实现房价预测的全过程。首先通过手动计算演示了单个样本的前向传播和反向传播,包括权重初始化和梯度更新。随后使用PyTorch实现了完整的神经网络模型,包含数据准备、网络结构定义、损失函数计算和优化器设置。在训练过程中记录了损失值变化,并可视化展示训练效果。最后提供了一个挖空版本的代码框架,帮助读者逐步完成神经网络的关键实现步骤,包括导入包、定义网络框架、数据准备、训练循环和结果可视化等模块。通过这个完整的项目实践,读者可以掌握神经网络从理论到实现的全流程。

125 0
|
2月前
|
机器学习/深度学习 数据可视化 安全
|

基于YOLOv11肺结节检测系统 医学图像诊断识别

基于YOLOv11肺结节检测系统 医学图像诊断识别

113 0
|
2月前
|
SQL 数据可视化 Linux
|

一个基于 .NET 与 Avalonia 构建、面向 TrinityCore 的开源 WoW 数据库编辑器

WoWDatabaseEditor 是一款基于 .NET 与 Avalonia 构建的开源跨平台编辑器,专为 TrinityCore/AzerothCore 服务端设计,可视化编辑数据库及 Smart Scripts,支持 TC 3.3.5–10.x、DBC 多版本及 Win/macOS/Linux。

184 7
|
2月前
|
算法 vr&ar 数据库
|

AR 智能眼镜智正优化警务领域的日常巡逻和排查麻烦的难点

AR智能眼镜开启安防3.0时代:远距精准识别、动态人脸追踪,实现“抬眼即查”;支持秒级人脸/车牌比对,赋能移动执法、重点排查与大型活动交通疏导,续航达4小时,全面提升安防响应效率。

169 1
|
2月前
|
JSON 安全 Java
|

代购转运运费计算引擎:从硬编码到规则配置,taocarts给的设计思路

做跨境代购最头疼的就是运费计算。不同物流渠道(EMS、DHL、SF)的计费规则五花八门:有的按实际重量,有的按体积重,还有的按“单边长度超过60cm加收超长费”。之前我们的代购系统里全是 if-else,每次新增渠道都要改代码发版。后来我参考 taocarts 的运费模板设计,用规则引擎重构了代购转运和国际集运的计费模块。

220 0
|
3月前
|
人工智能 数据挖掘
|

作为CTO,我发现:越来越多人把月度订阅预算,留给了AI

CTO指出:AI正从娱乐订阅转向生产力基建。用户愿持续付费,因其带来时间节省、能力跃迁与认知协同——如3小时工作缩至30分钟、零基础写代码或设计。AI已步入“价值竞争”时代,核心是帮用户沉淀知识、经验与工作流,成为个人能力的基础设施。

171 1
|
3月前
|
人工智能 前端开发 JavaScript
|

用AI重塑RPA稳定性:实在Agent TARS语义定位技术拆解与落地实践

实在智能在实在Agent v7.3.4中推出TARS AI元素定位技术,通过视觉-语义联合建模,实现多模态编码、语义锚点生成与动态匹配优化,显著提升RPA在敏捷前端环境下的元素识别稳定性与自适应能力,配置即用,助力企业自动化迈向真正无人值守。(239字)

329 7

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

0
今日
69942
内容
128
活动
440113
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务