|
9月前
|
算法 数据安全/隐私保护
|

光学涡旋Talbot阵列照明器的matlab模拟与仿真

本程序基于MATLAB 2022a版本,模拟了光学涡旋Talbot阵列照明器的功能。该技术结合了光学涡旋与Talbot效应,广泛应用于激光材料加工、光镊技术和显微成像等领域。通过核心算法实现光学涡旋(具有螺旋相位分布的光束)和Talbot效应(周期性结构自像重现)的模拟。程序运行结果无水印,展示了光学涡旋的拓扑荷特性及近场/远场Talbot效应的原理,为设计同轴或不同轴排列的光学涡旋阵列提供了理论支持。

187 1
|
9月前
|
机器学习/深度学习 供应链 算法
|

智能电网里的大数据魔法:让能源管理更智慧、更节能

智能电网里的大数据魔法:让能源管理更智慧、更节能

238 6
|
9月前
|
分布式计算 Java Scala
|

【赵渝强老师】Scala编程语言

Scala 是一种集成面向对象与函数式编程特性的多范式语言,运行于 Java 平台并兼容 Java 程序。学习 Scala 为掌握 Spark 和 Flink 打下基础。本文通过视频讲解及代码示例,展示如何用 Scala 在 Spark 和 Flink 中实现 WordCount 程序,包括环境配置、数据处理及输出操作,帮助理解其实际应用。

165 19
|
9月前
|
Cloud Native 大数据 Java
|

大数据新视界--大数据大厂之大数据时代的璀璨导航星:Eureka 原理与实践深度探秘

本文深入剖析 Eureka 在大数据时代分布式系统中的关键作用。涵盖其原理,包括服务注册、续约、发现及自我保护机制;详述搭建步骤、两面性;展示在大数据等多领域的应用场景、实战案例及代码演示。Eureka 如璀璨导航星,为分布式系统高效协作指引方向。

257 9
|
9月前
|
SQL 数据可视化 数据挖掘
|

别再“拍脑袋”决策了,学点数据分析,从零起步也不晚!

别再“拍脑袋”决策了,学点数据分析,从零起步也不晚!

207 40
|
9月前
|
存储 机器学习/深度学习 人工智能
|

数据与生命的对话:当大数据遇上生物信息学

数据与生命的对话:当大数据遇上生物信息学

245 17
|
9月前
|
人工智能 机器人 人机交互
|

虚拟现实让手术模拟更逼真,你敢相信医生是“游戏”练出来的吗?

虚拟现实让手术模拟更逼真,你敢相信医生是“游戏”练出来的吗?

238 11
|
9月前
|
XML 数据挖掘 API
|

小红书笔记详情API接口如何使用

小红书作为社交媒体平台,拥有海量优质笔记内容。为方便开发者获取笔记详情(如标题、正文、图片、点赞数等),可假设存在一个合规的 API 接口。该接口通过 note_id、timestamp 和 sign 等参数进行调用,采用 HTTP 请求方式,返回 JSON 或 XML 格式的响应数据。尽管小红书官方未正式开放 API,但此假设有助于理解其潜在应用场景,如内容分析与数据挖掘等。

750 4
|
9月前
|
JSON API 开发者
|

微店商品列表 API 接口(附代码示例)

微店商品列表 API 为开发者提供从微店平台获取商品数据的便捷途径,支持分页、分类筛选和排序等功能,响应数据以 JSON 格式返回,包含商品 ID、名称、价格等信息。通过 Python 的 `requests` 库,开发者可轻松调用该接口,实现电商工具开发、市场分析等场景应用。示例代码展示了如何发送请求并处理响应数据,助力高效利用 API 拓展业务功能。

204 10
|
9月前
|
SQL 分布式计算 数据挖掘
|

从Excel到高级工具:数据分析进阶指南

从Excel到高级工具:数据分析进阶指南

432 54
|
9月前
|
自动驾驶 物联网 5G
|

5G赛道,谁主沉浮?——技术、市场与背后的博弈

5G赛道,谁主沉浮?——技术、市场与背后的博弈

221 12
|
10月前
|
人工智能 边缘计算 5G
|

“工厂不再靠喊,靠5G调度!”——5G如何点燃智能制造的引擎

“工厂不再靠喊,靠5G调度!”——5G如何点燃智能制造的引擎

223 17
|
10月前
|
存储 消息中间件 Java
|

抖音集团电商流量实时数仓建设实践

本文基于抖音集团电商数据工程师姚遥在Flink Forward Asia 2024的分享,围绕电商流量数据处理展开。内容涵盖业务挑战、电商流量建模架构、流批一体实践、大流量任务调优及总结展望五个部分。通过数据建模与优化,实现效率、质量、成本和稳定性全面提升,数据质量达99%以上,任务性能提升70%。未来将聚焦自动化、低代码化与成本优化,探索更高效的流批一体化方案。

648 12
来自: 实时计算 Flink  版块
|
10月前
|
数据采集 搜索推荐 算法
|

大数据赋能零售,打造个性化购物新纪元

大数据赋能零售,打造个性化购物新纪元

211 12
|
10月前
|
数据采集 JSON 前端开发
|

GraphQL接口采集:自动化发现和提取隐藏数据字段

本文围绕GraphQL接口采集展开,详解如何通过`requests`+`Session`自动化提取隐藏数据字段,结合爬虫代理、Cookie与User-Agent设置实现精准抓取。内容涵盖错误示例(传统HTML解析弊端)、正确姿势(GraphQL请求构造)、原因解释(效率优势)、陷阱提示(反爬机制)及模板推荐(可复用代码)。掌握全文技巧,助你高效采集Yelp商家信息,避免常见误区,快速上手中高级爬虫开发。

197 3
|
10月前
|
消息中间件 存储 大数据
|

实时数据的魔法:如何让你的大数据像弹幕一样快?

实时数据的魔法:如何让你的大数据像弹幕一样快?

219 8
|
10月前
|
算法 搜索推荐 大数据
|

数据驱动增长:大数据与营销自动化的结合之道

数据驱动增长:大数据与营销自动化的结合之道

241 3
|
10月前
|
关系型数据库 MySQL 数据安全/隐私保护
|

大数据新视界--大数据大厂之MySQL 数据库课程设计:数据安全深度剖析与未来展望

本文深入探讨数据库课程设计 MySQL 的数据安全。以医疗、电商、企业案例,详述用户管理、数据加密、备份恢复及网络安全等措施,结合数据安全技术发展趋势,与《大数据新视界 -- 大数据大厂之 MySQL 数据库课程设计》紧密关联,为 MySQL 数据安全提供全面指南。

255 11
|
10月前
|
存储 分布式计算 大数据
|

数据湖——大数据存储的新思维,如何打破传统束缚?

数据湖——大数据存储的新思维,如何打破传统束缚?

401 16
|
10月前
|
数据采集 测试技术 C++
|

无headers爬虫 vs 带headers爬虫:Python性能对比

无headers爬虫 vs 带headers爬虫:Python性能对比

319 5
|
10月前
|
计算机视觉
|

用离散标记重塑人体姿态:VQ-VAE实现关键点组合关系编码

本文探讨了基于离散标记的人体姿态表示方法,受《Human Pose As Compositional Tokens》启发,构建了一个姿态重建模型。传统方法将关键点作为独立单元处理,而本文提出将姿态表示为一组学习到的离散标记组合,通过组合编码器、VQ码本和姿态解码器实现。实验使用合成火柴人数据集,包含13个二维关键点。初始端到端训练出现“码本崩溃”问题,后采用分阶段训练策略:先预训练编码器和解码器,再引入码本训练,有效缓解了该问题。此方法捕获了关键点间的结构化关系,为姿态分析提供了新思路。

337 2
|
10月前
|
JSON 数据挖掘 API
|

深入研究:京东商品评论API详解

京东商品评论API助力电商数据分析与优化。通过该接口,开发者可获取商品评论内容、时间、评分等详细信息,以及好评率、差评率等统计数据。适用于用户体验分析、市场调研等场景。使用前需注册开发者账号、申请权限,并正确配置参数(如app_key、商品ID等)。返回数据为JSON格式,便于解析与应用。

513 10
|
10月前
|
JSON 数据挖掘 API
|

深入研究:京东店铺所有商品API详解

本文介绍了一款强大的工具——京东店铺所有商品API,它可以帮助用户批量获取指定京东店铺的商品详细信息。通过传入店铺ID,API可返回包括商品名称、价格、库存、销量等在内的多维度数据,响应格式为JSON。文章还提供了Python调用示例,利用`requests`库完成签名生成与数据请求,助力商家管理店铺、开发者构建应用及数据分析人员挖掘商业价值,极大提升电商运营效率。

289 16
|
10月前
|
数据采集 搜索推荐 API
|

Python 原生爬虫教程:京东商品列表页面数据API

京东商品列表API是电商大数据分析的重要工具,支持开发者、商家和研究人员获取京东平台商品数据。通过关键词搜索、分类筛选、价格区间等条件,可返回多维度商品信息(如名称、价格、销量等),适用于市场调研与推荐系统开发。本文介绍其功能并提供Python请求示例。接口采用HTTP GET/POST方式,支持分页、排序等功能,满足多样化数据需求。

609 5
|
10月前
|
存储 算法 调度
|

基于和声搜索优化算法的机器工作调度matlab仿真,输出甘特图

本程序基于和声搜索优化算法(Harmony Search, HS),实现机器工作调度的MATLAB仿真,输出甘特图展示调度结果。算法通过模拟音乐家即兴演奏寻找最佳和声的过程,优化任务在不同机器上的执行顺序,以最小化完成时间和最大化资源利用率为目标。程序适用于MATLAB 2022A版本,运行后无水印。核心参数包括和声记忆大小(HMS)等,适应度函数用于建模优化目标。附带完整代码与运行结果展示。

272 24
|
10月前
|
数据可视化 Python
|

【负荷预测】基于变分模态分解(VMD-CNN-LSTM)的短期电力负荷预测【Python】

本项目实现了一种基于变分模态分解(VMD)的短期电力负荷预测模型——VMD-CNN-LSTM。通过VMD技术将原始电力负荷数据分解为多个平稳子序列,结合温度和时间等特征构建矩阵,输入CNN-LSTM模型训练,最终叠加重构得到预测结果。此方法有效应对非线性和非平稳性引起的误差,精度高且稳定性强。程序采用Python编写,注释清晰,运行稳定,并提供直观的可视化结果。附带部分代码及详细运行结果展示,下载链接已提供。

632 15
|
10月前
|
自然语言处理 并行计算 C++
|

FlashTokenizer: 基于C++的高性能分词引擎,速度可以提升8-15倍

FlashTokenizer是一款高性能CPU分词引擎,专为BERT等Transformer架构优化。基于高效C++实现与多线程并行处理,性能较传统分词器提升8-15倍,显著加速文本预处理。支持跨平台安装,适用于大规模文本处理、实时NLP应用及资源受限场景,助力开发者提升模型推理效率、降低硬件成本。

337 13
|
10月前
|
算法 数据安全/隐私保护
|

基于GA遗传算法的斜拉桥静载试验车辆最优布载matlab仿真

本程序基于遗传算法(GA)实现斜拉桥静载试验车辆最优布载的MATLAB仿真,旨在自动化确定车辆位置以满足加载效率ηq(0.95≤ηq≤1.05)的要求,目标是使ηq尽量接近1,同时减少加载车辆数量和布载耗时。程序通过迭代优化计算车辆位置、方向、类型及占用车道等参数,并展示适应度值收敛过程。测试版本为MATLAB2022A,包含核心代码与运行结果展示。优化模型综合考虑车辆总重量、间距及桥梁允许载荷密度等约束条件,确保布载方案科学合理。

222 15
|
10月前
|
机器学习/深度学习 人工智能 开发者
|

阿里云 AI 搜索开放平台新发布:增加 QwQ 模型

阿里云 AI 搜索开放平台 新增加 QwQ 模型,将为企业和开发者带来更强大的搜索解决方案。

611 11
来自: 智能搜索推荐  版块
|
10月前
|
JSON 数据挖掘 API
|

京东API接口最新指南:店铺所有商品接口的接入与使用

本文介绍京东店铺商品数据接口的应用与功能。通过该接口,商家可自动化获取店铺内所有商品的详细信息,包括基本信息、销售数据及库存状态等,为营销策略制定提供数据支持。此接口采用HTTP请求(GET/POST),需携带店铺ID和授权令牌等参数,返回JSON格式数据,便于解析处理。这对于电商运营、数据分析及竞品研究具有重要价值。

573 4
|
10月前
|
数据采集 存储 监控
|

数据清洗那些坑,程序员如何“踩雷避坑”?

数据清洗那些坑,程序员如何“踩雷避坑”?

446 102
|
11月前
|
监控 算法 搜索推荐
|

数据中挖掘能量:能源行业效率提升的秘密

数据中挖掘能量:能源行业效率提升的秘密

180 18
|
11月前
|
Linux
|

linux常用命令详细说明以及案例

本文介绍了Linux中几个常用的命令及其用法,包括:`ls`(列出目录内容)、`cd`(切换目录)、`mkdir`(创建目录)、`rm -p`(删除目录及内容)和`mv`(移动或重命名文件/目录)。每个命令都配有详细说明、语法格式、常见选项及实用案例,帮助用户更好地理解和使用这些基础命令。内容源自[linux常用命令详细说明以及案例](https://linux.ciilii.com/show/news-285.html)。

445 159
来自: 智能搜索推荐  版块
|
11月前
|
数据采集 供应链 搜索推荐
|

大数据点燃智能电商:从“数据厨房”烹出智慧购物新体验

大数据点燃智能电商:从“数据厨房”烹出智慧购物新体验

154 9
|
11月前
|
安全 API 数据库
|

借助淘宝拍立淘API,打造超便捷商品识别引擎

淘宝拍立淘API是基于图像识别技术的强大工具,允许开发者通过上传商品图片,在淘宝海量数据库中精准查找相关商品。它支持高精度识别、快速响应、丰富结果展示,并易于集成到各类应用中。用户只需上传图片,即可获取商品基本信息及链接,大幅提升搜索效率。该API采用严格安全机制保障数据隐私,同时提供Python等多语言支持,方便开发者调用。体验链接:c0b.cc/R4rbK2。

426 1
|
11月前
|
数据采集 JavaScript Python
|

如何根据目标网站调整Python爬虫的延迟时间?

如何根据目标网站调整Python爬虫的延迟时间?

252 3
|
11月前
|
数据采集 机器学习/深度学习 人工智能
|

大数据中的数据预处理:脏数据不清,算法徒劳!

大数据中的数据预处理:脏数据不清,算法徒劳!

1119 2
|
11月前
|
SQL 弹性计算 运维
|

Hologres计算组实例&分时弹性入门实践

本文由骆撷冬(Hologres PD)撰写,围绕Hologres计算组实例与分时弹性的入门实践展开。内容分为三部分:第一部分介绍Hologres计算组实例的原理与架构,解决负载隔离、资源浪费、大任务和运维难题;第二部分演示计算组实例的入门实践,包括管理、授权、连接及监控等操作;第三部分讲解分时弹性的使用,涵盖配置方法、成本优化及监控告警。通过具体案例与操作步骤,帮助用户更好地理解和应用Hologres的弹性计算能力。

336 2
来自: 实时数仓 Hologres  版块
|
11月前
|
数据采集 数据挖掘 API
|

深入探究小红书笔记详情页面数据采集接口

小红书作为当下热门的内容分享平台,涵盖时尚、美妆、旅游等领域,其笔记详情页数据对品牌方和市场研究者具有重要意义。通过数据采集接口,可获取标题、评论、点赞等信息,用于竞品分析、内容营销效果评估及趋势预测。例如,企业可通过分析用户兴趣优化产品策略,研究新兴消费趋势指导市场推广。文中还提供了Python请求示例,帮助开发者快速上手使用API接口。

408 5
|
11月前
|
传感器 算法 Java
|

基于 pyflink 的算法工作流设计和改造

本文分享了硕橙科技大数据工程师程兴源在Flink Forward Asia 2024上的演讲内容,围绕工业互联网场景下的Flink应用展开。主要内容包括:为何选择Flink、算法工作流设计、性能优化实践、上下游链路协作思考及未来展望。团队通过Flink处理工业设备数据(如温度、振动等),实现故障预测与分析。文章详细探讨了性能优化路径(如批处理、并行度提升)、KeyBy均衡化、内存管理等技术细节,并介绍了数据补全方法和告警规则的设计。最后,对未来基于Flink的编码强化、CEP模式改进及工业数据归因目标进行了展望。

423 7
来自: 实时计算 Flink  版块
|
11月前
|
JSON 数据挖掘 数据格式
|

一文读懂!微店商品列表数据接口全指南

微店作为电商热门平台,其商品列表数据接口为店铺运营提供了强大支持。通过该接口,开发者可高效获取商品关键数据,助力决策与业务拓展。接口通常采用 GET 或 POST 请求方式,需提供店铺 ID 等参数,返回 JSON 格式数据,包含商品名称、价格、库存等信息。示例代码展示了如何用 Python 调用接口并解析响应数据,帮助用户快速上手。

297 0
|
11月前
|
安全 算法 网络安全
|

量子计算的崛起:计算机安全的福音还是噩梦?

量子计算的崛起:计算机安全的福音还是噩梦?

177 19
|
11月前
|
人工智能 物联网 数据库
|

GoT:基于思维链的语义-空间推理框架为视觉生成注入思维能力

本文探讨GoT框架如何通过语义-空间思维链方法提升图像生成的精确性与一致性。GoT(Generative Thoughts of Thinking)是一种创新架构,将显式推理机制引入图像生成与编辑领域。它通过语义推理分解文本提示,空间推理分配精确坐标,实现类人的场景构思过程。结合大型语言模型和扩散模型,GoT在复杂场景生成中表现出色,克服传统模型局限。其专用数据集包含900万样本,支持深度推理训练。技术架构融合语义-空间指导模块,确保生成图像高质量。GoT为图像生成与编辑带来技术革新,广泛应用于内容创作与教育工具开发等领域。

253 4
|
11月前
|
人工智能 并行计算 搜索推荐
|

量子飞跃:生命科学中的量子计算应用前景

量子飞跃:生命科学中的量子计算应用前景

403 34
|
11月前
|
XML 数据挖掘 API
|

1688商品详情API接口指南

1688商品详情API是阿里巴巴为开发者提供的一套接口,用于获取1688平台上商品的详细信息,如商品ID、标题、价格、销量、评价、SKU、库存、主图等。通过注册认证、创建应用、构造请求和处理响应,用户可轻松调用API。其应用场景广泛,包括电商网站同步商品信息、内容管理系统生成商品页面、数据分析工具监测市场动态,以及第三方开发者构建比价或库存管理工具等,助力电商从业者优化销售策略与运营效率。

581 2
|
11月前
|
算法 数据可视化 量子技术
|

量子世界的钥匙:量子计算机的编程语言与工具

量子世界的钥匙:量子计算机的编程语言与工具

337 16
|
11月前
|
机器学习/深度学习 人工智能 算法
|

穿越量子边界:量子计算的伦理与社会影响

穿越量子边界:量子计算的伦理与社会影响

508 73
|
11月前
|
安全 小程序 Java
|

weixin027校园二手平台的设计与实现+ssm(文档+源码)_kaic

本项目基于微信小程序开发校园二手交易平台,旨在解决大学生闲置物品交易问题。系统采用Java语言和MySQL数据库设计,支持用户浏览、收藏、评价商品及发布闲置物品。管理员可审核商品和用户信息,确保交易安全。系统具备在线搜索功能,方便用户查找商品,并提供实时沟通渠道,增强平台透明度和用户体验。该平台简化了二手交易流程,满足了大学生对便捷、高效交易的需求,具有重要的实际应用价值。

964 25
|
11月前
|
机器学习/深度学习 资源调度 算法
|

基于入侵野草算法的KNN分类优化matlab仿真

本程序基于入侵野草算法(IWO)优化KNN分类器,通过模拟自然界中野草的扩散与竞争过程,寻找最优特征组合和超参数。核心步骤包括初始化、繁殖、变异和选择,以提升KNN分类效果。程序在MATLAB2022A上运行,展示了优化后的分类性能。该方法适用于高维数据和复杂分类任务,显著提高了分类准确性。

218 6

大数据与机器学习

大数据领域前沿技术分享与交流,这里不止有技术干货、学习心得、企业实践、社区活动,还有未来。

1
今日
69054
内容
128
活动
439686
关注
你好!
登录掌握更多精彩内容

相关产品

  • 大数据开发治理平台 DataWorks
  • 检索分析服务 Elasticsearch版
  • 日志服务