项目技术选型 | 学习笔记

简介: 快速学习项目技术选型

开发者学堂课程【阿里云离线数仓实战1:项目介绍及架构设计项目技术选型】学习笔记,与课程紧密联系,让用户快速学习知识。

课程地址https://developer.aliyun.com/learning/course/102/detail/1789


技术选型

 

1.数据采集运输的选择

有两个需求 日志文件 业务数据

阿里云框架采用 Flume、DataHub 来采集日志文件 RDS 来采集业务数据.

开源框架采用 Flume、Kafka 来采集日志文件 Sqoop、Datax 采集业务数据

2.数据存储

阿里云采用 MaxCompute、DataWor rks 开源采用 MySql、Hadoop、HBase

3.数据计算:

阿里云采用 MaxCompute、DataWorks 开源采用 Hive、Spark、Flink

4.数据可视化

阿里云采用 QuickBI Tableau 开源采用 Echarts、Kibana

相关文章
|
5月前
|
资源调度 前端开发 测试技术
前端工程化实践:从零搭建现代化项目构建流程
【4月更文挑战第6天】本文介绍了前端工程化的概念和重要性,包括模块化、自动化、规范化和CI/CD。接着,讨论了选择合适的工具链,如包管理器、构建工具和测试框架。然后,详细阐述了如何从零开始搭建一个基于React的现代化项目构建流程,涉及初始化、代码规范、测试、CSS处理、代码分割和CI/CD配置。最后,提到了持续优化与迭代的方向,如性能优化、类型检查和微前端。通过这样的实践,开发者可以提升开发效率和代码质量,为项目长远发展奠定基础。
218 0
|
2月前
|
消息中间件 缓存 NoSQL
探索后端开发:从基础到架构设计
在数字化浪潮的推动下,后端开发作为软件工程的核心领域,承载着数据处理、业务逻辑实现和系统性能优化的重要任务。本文旨在为初学者提供一个深入浅出的指南,从理解后端开发的基础知识出发,逐步引导至高级主题如服务端架构设计和性能优化。通过实际案例分析,我们将揭示如何将理论应用于实践,以及如何利用现代工具和技术提升开发效率和产品质量。无论你是初涉后端领域的新手,还是寻求进阶知识的开发者,这篇文章都将为你的职业成长之路提供宝贵的指导和灵感。
54 0
|
3月前
|
前端开发 JavaScript API
前端技术选型
前端技术选型
40 0
前端技术选型
|
5月前
|
Java Maven Nacos
项目架构设计
项目架构设计
27 1
|
12月前
|
架构师 大数据 Java
做好一个IT产品,如何进行技术技术选型?- 由最近遇到的一款采用Delphi 技术栈的产品引发的思考
做好一个IT产品,如何进行技术技术选型?- 由最近遇到的一款采用Delphi 技术栈的产品引发的思考
|
监控 前端开发 JavaScript
带你入门前端工程(一):技术选型
带你入门前端工程(一):技术选型
552 0
如何做好技术选型
在软件开发领域,几乎每天都有新的技术框架诞生、更新,一些新的概念更是层出不穷,技术选型时,难免让人无从抉择。对于技术选型,我个人有以下几点建议。
1523 0
|
开发工具 UED
聊聊技术选型
聊聊技术选型
|
前端开发 Java 数据库
项目架构
架构
447 0
|
设计模式 供应链 测试技术
架构进阶之路:复杂业务开发与领域驱动设计
以下是在现公司,给成员做分享的资料。业务案例来自:一文教会你如何写复杂业务代码。作者:张建飞,进行了重新整理。
228 0
下一篇
无影云桌面