当前位置:网站首页 > 大数据架构 > 正文

最全架构设计之大数据架构(Lambda架构、Kappa架构)(1)_大数据架构工具

其它相关推荐:
系统架构之微服务架构
系统架构设计之微内核架构
鸿蒙操作系统架构

所属专栏:系统架构设计师

一. 大数据技术生态

  1. 存储:主要包括HDFS、Kafka
    HDFS是Hadoop提供的分布式存储框架,它可以用来存储海量数据
  2. 计算:主要包括MapReduce、Spark、Flink
    MapReduce是Hadoop提供的分布式计算框架,它可以用来统计和分析HDFS上的海量数据
  3. 联机查询OLAP:包括kylin、impala等
  4. 随机查询NoSQL:包括Hbase、Cassandra等
  5. 挖掘、机器学习和深度学习等技术:包括TensorFlow、caffe、mahout

二. 大数据分层架构

大数据分层架构图: 在这里插入图片描述

到此这篇最全架构设计之大数据架构(Lambda架构、Kappa架构)(1)_大数据架构工具的文章就介绍到这了,更多相关内容请继续浏览下面的相关推荐文章,希望大家都能在编程的领域有一番成就!

版权声明


相关文章:

  • 最新架构设计之大数据架构(Lambda架构、Kappa架构)_架构大数据:大数据技术及算法解析2024-10-30 16:12:30
  • 云原生大数据架构:实施与优化_云原生大数据平台2024-10-30 16:12:30
  • 大数据架构_etl数据抽取工具2024-10-30 16:12:30
  • 五种主流大数据架构介绍_大数据 架构2024-10-30 16:12:30
  • 大数据架构和模式(一): 大数据分类和架构简介_大数据的架构体系是什么2024-10-30 16:12:30
  • 大数据最全架构设计之大数据架构(Lambda架构、Kappa架构),2024年最新不可多得的干货_最受欢迎的云计算架构2024-10-30 16:12:30
  • 大数据——大数据架构_大数据架构详解2024-10-30 16:12:30
  • 平安大数据架构_中国平安组织架构图2024-10-30 16:12:30
  • 大数据架构简介_大数据技术架构2024-10-30 16:12:30
  • 大数据架构发展史_数据治理三个阶段2024-10-30 16:12:30
  • 全屏图片