当前位置: 首页 > news >正文

vocal~怎么没人告诉我?大数据技术组件(更新中......)

Hadoop相关

  • HDFS分布式文件系统
  • MR(MapReduce)离线数据处理
    • MR-图解
  • YARN集群资源管理

ZooKeeper

  • ZooKeeper分布式协调框架

Hive相关

  • Hive-01之数仓、架构、数据类型、DDL、内外部表
  • Hive-02之分桶表、数据导入导出、静动态分区、查询、排序、hiveserver2
  • Hive-03之传参、常用函数、explode、lateral view、行专列、列转行、UDF
  • Hive-04之存储格式、SerDe、企业级调优
  • Hive-05之查询 分组、排序、case when、 什么情况下Hive可以避免进行MapReduce
  • Hive-06之函数 聚合Cube、Rollup、窗口函数
  • Hive-07之企业级调优
  • Hive-08之数据仓库之建模、分析
  • Hive-09之主流文件存储格式对比
  • Hive-10之数据倾斜处理办法

Spark相关

sparkCore
  • Spark核心之01:架构部署、sparkshell、程序模板
  • Spark核心之02:RDD、算子分类、常用算子
    • Spark核心之02:常用算子详解
  • Spark核心之03写mysql、写HBase、RDD宽窄依赖、DAG、缓存、Checkpoint
  • Spark核心之04:spark程序运行架构流程、共享变量(广播变量和累加器)、程序序列化问题
  • Spark核心之05:sparkOnYarn、资源参数、调度模式、资源分配策略、shuffle机制??
  • Spark核心之06:知识点梳理
SparkSQL
  • SparkSQL全之RDD、DF、DS ,UDF、架构、资源划分、sql执行计划、调优…
SparkStreaming
  • SparkStreaming之01:简介、DStream、数据源
  • SparkStreaming之02:高级算子、SparkSQL整合
  • SparkStreaming之03:容错、语义、整合kafka、Exactly-Once、ScalikeJDBC
  • SparkStreaming之04:调优
Spark调优
  • Spark调优、基于内存模型调优
  • Spark之数据倾斜调优

http://www.mrgr.cn/news/93048.html

相关文章:

  • Vue 3 中 unref 的作用与 Vue Router currentRoute 的知识
  • 物理竞赛中的线性代数
  • 服务器时间同步
  • PAT乙级真题 / 知识点(1)
  • Metal学习笔记七:片元函数
  • C++学习之C++初识、C++对C语言增强、对C语言扩展
  • 静态时序分析:SDC约束命令set_clock_jitter详解
  • 【实战 ES】实战 Elasticsearch:快速上手与深度实践-2.2.3案例:电商订单日志每秒10万条写入优化
  • vue videojs使用canvas截取视频画面
  • 基于 DataEase 的企业数据分析实践
  • 硅基流动nodejs流式输出
  • 使用vite创建vue3项目
  • T-SQL 语言基础: SQL 数据库对象元数据及配置信息获取
  • AMD RDNA3 GPU架构解析
  • (十 九)趣学设计模式 之 中介者模式!
  • 【算法】手撕二分查找
  • stm32 jlink烧录时写保护
  • HOW - 在Windows浏览器中模拟MacOS的滚动条
  • 私有云基础架构
  • 多个pdf合并成一个pdf的方法