hbase面试技巧-hbase manager

摘要： 本文目录一览：1、大数据开发工程师需掌握哪些技能?2、课程开发的三个阶段...

本文目录一览：

• 1、大数据开发工程师需掌握哪些技能?
• 2、课程开发的三个阶段
• 3、什么情况下适合使用Hbase

大数据开发工程师需掌握哪些技能?

大数据预处理，指的是在进行数据分析之前，先对***集到的原始数据所进行的诸如“清洗、填补、平滑、合并、规格化、一致性检验”等一系列操作，旨在提高数据质量，为后期分析工作奠定基础。

编码 编码与开发能力是作为大数据工程师的重要要求，主要掌握java、Scala、Python三门语言，这在大数据当中非常关键。

学大数据，在前期主要是打基础，包括Java基础和Linux基础，而后才会正式进入大数据技术的阶段性学习。Linux学习主要是为了搭建大数据集群环境做准备，所以以Linux系统命令和shell编程为主要需要掌握的内容。

Python这个要是有能力，有精力，建议也要往深处学习，我目前正在自学中。5，集群的问题，包括一些简单的运维知识。6，大数据数据倾斜的问题，包括Spark JVM内存调优问题等等。

需要学习J***a基础 很多人好奇学习大数据需不需要学J***a，正确答案是需要。

课程开发的三个阶段

成为独立的专门学科时期 严格说来，课程论的历史从这一阶段才真正开始。1918年美国课程理论家博比特的《课程》的出版作为课程成为专门研究领域的标志。其后泰勒原理的问世是课程论作为独立学科的标志。

课程需求分析是课程设计者开发培训课程的第一步。课程需求分析的目的是为了满足组织及其成员的需求，并从组织环境、个人和职位等方面进行调查和分析，以判断组织和个人是否有需要和存在哪些需要。

课程开发的阶段 组建校本课程开发队伍 校本课程开发队伍应包括学校内部人员与学校外部人员。情境和需要分析 只有对各种校内外的情境和需要进行科学、充分的了解和分析，才能开发出适合本学校的课程。

三，培训需求调研 从该阶段开始进入课程开发执行阶段。培训需求调研是其中最重要的一个环节，培训对象的选取和调研过程的把控都会影响需求调研的效果。

什么情况下适合使用Hbase

1、数据查询模式已经确定，且不易改变，就是说hbase使用在某种种特定的情况下，且不能变动。告诉插入，大量读取。因为分布式系统对大量数据的存取更具优势。尽量少的有数据修改。

2、首先，hbase可以存储非常大量的数据。在大数据时代，数据的量级往往达到了PB甚至EB级别，传统的关系型数据库已经无法满足这样的存储需求。

3、稀疏数据：HBase非常适合存储稀疏数据，即其中大部分元素都是空的数据集。在很多情况下，稀疏数据在传统数据库中会占用大量空间，并且处理效率低下。而HBase通过列式存储和高效的压缩机制，能够高效地处理这类数据。