配置管理工具Puppet介绍与实践：Puppet是一个优秀的基础设施管理平台。下面将介绍Puppet的工作原理，以及它是如何帮助处于各种不同状况的团队增强协作能力，以进行软件开发和发布的——这种工作方式的演变通常被称做DevOps（开发运维）。

配置管理工具CMDB数据库介绍与实践：CMDB存储与管理企业IT架构中设备的各种配置信息，它与所有服务支持和服务交付流程都紧密相联，支持这些流程的运转、发挥配置信息的价值，同时依赖于相关流程保证数据的准确性。确定配置管理的范围主要涉及CI的宽度和深度，以及CI的生命周期。定义配置项的属性设计者需要遵循一个原则和一套结构。构建CI之间的关系采取两种方法即“自上而下”和“自下而上”。

配置管理和资产管理有什么区别：配置管理：提供IT环境的逻辑模型，为ITIL流程提供数据依据。相关的ITIL流程可以提供服务稳定性和质量。配置项是从运维的角度出发，标识的是IT部件。如果需要保证你某个资产稳定运行，可将其作为配置项管理。维护CI项之间的复杂关系，以便进行风险评估。资产管理：管理IT资产在整个生命周期内的成本及变化情况。可以降低资产的总体成本，减少采购成本，增加资产的利用率，提供准确的资产规划。资产是基于价值、合同跟踪管理的IT部件。如果某个配置项需要跟踪其成本、合同及使用信息，可以作为资产进行管理。维护资产之间基本的关联关系，如父子关系等。

配置管理术语定义：配置基线配置项配置项属性配置管理数据库制定配置管理计划版本控制变更控制配置审计

Hive实验目的：一、实验目的理解Hive体系架构。掌握Hive内嵌模式部署。掌握HiveShell常用命令的使用。熟悉Hive表DDL操作和DML操作。二、实验要求完成Hive内嵌模式部署。能够将Hive数据存储在HDFS上。进入HIveShell，完成Hive的常见DDL操作和DML操作。三、实验步骤（1)为集群中所有机器添加域名映射，配置ssh免密登录。（2)部署Hadoop2.7.3并启动。（3)内嵌模式安装hive-2.1.1版本。（4)启动Hiveshell进行练习。

Hive操作实例解析：任务：在本地文件系统建立文件“/home/member.txt”，文件内容如下（数据之间用tab键分隔）。启动Hive完成如下任务。(1)新建member表。(2)将本地文件“/home/member.txt”导入member表中。(3)查询member表中所有记录。(4)查询member表中男同学（性别值为1）数据。(5)查询member表中22岁男同学数据。(6)统计member表中男同学和女同学（性别值为0）的人数。(7)删除member表。

HiveSQL标准介绍：Hive定义了简单的类SQL查询语句，称HiveQL，与大部分SQL语法兼容，方便熟悉SQL的开发者使用Hive开发和处理复杂的分析工作，还可以用HQL进行查询。1．数据类型Hive支持基本类型和复杂类型，基本类型包括如下几种。（1）整数类型：tinyint/smallint/int/bigint。（2）浮点数类型：float/double/dicemal。（3）布尔类型：boolean。（4）字符串类型：string/varchar/char。复杂类型包括如下几种。（1）Array：数组类型，由一系列相同数据类型的元素组成。（2）Map：集合类型，包括Key-Value键值对，可以通过Key来访问元素。（3）Struct：结构类型，可以包含不同数据类型的元素，这些元素可以通过“点语法”的方式来得到所需要的元素。2．DDL语句DDL操作（DataDefinitionLanguage，数据定义语言），常用DDL语句。（1）create/drop/alter数据库（2）create/drop/truncate表（3）alter表/分区/列（4）Create/Drop/Alter视图（5）Hive函数Hive中内置了许多函数，比如日期操作函数day()、year()和month()等，数值操作函数sum()、avg()、max()、min()和count()等。但在某些特殊场景下，可能还是需要自定义函数满足特定功能，这时要用用户自定义函数UDF。3．DML语句DML（DataManipulationLanguage，数据操作语言），常见的操作包括下面几个方面。（1）将文件中的数据导入（load）到Hive表中（2）select和filters（3）数据表连接join操作（4）将select查询结果导出到Hive的另一个表中（5）将select查询结果写入文件写入本地文件系统写入分布式文件系统HDFS

Hive接口模块主要功能是什么：Hive主要提供HiveShell接口、HiveWeb接口、HiveAPI接口、Hcatalog接口、Pig接口和Beeline接口等。1．HiveShell接口HiveShell接口运行在Hadoop集群环境上，提供在HiveShell下执行类SQL命令相关HiveQL操作环境，是Hive提供的标准接口，也是开发者最常用命令行接口。在Hive提示符后输入HiveQL命令，HiveShell把HiveQL查询转换为一系列MapReduce作业对任务进行并行处理，然后返回处理结果。通过Shell接口，程序员和分析师很容易编写HiveQL来实现新建表和查询表操作。安装完Hive后，输入“<HIVE_HOME>/bin/hive”或者“hive--servicecli”回车即可启动HiveShell。初次在HiveShell下执行命令，会在执行命令操作的机器上创建metastore数据库。HiveShell操作有如下特点。（1）命令必须以分号“;”结束，通知Hive开始执行相应的操作。（2）命令不要求大小写敏感（除了进行字符串比较相关操作），因此，命令“showtable;”将会产生与“SHOWTABLE;”相同的输出结果。（3）支持Tab键命令自动补全功能，如在hive>提示符后输入SH或SHO按下Tab键会自动补齐为show，输入showta按下Tab键会显示所有可能的命令。（4）默认会输出执行过程信息，如执行查询操作所用时间，通过指定-S选项可以禁止输出此类信息，只输出HiveQL执行结果。HiveShell的常用命令如下。（1）清屏。（4）查看表结构。（2）查看数据库中的表。（5）查看HDFS上的文件（3）查看数据库中的内置函数。（6）执行操作系统的命令2．HiveWeb接口HiveWeb接口简称HWI（HiveWebInterface），是HiveShell接口的一个替代方案（图形化实现），提供了更直观的Web界面，适合数据分析或数据运营人员做即席查询。用户通过浏览器来访问和操作Hive服务端，可以查看Hive数据库模式，执行HiveQL相关操作命令。在浏览器的地址栏输入http://<IP地址>:9999/hwi/回车实现访问HiveWeb管理接口。（1）配置HWI的步骤打包war文件。copy相关jar文件到$HIVE_HOME/lib目录下，修改hive-site.xml配置文件（2）启动HWI服务，在命令行下输入“hive--servicehwi”启动HiveWeb管理方式

Hive配置文件详解：Hive启动时会读取相关配置信息，Hive配置可以调优HQL代码执行效率，Hive配置文件在conf子目录下，经常需要根据需求进行修改。Hive配置文件主要有两个。1.文件hive-env.sh。指定Hadoop安装路径。2.文件hive-site.xml。保存Hive运行时所需要的相关配置参数。HIVE_HOME/conf目录中的文件hive-default.xml.template保存着各个配置参数的默认值，用户可以通过在conf目录中创建hive-site.xml并新增特定参数的值来覆盖默认值。更改hive-site.xml文件中的配置属性的方法。（1）直接用命令vimhive-site.xml编辑hive-site.xml文件。（2）使用带-hiveconf选项的Hive命令。（3）使用set命令。

Hive部署三种部署模式：Hive将metastore元数据存储在RDBMS中，如MySQL、Derby。按metastore存储位置的不同，其部署模式分为内嵌模式、本地模式和完全远程模式三种。1．内嵌模式内嵌模式是安装时默认部署模式元数据信息被存储在Hive自带的数据库Derby中所示所有组件（如数据库、元数据服务）运行在同一个进程内。只允许建立一个连接，意味着同一时刻只支持一个用户访问和操作Hive。2．本地模式本地模式的元数据服务运行在Hive服务主进程中。当涉及元数据操作时，Hive服务中的元数据服务模块通过JDBC和存储于DB里的元数据数据库进行交互。本地模式下MySQL数据库与Hive运行在同一台物理机器上可提供多用户并发访问metastore服务。3．远程模式远程模式的元数据信息是被存储在独立数据库中元数据可能存储在另一台物理机上，甚至另一种操作系统上。元数据服务以独立进程运行。远程模式允许创建多个连接，提供多用户同时访问并操作Hive。