Hive多分隔符
1、但是多个字符做分隔符呢？PIG是直接报错，而HIVE只认第一个字符，而无视后面的多个字符。
2、首先测试hive是否能智能区分分隔符与文本内容，结果表明：当分隔符与文本内容相同时，会产生数据混淆问题。
3、进一步分析：textfile 是 hive 默认的存储结构，行存储，存储的实际数据结构跟表逻辑结构一致。导入数据时会直接把数据文件拷贝到 hdfs上不进行处理。
hive建表时partitioned分区字段类型只能用string吗?可以用其他的字段类...
要注意的是：首先，创建分区表的时候，要通过 partitioned by （name string）声明该表是分区表，并且是按照字段name进行分区，name值一致的所有记录存放在一个分区中，分区属性name的类型是string类型。
hive中的列支持使用struct、map和array***数据类型。大多数关系型数据库中不支持这些***数据类型，因为它们会破坏标准格式。关系型数据库中为实现***数据类型是由多个表之间建立合适的外键关联来实现。
分区表：分区对应不同文件夹。查询时用where语句可以指定分区目录dt=20211112。建表时用partitioned by(dt string)。加载时需要指定分区信息 into table partition_table partition(dt=20211112)。
需要在PARTITIONED BY后面跟上分区键，类型。例如： create TABLE p_table1( id int ，name string ) PARTITIONED BY(date_day string) stored as orc ； 这是一级分区，当然也可以创建多级分区。
set hive.exec.dynamic.partition.mode=nostrict 然后就是可以使用动态分区了。分区值的推断，是根据后面查询的最后字段来决定的，只有一个分区，那么就是查询的最后一个字段，如果是两个，那么就是从后往前的字段进行匹配。
影响Hive效率的主要因素有数据倾斜、数据冗余、job的IO以及不同底层引擎配置情况和Hive本身参数和HiveSQL的执行等。本文主要从建表配置参数方面对Hive优化进行讲解。
hive中的字符串提取
用替换（Ctrl+H)，查找字为固定字符，替换为不输入任何值，点击全部替换。 示例，把下表中的百度批量删除。
语法： regexp_replace(string A， string B， string C)返回值： string 说明：将字符串A中的符合java正则表达式B的部分替换为C。注意，在有些情况下要使用转义字符，类似oracle中的regexp_replace函数。
熟悉hive的人都知道，在原生版本中，目前并没有返回星期几的函数。
将hive表中的数据导入HDFS的文件，将hive表中的数据导入到本地磁盘hive 构建在基于静态批处理的Hadoop 之上，Hadoop 通常都有较高的延迟并且在作业提交和调度的时候需要大量的开销。
然后需要用到的是concat_ws函数，这个函数需要传递指定分隔符，以及字符串或者字符串数组。能起到把多个字符串拼接到一起的作用。
（2）hbase.table.name：hive通过 storage handler（暂放）将hive与各种工具联系起来，这是是使用hive接入hbase时，设置的属性（暂放）。
hive导入CSV文件,字段中双引号内有逗号
1、在CSV中是用 “，”分割。你字段里面有逗号说明这个单元格的值是一个字符串，所以要加引号。
2、单击“Microsoft OFFice 按钮”，然后单击“打开”。将显示“打开”对话框。在“文件类型”框中，选择“文本文件”。
3、一般csv文件中若有英文逗号，则一般该单元格会被双引号括住。csv文件有些列含有换行符、逗号等特殊符号，这就导致csv文件出现列异常的情况。csv文件是以逗号隔开的，假如某句话也含有逗号，会导致读取时失败。
enter">
hive分隔符支持多个字符吗
1、可以在hive建表语句中，使用built-in的 org.apache.hadoop.hive.contrib.serdeMultiDelimitSerDe类， 来使你的表支持多字符分割列。
2、CONcat(string A/col， string B/col…)：返回输入字符串连接后的结果，支持任意个输入字符串；CONCAT_WS(separator， str1， str2，...)：它是一个特殊形式的 CONCAT()。第一个参数剩余参数间的分隔符。
3、//指定了字段的分隔符为逗号，所以load数据的时候，load的文本也要为逗号，否则加载后为NULL。
