数据库建模是对现实世界进行分析、抽象、并从中找出内在联系，进而确定数据库的结构。1、概念模型：就是从现实世界到信息世界的第一层抽象，确定领域实体属性关系等，使用e-R图表示，e-R图主要是由实体、属性和联系三个要素构成的...

格式：select*from某个表intooutfile‘文件路径’;mysql文件的导出和导入路径有默认设置，即secure-file-priv，当导出的文件路径和默认路径冲突时就会报错secure-file-priv...

一、查询SQL尽量不要使用select*，而是具体字段1、反例SELECT*FROMuser2、正例SELECTid,username,telFROMuser3、理由节省资源、减少网络开销。可能用到覆盖索引，减少回表，提...

在实际的应用中，通常需要在一些复杂的、没有规律的字符串中提取数据，这时候就需要用到正则表达式了，这次讲一下hive的正则表达式。like语法:AlikeB说明：如果字符串A符合表达式B的正则语法，则为TRUE，否则为FA...

视图视图是一个虚拟的表，不同于直接操作数据表，视图是依据SELECT语句来创建的（会在下面具体介绍），所以操作视图时会根据创建视图的SELECT语句生成一张虚拟表，然后在这张虚拟表上做SQL操作。1.为什么会存在视图那既...

问题导读：1.如何查看hive表结构？2.如何查看表结构信息？3.如何查看分区信息？4.哪个命令可以模糊搜索表？1.hive模糊搜索表showtableslike'name';2.查看表结构信息descformatted...

数据倾斜原因1.通常发生在join过程中，两个表都较大，不能支持mapjoin,其中一个表中数据量某一类值特别多，分配到该值的reducer,耗时较长2.由于Hive在join的时候会将相同的key在最后都汇聚到同一个R...

对于SQL的Join，在学习起来可能是比较乱的。我们知道，SQL的Join语法有很多inner的，有outer的，有left的，有时候，对于Select出来的结果集是什么样子有点不是很清楚。CodingHorror上有一...

本文简介，参数涉及mapjoin，小文件合并，map/reduce大小控制，动态分区设置，压缩，数据倾斜，内存设置等部分参数可按所在环境酌情调整--hive参数设置by摸鱼setio.compression.codecs...

Excel、SQL、Python实现行列互转，请参照之前的文章：言归正传，先看一下需求。一、需求1：行转列（一行转多行）表名：row_column_conversion转化为如下格式：夏洛特烦恼沈腾夏洛特烦恼马丽夏洛特烦...