未分类 Sqoop入门 Sqoop原理 将导入或导出命令翻译成mapreduce程序来实现。 在翻译出的mapreduce中主要是对inputformat和outputformat进行定制。 Sqoop安装 安装Sqoop的... 03月11日 583 views 发表评论 阅读全文
折腾 贼好的win10备用内存清理工具 找了一两年,终于找到一个可以自动清理的了 win10备用内存自动清理工具Intelligent standby list cleaner 1.0.2.4绿色版 下载地址:http://wei2008.... 03月09日 2,876 views 发表评论 阅读全文
未分类 Hive导入导出 增删改查 + 函数 5.1 数据导入 5.1.1 向表中装载数据(Load) 1)语法 hive>load data inpath '/opt/module/datas/student.txt' into tabl... 03月06日 852 views 发表评论 阅读全文
未分类 Hive 分区表和内外表 外部表 1)理论 因为表是外部表,所以Hive并非认为其完全拥有这份数据。删除该表并不会删除掉这份数据,不过描述表的元数据信息会被删除掉。 2)管理表和外部表的使用场景: 每天将收集到的网站日志定期流... 03月05日 793 views 发表评论 阅读全文
未分类 Hive数据库相关操作 4.1 创建数据库 1)创建一个数据库,数据库在HDFS上的默认存储路径是/user/hive/warehouse/*.db。 hive (default)> create database d... 03月05日 1,625 views 发表评论 阅读全文
未分类 Hive数据类型 3.1 基本数据类型 Hive数据类型 Java数据类型 长度 例子 TINYINT byte 1byte有符号整数 20 SMALINT short 2byte有符号整数 20 INT int 4b... 03月05日 894 views 发表评论 阅读全文
未分类 Hive安装部署和相关操作 Hive安装环境准备 2.1 Hive安装地址 1)Hive官网地址: http://hive.apache.org/ 2)文档查看地址: https://cwiki.apache.org/confl... 03月04日 630 views 发表评论 阅读全文
未分类 Linux mysql5.5 安装 MySQL安装配置 官网下载地址 https://dev.mysql.com/downloads/file/?id=471503 mysql-5.7.19-1.el7.x86_64.rp... 03月04日 705 views 发表评论 阅读全文
未分类 Flume各种拦截器(二)——正则和自定义拦截器 查询替换拦截器 search.conf #1 agent a1.sources = r1 a1.sinks = k1 a1.channels = c1 #2 source a1.sour... 03月02日 877 views 发表评论 阅读全文
未分类 Flume各种拦截器(一) 时间戳拦截器 Timestamp.conf #1.定义agent名, source、channel、sink的名称 a4.sources = r1 a4.channels = c1 a4.sinks ... 03月02日 721 views 发表评论 阅读全文