sqoop——将mysql数据库的数据表导入到hdfs上

December 17, 2023
测试
测试
测试
测试
0 分钟阅读

sqoop是用来将mysql数据库上的内容导入到hdfs,或者将hdfs上的数据导入mysql的(相互之间转化)一个工具。 前提:开启hdfs、yarn服务,关闭safe模式 (1)首先,在mysql上创建测验表:

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

(2)检查是否开启任务

在这里插入图片描述
在这里插入图片描述

(3)使用命令将表插入:

在这里插入图片描述
在这里插入图片描述

ps:命令为sqoop import 后面跟要连接的mysql地址和数据库,后面写上mysql名称和密码,再加上表名,最后m后面跟的数字表示拆成几个MR任务,此次我选择一个。 (4)验证结果

在这里插入图片描述
在这里插入图片描述

用yarn可视化查看MR任务成功:

在这里插入图片描述
在这里插入图片描述

继续阅读

更多来自我们博客的帖子

如何安装 BuddyPress
由 测试 December 17, 2023
经过差不多一年的开发,BuddyPress 这个基于 WordPress Mu 的 SNS 插件正式版终于发布了。BuddyPress...
阅读更多
Filter如何工作
由 测试 December 17, 2023
在 web.xml...
阅读更多
如何理解CGAffineTransform
由 测试 December 17, 2023
CGAffineTransform A structure for holding an affine transformation matrix. ...
阅读更多