Sqoop工作原理是什么？
发布于 2020-01-10 22:27:09
关注者
0
被浏览
1165
1 个回答
-
hadoop生态圈上的数据传输工具。 可以将关系型数据库的数据导入非结构化的hdfs、hive或者bbase中，也可以将hdfs中的数据导出到关系型数据库或者文本文件中。 使用的是mr程序来执行任务，使用jdbc和关系型数据库进行交互。 import原理：通过指定的分隔符进行数据切分，将分片传入各个map中，在map任务中在每行数据进行写入处理没有reduce。 export原理：根据要操作的表名生成一个java类，并读取其元数据信息和分隔符对非结构化的数据进行匹配，多个map作业同时执行写入关系型数据库
推荐阅读
-
IGBT 的工作原理是什么？
2022-09-21 关注 0 浏览18 5答案
-
晶振工作原理是什么？
2022-09-21 关注 0 浏览15 2答案
-
光耦的工作原理是什么？
2022-09-21 关注 0 浏览11 1答案
-
比例阀工作原理是什么？
2022-09-21 关注 0 浏览12 3答案
-
保护间隙的工作原理是什么?
2022-05-08 关注 0 浏览22 1答案
-
.net Remoting 的工作原理是什么？
2020-01-10 关注 0 浏览880 1答案
-
Ajax的工作原理是什么？
2021-12-21 关注 0 浏览80 1答案
-
Ajax的工作原理是什么？
2022-04-09 关注 0 浏览52 1答案
-
zookeeper的工作原理是什么？
2021-09-18 关注 0 浏览162 1答案
-
selenium的工作原理是什么？
2021-09-18 关注 0 浏览109 1答案
