2.1 关系型数据的收集--Sqoop

Sqoop应用场景:

  1.数据迁移,将关系型数据库中的数据导入Hadoop存储系统 

  2.可视化分析结果,将Hadoop处理之后产生的结果导入关系型数据库,以便进行可视化展示

  3.数据增量导入:减少hadoop分析过程中对关系型数据库对性能,通常将数据单独导入一份到hadoop存储系统中。

Sqoop特点:

  1.性能高:采用mapReduce完成数据到导入导出

  2.自动类型转换:Sqoop可读取数据源元信息,自动完成数据类型映射,用户也可根据需要自定义类型映射关系

  3.自动传播元信息:Sqoop传递数据到同时,也会传递元信息,保证接收端和发送端有一致到元信息

猜你喜欢

转载自www.cnblogs.com/laphome/p/11203676.html
2.1