大数据:Apache hive分布式sql计算平台,hive架构,hive部署,hive初体验

大数据:Apache hive分布式sql计算平台

2022找工作是学历、能力和运气的超强结合体,遇到寒冬,大厂不招人,可能很多算法学生都得去找开发,测开
测开的话,你就得学数据库,sql,oracle,尤其sql要学,当然,像很多金融企业、安全机构啥的,他们必须要用oracle数据库
这oracle比sql安全,强大多了,所以你需要学习,最重要的,你要是考网络警察公务员,这玩意你不会就别去报名了,耽误时间!
与此同时,既然要考网警之数据分析应用岗,那必然要考数据挖掘基础知识,今天开始咱们就对数据挖掘方面的东西好生讲讲 最最最重要的就是大数据,什么行测和面试都是小问题,最难最最重要的就是大数据技术相关的知识笔试


大数据:Apache hive分布式sql计算平台

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
之前的MapReduce不支持sql
支持java和python
骚啊
怪不得

**在这里插入图片描述**
在这里插入图片描述
写的是sql语言,hive给你翻译
直接执行MapReduce

在这里插入图片描述
sql很简单,非常容易上手,美滋滋
还能玩分布式海量数据开发
sql翻译为MapReduce
在这里插入图片描述
皆大欢喜
简单又能力大数据

hive就这么牛

hive模拟实现

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
hive就可以干这俩事情
在这里插入图片描述

hive的基础架构

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
元数据存储
sql解析器
用户接口

在这里插入图片描述

hive部署

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
hive是单机
而MapReduce才是多机器

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
创建数据库,给hive使用
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
不计算不走hive

如果需要计算,走hive
在这里插入图片描述
在这里插入图片描述
优势在数据量大的时候
贼牛逼

在这里插入图片描述


总结

提示:重要经验:

1)
2)学好oracle,即使经济寒冬,整个测开offer绝对不是问题!同时也是你考公网络警察的必经之路。
3)笔试求AC,可以不考虑空间复杂度,但是面试既要考虑时间复杂度最优,也要考虑空间复杂度最优。

猜你喜欢

转载自blog.csdn.net/weixin_46838716/article/details/131003999