Hadoop【第三课】:虚拟机安装Hadoop(伪分布式)

目录1.下载Hadoop2.将文件传输到虚拟机中3.修改配置文件1.下载Hadoop2.将文件传输到虚拟机中3.修改配置文件
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

Hadoop【第四课】:Hadoop初始化

Hadoop初始化1.配置Hadoop环境变量2.启动Hadoop1.配置Hadoop环境变量(1)修改配置文件# vi /etc/profile修改如下内容:export HADOOP_HOME=/usr/local/src/hadoop/hadoop-2.7.7PATH=$PATH:$JAVA_HOME/bin:$HADOOP_HOME/bin(2)重启配置文件# source /etc/profile(3)查看hadoop版本# hadoop version2.启动Ha
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

Hadoop【第五课】:Hadoop测试HDFS系统上传下载功能

测试HDFS系统上传下载功能1.上传2.下载3.查看1.上传从root目录下把jdk文件上传到hdfs系统的根目录下并命名为jdk# hadoop fs -put /home/zox/jdk-8u221-linux-x64.tar.gz hdfs://localhost:9000/jdk2.下载从hdfs系统的根目录下将jdk下载到本地/home/文件夹下命名为jdk1.8# hadoop fs -get hdfs://localhost:9000/jdk /home/zox/jdk1.8
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

Hadoop【第八课】:Hadoop在Eclipse上创建基于MapReduce的应用:WordCount

Hadoop的MapReduce应用1.创建Java Project2.导入Hadoop的Jar包(1)新建Use Libraries(2)目录/share/hadoop/common下的jar包(3)目录/share/hadoop/common/lib下的jar包(4)目录/share/hadoop/hdfs下的jar包(5)目录/share/hadoop/mapreduce下的jar包(6)为Java工程配置Jar包路径3.编写WordCount的代码(1)创建3个Java类文件(2)WCMapper.
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

Hadoop【第六课】:Hadoop性能测试

Hadoop性能测试1.TestDFSIO2.1.TestDFSIO2.
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

运维Linux的基本命令

ctrl+c 终止命令ctrl+l 清屏history:显示原来历史命令记录history!87:重新执行87行命令ls:查看pwd:显示当前目录tab:补全cd:进入目录cd …:回到上级目录cd ~ 返回 root 目录touch:创建文件mkdir:创建目录rm -rf :删除目录下所有,是通配符1 请在/tmp下创建a.txt b.txt c.txt e.txt文件cd /tmp/touch {a…c}.txt e.txt2 请在/tmp下创建 1.txt
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

查看Linux系统分区,内存

df -h 查看分区情况查看内存使用情况free -m 或者 free -l 均可 ,只是得到的单位不同ps分出主分区之后,其余的部分可以分成扩展分区,一般是剩下的部分全部分成扩展分区,也可以不全分,剩下的部分就浪费了。扩展分区不能直接使用,不许分成若干逻辑分区。所有的逻辑分区都是扩展分区的一部分硬盘的容量=主分区的容量+扩展分区的容量扩展分区的容量=各个逻辑分区的容量之和主 扩展 逻辑&>混合输出1>正确的输出2>错误的输出
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

文件系统,符号链接与硬链接

链接分为 什么??软连接(符号链接)和硬链接软连接(符号) 硬链接ln -s ln源x x x YES/etc/rc.local -->链接文件开机自动执行(命令或者脚本)/etc/rc.d/rc.local +x/etc/fastab开机自动挂载文件系统centos 系统默认的文件系统是 XFS df -Th T type类型UUID 的方式去挂载设备名称 (uuid) 挂载点 文件系统类型 def
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

系统对时及单用户模式

fdisk 不可以格式化大于2T的磁盘yum -y install gcc make zlib-devel pcre pcre-devel openssl-devel apr-devel apr-util-devel源码包配置环境进行集群的时间对时 首先修改成错误的时间, 然后安装软件包yum -y install ntpdate-4.2.6p5-29.el7.centos.x86_64 执行ntpdate -s ntp.api.bz 使用date命令查看时间是否修改成功
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

创建用户和组及Vim操作

温馨提示:学习的每一天都是在不断进步,相信自己,会让自己变得更加强大~1.创建组admin 创建用户jack和tom属于该组(该组为他们的第二个组) 创建用户tony,只属于admin, 他们的密码都是:qianfenggroupadd adminuseradd jackuseradd tomusermod -aG admin jackusermod -aG admin tomuseradd tonyusermod -G admin tonypassw
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

PV,VG,lvm逻辑卷

准备3块硬盘 可不分区 思路—PV----VG—LVlsblk##创建PVpvcreate /dev/sdb##查看当前PVpvscanpvsvgcreate datevg /dev/sdb (datavg是起的名字)vgscanpvscan ##得到回显 pv/dev/sdb 加入到了VG datevg 容量XXfree#创建LVlvcreate -L 200M -n lv1 datavg -L(指定lv的大小) 指定为20
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

从内存的角度分析java数组和对象(一)

从内存的角度分析java数组一: 首先呢我们需要知道的是,在java中内存分为两种:一是堆,一个是栈。这两个是不同的内存空间,栈内存1.什么是栈内存栈内存是Java的一种内存,主要是用来执行程序用的,比如:基本类型的变量和对象的引用变量。2.栈内存的特点第一点:栈内存就好像一个矿泉水瓶,像里面放入东西,那么先放入的沉入底部,所以它的特点是:先进后出,后进先出第二点:存取速度比堆要...
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

数据库管理软件navicate 15 的激活和安装

写在前面之前一直忙着工作,趁着休假,加上身边的小伙伴想尝鲜一把最新版的Navicat Premium 15,官网说,最新一版的Navicat Premium 出了很多新的功能,博主说实话,也想体验一把,所以鉴于此,遂将自己整理的文章贴出来,供大家参考,由于博主个人还是主张维护正版的意愿,如果经济实力允许的话,还是希望大家去官网下载,嘻嘻~~,好的,废话不多说了,直接上教程。Navicat Premium 15激活步骤准备Navicat Premium 15、Navicat Premium 15注册机
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

java多线程第一弹

java 内存模型是计算机的运算速度与它的存储和通信子系统的速度差距太大,大量的时间都花费在磁盘I/O、网络通信或者数据库访问上。加入缓存带来的好处:由于计算机的存储设备与处理器的运算速度有着几个数量级的差距,所以现代计算机系统都不得不加入一层或多层读写速度尽可能接近处理器运算速度的高速缓存(Cache)来作为内存与处理器之间的缓冲:将运算需要使用的数据复制到缓存中,让运算能快速进行,当运算结束后再从缓存同步回内存之中,这样处理器就无须等待缓慢的内存读写了。坏处:它引入了一个新的问题:缓存
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

事务的四大隔离级别的实验

数据库实验之事务的四大级别操作背景介绍:一、事务的四大特性(ACID)了解事务隔离级别之前不得不了解的事务的四大特性。1、原子性(Atomicity)事务开始后所有操作,要么全部做完,要么全部不做。事务是一个不可分割的整体。事务在执行过程中出错,会回滚到事务开始之前的状态,以此来保证事务的完整性。类似于原子在物理上的解释:指化学反应不可再分的基本微粒,原子在化学反应中不可分割 。2、一致性(Consistency)事务在开始和结束后,能保证数据库完整性约束的正确性即数据的完整性。比如经典的转账
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

linux之虚拟化配置----虚拟机

linxu虚拟机操作安装条件及虚拟化相关信息虚拟化安装操作过程手动安装虚拟机快照脚本安装虚拟机管理命令虚拟机在linux中的传输与恢复虚拟机的传输命令虚拟机的恢复命令安装条件及虚拟化相关信息安装条件- inter cpu ------------> vmx文件- amd cpu ------------>svm文件2.相关信息- 服务名称:libvirtd- 虚拟化核心:qemu/kvm- 虚拟化存储目录(虚拟机硬盘)/var/lib/libvirt/images/west
分类: 其他 发布时间: 10-26 16:51 阅读次数: 0

利用mininet的可视化界面miniedit进行拓扑构建

Mininet 2.2.0之后的版本内置了一个构建网络拓扑的可视化工具miniedit,使用miniedit可视化界面方便了用户自定义网络拓扑的创建,为不熟悉python脚本的使用者创造了更简单的环境,界面直观,可操作性强。因此,这篇文章介绍一下miniedit的使用方法。miniedit的各项操作都是在root用户进行的,所有首先我们进入root用户下。那么miniedit的位置在哪呢?找到miniedit,我们需要进入mininet的目录下,miniedit的目录如下图的操作所示,可以看见一
分类: 物联网 发布时间: 10-26 16:51 阅读次数: 0

php7中如何停止php-fpm服务

php7中如何停止php-fpm服务在PHP生命周期的各个阶段,一些与服务相关的操作都是通过SAPI接口实现。各个服务器抽象层之间遵守着相同的约定,这里我们称之为SAPI接口。在PHP的源码中,当需要调用服务器相关信息时,全部通过SAPI接口中对应的方法调用实现php-fpm + nginxphp + terminal... PHP常见的四种运行模式SAPI(Server Application Programming Interface)服务器应用程序编程接口,即PHP与其他应用交互的接
分类: 物联网 发布时间: 10-26 16:51 阅读次数: 0

如何在VM上创建一个新的虚拟机(Linux操作系统)

目录说明新建虚拟机向导配置自定义配置配置硬件兼容性配置操作系统选择Linux操作系统配置虚拟机名称及存放本地计算机的存储位置配置虚拟机处理器核数配置虚拟机内存配置虚拟机网络连接类型三个默认配置配置磁盘容量创建完成进行虚拟机设置配置虚拟机使用的ISO映像文件开机开始进入虚拟机进行虚拟机的基础配置配置语言​配置软件选择​​配置分区​开始安装创建ROOT用户密码等待创建完成接受许可...
分类: 物联网 发布时间: 10-26 16:51 阅读次数: 0

linux软件包管理-源码编译

linux的进阶篇文章目录linux的进阶篇一,源码包的基本描述二,源码包的优点三,源码包的获取方式四,源码包分类五, 源码包的安装一,源码包的基本描述在linux环境下面安装源码包是比较常见的, 早期运维管理工作中,大部分软件都是通过源码安装的。那么安装一个源码包,是需要我们自己把源代码编译成二进制的可执行文件。源码包的编译用到了linux系统里的编译器,通常源码包都是用C语言开发的,这也是因为C语言为linux上最标准的程序语言。Linux上的C语言编译器叫做gcc,利用它就可以把C语言变成
分类: 物联网 发布时间: 10-26 16:51 阅读次数: 0