Maven构建CDH开发大数据环境

使用cloudera hadoop开发hadoop程序,官方文档上有两种方法。第一种即把相应jar包拷贝到工程目录中去,另一种即使用maven管理依赖jar包。

在这里插入图片描述
maven 依赖

1.默认仓库找不到对应jar包,因此添加仓库:

<repositories>
      <repository>
        <id>cloudera-releases</id>
        <url>https://repository.cloudera.com/artifactory/cloudera-repos</url>
        <releases>
          <enabled>true</enabled>
        </releases>
        <snapshots>
         <enabled>false</enabled>
        </snapshots>
      </repository>
</repositories>

2.然后添加版本属性,方便后面依赖引用

<properties>
     <cdh.version>2.6.0-cdh5.7.0</cdh.version>
</properties>

3.添加依赖包

 <dependency>
      <groupId>org.apache.hadoop</groupId>
      <artifactId>hadoop-client</artifactId>
      <version>${cdh.version}</version>
      <scope>provided</scope>
 </dependency>
发布了48 篇原创文章 · 获赞 7 · 访问量 1万+

猜你喜欢

转载自blog.csdn.net/qq_36168479/article/details/102658152