Linux 伪分布式部署Hadoop-3.4.0
准备工作 下载 hadoop-3.4.0 下载jdk8 环境配置 免密码登陆-ssh密钥配置 hadoop-env.sh 配置 core-site.xml配置 yarn-site.xml 配置 mapred-site.xml 配置 hdfs-site.xml 配置 初始化数据源 启动服务 访问Had
准备工作 下载 hadoop-3.4.0 下载jdk8 环境配置 免密码登陆-ssh密钥配置 hadoop-env.sh 配置 core-site.xml配置 yarn-site.xml 配置 mapred-site.xml 配置 hdfs-site.xml 配置 初始化数据源 启动服务 访问Had
在 https://www.cnblogs.com/osinn/p/18813258 这篇文章中讲述了Hadoop使用MapReduce实现经典单词统计案例,这次写一篇如何使用Hive代替MapReduce实现单词统计 准备本地文本文件 首先本地磁盘创建一个wordcount.txt文件,并且添加以
jdk环境变量配置tools.jar 命令方式编译java文件 创建WordCount.java文件 内容如下: 编译WordCount.java文件 hadoop com.sun.tools.javac.Main ./WordCount.java 将编译好的class打包成jar包 jar cf
以下脚本文件必须执行 chmod +x xxx.sh 设置为可执行文件,否则执行刷新环境变量配置文件时会提示命令不存在 source: not found 一键配置jdk脚本 一键配置hadoop脚本 maven