spark启动:hadoop01: JAVA_HOME is not set
报错: 1.hadoop01: failed to launch: nice -n 0 2.hadoop01: JAVA_HOME is not set 解决办法: 修改:spark-env.sh,添加 然后重启:
报错: 1.hadoop01: failed to launch: nice -n 0 2.hadoop01: JAVA_HOME is not set 解决办法: 修改:spark-env.sh,添加 然后重启:
发现启动的进程里没有DataNode。 解决办法 1.打开core-site.xml文件,找到缓存路径, 然后使用命令删除这个文件夹 rm -rf /opt/data/ 然后重新格式化datanode,使用命令: 然后去启动hadoop
kafka各个版本下载 https://archive.apache.org/dist/kafka/
权限问题,修改后即可正常创建
Hadoop各个版本下载地址 https://archive.apache.org/dist/hadoop/common/
单机模式: 集群模式:
环境:centos 7.9 ,java1.8 zookeeper集群 hadoop集群 spark集群 1.zookeeper集群 2.hadoop集群 1.伪分布式安装 1.关闭防火墙 systemctl stop firewalld.s...
Hive简介 Hive:数据仓库 Hive:解释器,编译器,优化器等。 Hive运行时,元数据存储在关系型数据库里面。 数据库与数据仓库的区别 1.数据库是用来接收业务数据,需要很短的是时间内返回结果。数据仓库不需要,只要能得到就行,当然时...
zookeeper 官网:https://zookeeper.apache.org/ ZooKeeper:分布式应用程序的分布式协调服务 ZooKeeper 是分布式应用程序的分布式开源协调服务。它公开了一组简单的原语,分布式应用程序可以在...