所谓的奇数台服务器是根据配置文件来的。 剩下机器不超过半数则全部Not running 搭建： 复制文件到/opt/module/中 zk目录下新建zkData目录 修改conf下的zoo-sampl...
大数据
大数据
大数据
crontab定时任务：
crontab -e, -l, -r -e： 编辑crontab定时任务 -l： 查询crontab任务 -r： 删除当前用户所有的crontab任务 案例： */1 * * * * date ...
折腾
pycharm启动远程django报找不到settings的错误
无意间解决了，因此无法复现错误，就是run控制台报找不到settings但是终端可以使用python runserver 运行。 看了下manage.py的代码，报错一行是传参那行，于是: 点击右侧按...
大数据
Spark高可用配置方法
架构图： 1） zookeeper 正常安装并启动2） 修改 spark-env.sh 文件添加如下配置：vi spark-env.sh注释掉如下内容：#SPARK_MASTER_HOST=bigda...
大数据
spark JobHistoryServer 配置
修改 spark-default.conf.template 名称 mv spark-defaults.conf.template spark-defaults.conf 修改 spark-defau...
大数据
Maven配置流程兼hadoop本地配置和lomkok
项目文件夹迁移需要删除IDEA文件夹 解压 环境变量 解压maven 配置地址 配置镜像 在path中添加变量 <dependencies> <depend...
大数据
spark分布式搭建
standalone模式： 分别修改conf下的slaves和spark-env.sh文件 然后启动sbin/start-all.sh，即可使用jps看到相关的进程 同时可...
大数据
spark基础
懒人版（基础）： 下载，解压，粘贴以下代码即可运行成功（example里面的文件） bin/spark-submit \ --class org.apache.spark.examples.Spark...