海豚调度的安装和使用

1、上传解压

压缩包可自行去官网下载
tar -zxvf DolphinScheduler-bin.tar.gz

2、修改配置文件

cd conf

2.1、修改mysql链接配置

vim datasource.properties

#修改一下配置
spring.datasource.driver-class-name=com.mysql.jdbc.Driver
spring.datasource.url=jdbc:mysql://node1:3306/dolphinscheduler?characterEncoding=UTF-8&allowMultiQueries=true
spring.datasource.username=root
spring.datasource.password=123456

2.2、修改安装配置

vim config/install_config.conf

#mysql地址
dbhost="node1:3306"
#mysql用户名
username="root"
#数据库名
dbname="dolphinscheduler"
#mysql密码
password="123456"
#zookeeper链接地址
zkQuorum="master:2181"
#dolphinscheduler安装路径
installPath="/usr/local/soft/dolphinscheduler"
#安装用户
deployUser="root"
#配置邮箱服务器,需要开启邮箱smtp服务
mailServerHost="smtp.163.com"
#端口号
mailServerPort="25"
#邮箱地址
mailSender="你的邮箱地址"
#用户名和邮箱地址一致
mailUser=" 你的邮箱地址"
#邮箱密码
mailPassword="你的邮箱密码"
starttlsEnable="false"
#hdfs访问地址
defaultFS="hdfs://master:9000"
#dolphinscheduler上传到hdfs路径
resourceUploadPath="/dolphinscheduler"
#上传文件使用的用户名
hdfsRootUser="root"

2.3、修改环境变量

vim env/dolphinscheduler_env.sh

注意:如果使用的时候需要用到datax采集工具,需要该配置文件中配置datax的环境

export JAVA_HOME=/usr/local/soft/jdk1.8.0_171
export HADOOP_HOME=/usr/local/soft/hadoop-2.7.6
export HADOOP_CONF_DIR=/usr/local/soft/hadoop-2.7.6/etc/hadoop
export ZOOKEEPER_HOME=/usr/local/soft/zookeeper-3.4.6
export SPARK_HOME2=/usr/local/soft/spark-2.4.5

export PATH=$HADOOP_HOME/bin:$SPARK_HOME2/bin:$PYTHON_HOME:$JAVA_HOME/bin:$HIVE_HOME/bin:$PATH:$FLINK_HOME/bin:$DATAX_HOME:$PATH

3、初始化数据库

进入mysql创建dolphinscheduler数据库

mysql -uroot -p123456

CREATE DATABASE dolphinscheduler DEFAULT CHARACTER SET utf8 DEFAULT COLLATE utf8_general_ci;

执行脚本创建表

cd /usr/local/soft/DolphinScheduler-bin/script

sh create-dolphinscheduler.sh

启动zk

zkServer.sh start

4、一键部署

sh install.sh

注意:安装好之后可以到/usr/local/soft/dolphinscheduler/log查看日志

5、访问dolphinscheduler

登录:
用户名:admin , 密码:dolphinscheduler123

访问web界面:
http://master:12345/dolphinscheduler

6、简单使用dolphinscheduler

1、创建root租户–用于执行脚本的用户(权限)
2、将租户赋权给admin用户
3、创建项目
4、创建流程


版权声明:本文为qq_45992615原创文章,遵循CC 4.0 BY-SA版权协议,转载请附上原文出处链接和本声明。