#Linkis安裝 sudo useradd hadoop vim /etc/sudoershadoop ALL=(ALL) NOPASSWD: NOPASSWD: ALL vim /home/hadoop/.bash_rc ##以部署用戶Hadoop為例#JDKexport JAVA_HOME=/usr/java/default##如果不使用Hive、Spark等引擎且不依賴Hadoop，則不需要修改以下環境變量#HADOOP export HADOOP_HOME=/opt/bigdata/hadoop-2.9.2export HADOOP_CONF_DIR=/opt/bigdata/hadoop-2.9.2/etc/hadoop#Hiveexport HIVE_HOME=/opt/bigdata/hive-2.3.4export HIVE_CONF_DIR=/opt/bigdata/hive-2.3.4/conf#Sparkexport SPARK_HOME=/opt/bigdata/spark-3.1.1-bin-hadoop2.7export SPARK_CONF_DIR=/opt/bigdata/spark-3.1.1-bin-hadoop2.7/conf#export PYSPARK_ALLOW_INSECURE_GATEWAY=1 # Pyspark必須加的參數 tar -xvf wedatasphere-linkis-1.0.0-RC1-dist.tar.gz -C /opt/linkis/ cd /opt/linkis/ cp -r wedatasphere-linkis-1.0.0-RC1-dist/ linkis-1.0.0 cd linkis-1.0.0/ mkdir -p /home/hadoop/ecp hdfs dfs -mkdir /linkis vim conf/linkis-env.shSSH_PORT=22 #指定SSH端口，如果單機版本安裝可以不配置deployUser=hadoop #指定部署用戶WORKSPACE_USER_ROOT_PATH=file:///home/hadoop/linkis # 指定用戶根目錄，一般用于存儲用戶的腳本文件和日志文件等，是用戶的工作空間。RESULT_SET_ROOT_PATH=hdfs:///linkis # 結果集文件路徑，用于存儲Job的結果集文件ENGINECONN_ROOT_PATH=/home/hadoop/ecp #存放ECP的安裝路徑，需要部署用戶有寫權限的本地目錄ENTRANCE_CONFIG_LOG_PATH=hdfs:///linkis/ #ENTRANCE的日志路徑#因為1.0支持多Yarn集群，使用到Yarn隊列資源的一定需要配置YARN_RESTFUL_URLYARN_RESTFUL_URL=http://192.168.145.28:8088 #Yarn的ResourceManager的地址# 如果您想配合Scriptis一起使用，CDH版的Hive，還需要配置如下參數（社區版Hive可忽略該配置）HIVE_META_URL=jdbc://... # HiveMeta元數據庫的URLHIVE_META_USER= # HiveMeta元數據庫的用戶HIVE_META_PASSWORD= # HiveMeta元數據庫的密碼# 配置hadoop/hive/spark的配置目錄 HADOOP_CONF_DIR=/opt/bigdata/hadoop-2.9.2/etc/hadoop #hadoop的conf目錄HIVE_CONF_DIR=/opt/bigdata/hive-2.3.4/conf #hive的conf目錄SPARK_CONF_DIR=/opt/bigdata/spark-3.1.1-bin-hadoop2.7/conf #spark的conf目錄## LDAP配置，默認Linkis只支持部署用戶登錄，如果需要支持多用戶登錄可以使用LDAP，需要配置以下參數：#LDAP_URL=ldap://localhost:1389/ #LDAP_BASEDN=dc=webank,dc=com ##如果spark不是2.4.3的版本需要修改參數：SPARK_VERSION=3.1.1##如果hive不是1.2.1的版本需要修改參數：HIVE_VERSION=2.3.4 vim conf/db.shMYSQL_HOST=192.168.xxx.xxMYSQL_PORT=3306MYSQL_DB=linkisMYSQL_USER=rootMYSQL_PASSWORD=123456 #安裝MySQL客戶端 expect dos2unix yum install -y mysql expect dos2unix sh bin/install.sh 2 sh sbin/linkis-start-all.sh #訪問eureka驗證服務是否啟動成功 http://192.168.xxx.xx:20303/

總結

以上是生活随笔為你收集整理的Linkis计算中间件部署过程记录的全部內容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網站內容還不錯，歡迎將生活随笔推薦給好友。