目錄

• 一、Superset入門
• • 1.1 Superset概述
  • 1.2 Superset應用場景
• 二、Superset安裝及使用
• • 2.1 安裝Python環(huán)境
  • • 2.1.1 安裝Miniconda
    • 2.1.2 創(chuàng)建Python3.7環(huán)境
  • 2.2 Superset部署
  • • 2.2.1 安裝依賴
    • 2.2.2 安裝superset
    • 2.2.3 啟動superset
    • 2.2.4 superset啟停腳本

-----------------------------------------------------分隔符-----------------------------------------------------
數(shù)據(jù)倉庫之電商數(shù)倉-- 1、用戶行為數(shù)據(jù)采集==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 2、業(yè)務數(shù)據(jù)采集平臺==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 3.1、電商數(shù)據(jù)倉庫系統(tǒng)(DIM層、ODS層、DWD層)==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 3.2、電商數(shù)據(jù)倉庫系統(tǒng)(DWS層)==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 3.3、電商數(shù)據(jù)倉庫系統(tǒng)(DWT層)==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 3.4、電商數(shù)據(jù)倉庫系統(tǒng)(ADS層)==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 4、可視化報表Superset==>
數(shù)據(jù)倉庫之電商數(shù)倉-- 5、即席查詢Kylin==>

一、Superset入門

1.1 Superset概述

Apache Superset是一個開源的、現(xiàn)代的、輕量級BI分析工具，能夠?qū)佣喾N數(shù)據(jù)源、擁有豐富的圖表展示形式、支持自定義儀表盤，且擁有友好的用戶界面，十分易用。

1.2 Superset應用場景

由于Superset能夠?qū)映Ｓ玫拇髷?shù)據(jù)分析工具，如Hive、Kylin、Druid等，且支持自定義儀表盤，故可作為數(shù)倉的可視化工具。

二、Superset安裝及使用

Superset官網(wǎng)地址：http://superset.apache.org/

2.1 安裝Python環(huán)境

Superset是由Python語言編寫的Web應用，要求Python3.7的環(huán)境。

2.1.1 安裝Miniconda

conda是一個開源的包、環(huán)境管理器，可以用于在同一個機器上安裝不同Python版本的軟件包及其依賴，并能夠在不同的Python環(huán)境之間切換，Anaconda包括Conda、Python以及一大堆安裝好的工具包，比如：numpy、pandas等，Miniconda包括Conda、Python。

此處不需這些工具包，選擇MiniConda。

下載Miniconda（Python3版本）
下載地址：https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

安裝Miniconda

執(zhí)行以下命令進行安裝，并按照提示操作，直到安裝完成:

[xiaobai@hadoop102 superset]$ bash Miniconda3-latest-Linux-x86_64.sh

出現(xiàn)以下提示表明安裝成功：

source環(huán)境變量配置文件

miniconda安裝完成后會在根目錄下的.bashrc文件里自動添加家目錄到path，如圖：

[xiaobai@hadoop102 ~]$ vim .bashrc

但仍需加載環(huán)境變量配置文件，使之生效：

[xiaobai@hadoop102 ~]$ source .bashrc

取消激活base環(huán)境

(base) [xiaobai@hadoop102 ~]$ conda config --set auto_activate_base false

2.1.2 創(chuàng)建Python3.7環(huán)境

配置conda國內(nèi)鏡像：

[xiaobai@hadoop102 ~]$ conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free [xiaobai@hadoop102 ~]$ conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main [xiaobai@hadoop102 ~]$ conda config --set show_channel_urls yes

重置源配置：

conda config --remove-key channels

查看源配置：

[xiaobai@hadoop102 ~]$ cat ~/.condarc

創(chuàng)建Python3.7環(huán)境：

[xiaobai@hadoop102 ~]$ conda create --name superset phthon=3.7

tips: ??
conda環(huán)境管理常用命令：
創(chuàng)建環(huán)境：conda create -n env_name
查看所有環(huán)境：conda info --envs
刪除一個環(huán)境：conda remove -n env_name --all

激活superset環(huán)境：

conda activate superset

退出當前環(huán)境：

conda deactivate

激活后：

(superset) [xiaobai@hadoop102 ~]$

注??：
這里使用base環(huán)境也可以，但若是多環(huán)境，需切換之superset環(huán)境！

2.2 Superset部署

2.2.1 安裝依賴

安裝Superset之前，需安裝以下所需依賴：

(superset) [xiaobai@hadoop102 ~]$ sudo yum install -y gcc gcc-c++ libffi-devel python-devel python-pip python-wheel python-setuptools openssl-devel cyrus-sasl-devel openldap-devel

2.2.2 安裝superset

安裝(更新)setuptools和pip：

(superset) [xiaobai@hadoop102 ~]$ pip install --upgrade setuptools pip -i https://pypi.douban.com/simple/

注：pip是python的包管理工具，類似centos中的yum；

安裝superset：

(superset) [xiaobai@hadoop102 ~]$ pip install apache-superset -i https://pypi.douban.com/simple/

或

pip install apache-superset --trusted-host https://repo.huaweicloud.com -i https://repo.huaweicloud.com/repository/pypi/simple

注：-i的作用是指定鏡像，此處選擇國內(nèi)鏡像；

初始化superset數(shù)據(jù)庫：

(superset) [xiaobai@hadoop102 ~]$ superset db upgrade

創(chuàng)建管理員用戶：

(superset) [xiaobai@hadoop102 ~]$ export FLASK_APP=superset (superset) [xiaobai@hadoop102 ~]$ superset fab create-admin

注：flask是一個python web框架，Superset使用的就是flask

初始化superset：

(superset) [xiaobai@hadoop102 ~]$ superset init

2.2.3 啟動superset

安裝gunicorn：

pip install gunicorn -i https://pypi.douban.com/simple/

注：gunicorn是一個Python Web Server，類似java中的TomCat；

啟動后superset：

(superset) [xiaobai@hadoop102 ~]$ gunicorn --workers 5 --timeout 120 --bind hadoop102:8787 "superset.app:create_app()" --daemon

注： 需確保當前conda環(huán)境為superset環(huán)境！

–workers：指定進程個數(shù)；
–timeout：worker進程超時時間，超時會自動重啟；
–bind：綁定本機地址，即為Superset訪問地址；
–daemon：后臺運行；

登錄superset：
訪問 http://hadoop102:8787 使用管理員賬戶進行登錄。

停止superset：

ps -ef | awk '/superset/ && !/awk/{print $2}' | xargs kill -9

退出superset環(huán)境：

conda deactivate

2.2.4 superset啟停腳本

在/home/xiaobai/bin目錄下創(chuàng)建superset.sh問價：

[xiaobai@hadoop103 bin]$ vim superset.sh #!/bin/bashsuperset_status(){result=`ps -ef | awk '/gunicorn/ && !/awk/{print $2}' | wc -l`if [[ $result -eq 0 ]]; thenreturn 0elsereturn 1fi } superset_start(){source ~/.bashrcsuperset_status >/dev/null 2>&1if [[ $? -eq 0 ]]; thenconda activate superset ; gunicorn --workers 5 --timeout 120 --bind hadoop102:8787 --daemon 'superset.app:create_app()'elseecho "superset正在運行"fi}superset_stop(){superset_status >/dev/null 2>&1if [[ $? -eq 0 ]]; thenecho "superset未在運行"elseps -ef | awk '/gunicorn/ && !/awk/{print $2}' | xargs kill -9fi }case $1 instart )echo "啟動Superset"superset_start;;stop )echo "停止Superset"superset_stop;;restart )echo "重啟Superset"superset_stopsuperset_start;;status )superset_status >/dev/null 2>&1if [[ $? -eq 0 ]]; thenecho "superset未在運行"elseecho "superset正在運行"fi esac

權(quán)限：

chmod +x superset.sh

測試執(zhí)行
啟動superset：

[xiaobai@hadoop102 bin]$ superset.sh start

停止superset：

[xiaobai@hadoop102 bin]$ superset.sh stop

到這虛擬機崩潰了！g

總結(jié)

以上是生活随笔為你收集整理的数据仓库之电商数仓-- 4、可视化报表Superset的全部內(nèi)容，希望文章能夠幫你解決所遇到的問題。

如果覺得生活随笔網(wǎng)站內(nèi)容還不錯，歡迎將生活随笔推薦給好友。