其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ]

本文主要是介绍其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ],希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

superset配置与测试记录

  • 1 安装
    • 1.1 系统环境与前言
    • 1.2 docker部署superset
    • 1.3 superset中文化(可跳过)
  • 2 参考

1 安装

1.1 系统环境与前言

cat /etc/issue
Ubuntu 18.04.5 LTS \n \l

superset是一个开源数据可视化工具。

由Airbnb贡献的轻量级BI产品,目前在GitHub上有3万多颗星,其受欢迎程度可见一斑。Superset提供了Dashboard和多维分析两大类功能,后者可以将制作的结果发布到Dashboard上也可以单独使用。

数据源方面,Superset支持CSV、MySQL、Oracle、Redshift、Drill、Hive、Impala、Elasticsearch等27种数据源,并深度支持Druid。

InfluxDB 是一个开源分布式时序、事件和指标数据库。
我打算利用这个来部署一个边缘端的数据平台,搜集机器人和控制器数据并做可视化。

1.2 docker部署superset

docker search superset
NAME                                  DESCRIPTION
amancevice/superset                   Superset on Debian+Python3
apache/superset                       Apache Superset
preset/superset                       Apache Superset (incubating) is a modern,
tylerfowler/superset                  An extendable Docker image for Apache's Su
maedamikio/superset
huksley/superset                      AirBnB Superset 0.28 with MySQL driver
dailyhotel/superset                   Dockerized Superset
ganshanshan/superset_tddv             tddv superset
tyyzqmf/superset                      根据amancevice/superset修改的镜像 主要解决
yagami15145/superset-nginx
starburstdata/superset                Apache Superset docker container

选择拉取第一个,没写tag的话默认拉取latest版本

docker pull amancevice/superset

查看已下载的所有镜像。

docker image ls

运行。

docker run -d -p 8088:8088 -p 8086:8086 -v ~/home/DATAPLATFORM/data amancevice/superset

-p后面是端口映射,8088给superset,8086给influxdb, 也可以用3000-4000这种表示方法同时映射多个连续的ip。
-v 是挂载本地目录

docker ps 可用于查看容器,docker rename 新名 旧名可用于重命名容器。成功运行后可使用docker execattach进入,最好使用exec

docker exec -it <容器名> /bin/bash

进入容器以后设置用户名:

之前用命令fabmanager create-admin --app superset
安装时会报错 'NoneType' object has no attribute 'auth_type',且有警告提示说fabmanager即将被抛弃。

所以使用以下命令创建用户:

superset fab create-admin

创建用户
更新和初始化:

# 更新
superset db upgrade # 初始化
superset init# 启动服务器,不写-p默认5000
superset run -h 0.0.0.0 -p <端口号># 载入案例
superset load-test-users
superset load-examples

注意:
看到一些案例写的superset runserver,最新版没有runserver命令.
同时必须映射host到0.0.0.0,-h默认为127.0.0.1但外网无法访问。

1.3 superset中文化(可跳过)

在目录/usr/local/lib/python3.8/site-packages/superset下找到config.py的文件,进行编辑。位置在Setup default language。编辑时记得备份原文件。
编辑命令:

cd /usr/local/lib/python3.8/site-packages/superset
cp config.py backup_config.py
vim config.py

内容如图:
更改前:
中文设置
更改后:
在这里插入图片描述
运行时报错:

cannot import name ‘Any’ from partially initialized module ‘typing’
(most likely due to a circular import)

看了一下是我不能再当前目录下运行superset,和其他python模块冲突。换一个路径运行就行了。
在这里插入图片描述

在实际部署的时候可以使用gunicorn或者supervisor,该docker使用gunicorn进行服务进程管理.

//TODO
后续添加如何写influxdb的接入殷勤。

2 参考

  1. Superset学习实践(一)–基于Docker的安装配置
  2. superset搭建使用

这篇关于其他笔记 - 如何利用superset部署一个可视化的数据平台 [ docker配置与测试记录 ]的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1103434

相关文章

Python在二进制文件中进行数据搜索的实战指南

《Python在二进制文件中进行数据搜索的实战指南》在二进制文件中搜索特定数据是编程中常见的任务,尤其在日志分析、程序调试和二进制数据处理中尤为重要,下面我们就来看看如何使用Python实现这一功能吧... 目录简介1. 二进制文件搜索概述2. python二进制模式文件读取(rb)2.1 二进制模式与文本

jdk1.8的Jenkins安装配置实践

《jdk1.8的Jenkins安装配置实践》Jenkins是一款流行的开源持续集成工具,支持自动构建、测试和部署,通过Jenkins,开发团队可以实现代码提交后自动进行构建、测试,并将构建结果分发到测... 目录Jenkins介绍Jenkins环境搭建Jenkins安装配置Jenkins插件安装Git安装配

C#实现将XML数据自动化地写入Excel文件

《C#实现将XML数据自动化地写入Excel文件》在现代企业级应用中,数据处理与报表生成是核心环节,本文将深入探讨如何利用C#和一款优秀的库,将XML数据自动化地写入Excel文件,有需要的小伙伴可以... 目录理解XML数据结构与Excel的对应关系引入高效工具:使用Spire.XLS for .NETC

Nginx之https证书配置实现

《Nginx之https证书配置实现》本文主要介绍了Nginx之https证书配置的实现示例,文中通过示例代码介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面随着小编来一起... 目录背景介绍为什么不能部署在 IIS 或 NAT 设备上?具体实现证书获取nginx配置扩展结果验证

mysql_mcp_server部署及应用实践案例

《mysql_mcp_server部署及应用实践案例》文章介绍了在CentOS7.5环境下部署MySQL_mcp_server的步骤,包括服务安装、配置和启动,还提供了一个基于Dify工作流的应用案例... 目录mysql_mcp_server部署及应用案例1. 服务安装1.1. 下载源码1.2. 创建独立

springboot3.x使用@NacosValue无法获取配置信息的解决过程

《springboot3.x使用@NacosValue无法获取配置信息的解决过程》在SpringBoot3.x中升级Nacos依赖后,使用@NacosValue无法动态获取配置,通过引入SpringC... 目录一、python问题描述二、解决方案总结一、问题描述springboot从2android.x

C#高效实现在Word文档中自动化创建图表的可视化方案

《C#高效实现在Word文档中自动化创建图表的可视化方案》本文将深入探讨如何利用C#,结合一款功能强大的第三方库,实现在Word文档中自动化创建图表,为你的数据呈现和报告生成提供一套实用且高效的解决方... 目录Word文档图表自动化:为什么选择C#?从零开始:C#实现Word文档图表的基本步骤深度优化:C

Nginx服务器部署详细代码实例

《Nginx服务器部署详细代码实例》Nginx是一个高性能的HTTP和反向代理web服务器,同时也提供了IMAP/POP3/SMTP服务,:本文主要介绍Nginx服务器部署的相关资料,文中通过代码... 目录Nginx 服务器SSL/TLS 配置动态脚本反向代理总结Nginx 服务器Nginx是一个‌高性

nginx跨域访问配置的几种方法实现

《nginx跨域访问配置的几种方法实现》本文详细介绍了Nginx跨域配置方法,包括基本配置、只允许指定域名、携带Cookie的跨域、动态设置允许的Origin、支持不同路径的跨域控制、静态资源跨域以及... 目录一、基本跨域配置二、只允许指定域名跨域三、完整示例四、配置后重载 nginx五、注意事项六、支持

MySQL数据目录迁移的完整过程

《MySQL数据目录迁移的完整过程》文章详细介绍了将MySQL数据目录迁移到新硬盘的整个过程,包括新硬盘挂载、创建新的数据目录、迁移数据(推荐使用两遍rsync方案)、修改MySQL配置文件和重启验证... 目录1,新硬盘挂载(如果有的话)2,创建新的 mysql 数据目录3,迁移 MySQL 数据(推荐两