本文主要是介绍67 Airflow配置MySQL数据库和LocalExecutor,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!
Airflow使用SQLite数据库作为元数据库(知识库),元数据库存放一些DAG相关信息、连接信息、日志信息等。我们可以使用sqlite3命令查看Airflow知识库所包含的表清单,如下图。
SQLite是一个轻量级的文件型数据库,读操作可以并发执行,但增、删、改操作时会有锁,即同一时刻只有一个进程/线程来进行写操作。由于生产环境往往是高并发的美因茨SQLite可用作Airflow的测试环境,生产环境还是要使用支持并发写的数据库,如MySQL、Oracle等。本节介绍如何配置Airflow使用MySQL作为知识库。
在Web应用方面,MySQL是最好的RDBMS (关系型数据库管理系统)应用软件之一,使用MYSQL作为Airflow的知识库也是非常适合的。下面我们一步步来配置MySQL作为Airflow的知识库:
第一步:安装MySQL。
Centos7下安装的mysql
yum install mariadb mariadb-server -y
(1) 启动并设置开机启动
systemctl start mariadb
systemctl enable mariadb
(2) 初始化m
这篇关于67 Airflow配置MySQL数据库和LocalExecutor的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!