前言

本文隶属于专栏《1000个问题搞定大数据技术体系》,该专栏为笔者原创,引用请注明来源,不足和错误之处请在评论区帮忙指出,谢谢!

本专栏目录结构和参考文献请见1000个问题搞定大数据技术体系

正文

在 3.x 版本中, Azkaban 提供 3 种部署模式:

轻量级的 solo server mode (独立服务器模式)、重量级的 two server mode (双服务器模式)和 distributed multiple-executor mode (分布式多执行器模式)。

接下来,针对这 3 种部署模式进行简要说明,具体如下。

solo server mode

在独立服务器模式下,使用的数据库是内嵌的 H2 ,并且 WebServer ( Web 服务器)和 ExecutorServer (执行服务器)都在同一进程中运行。

如果只想尝试一下 Azkaban 的使用,或者是很小规模的测试使用,这种部署模式还是可行的

two server mode

双服务器模式适用于比较复杂的生产环境,它的数据库会由具有主从设置的 MySQL 实例提供支持。

其中, Web 服务器和执行服务器应在不同的进程中运行,以便升级和维护过程中不影响用户。

distributed multiple-executor mode

分布式多执行器模式适用于特别复杂的生产环境,它的数据库同样应该由具有主从设置的 MySQL 实例支持。

理想情况下, Web 服务器和执行服务器应在不同的主机中运行以便升级和维护不影响用户。

这种分布式多主机设置的模式为 Azkaban 带来了强大且可扩展的性能。

总结

上面对 Azkaban 3.x 版本中提供的 3 种部署模式进行了介绍,在实际开发中,更多接触使用、使用部署也较为方便的则是第二种部署模式 two server mode

上面提到了不同模式下使用的数据库,分别有 H2 和 MySQL 。

需要说明的是, H2 是 Azkaban 内嵌的数据库,推荐在 solo server mode 下使用;

而 MySQL 是 Azkaban 到目前为止支持的唯一外部数据库,也更推荐在 two server mode 和 distributed multiple-executor mode 下使用。

关于其他类型的数据库,最新的官网声明中已经说明还在持续探讨和研发中,以后的版本中预计将会支持更多的数据库。

上一篇 下一篇