Skip to content

InterestingLab/guardian

Repository files navigation

README

Guardian 是 Waterdrop 的子项目,用于监控 Waterdrop 的运行状态,目前仅支持以下功能:

  • 监控运行于Yarn集群上的 Waterdrop 程序

  • 可监控 Waterdrop 是否存活,并能够根据配置自动拉起 Waterdrop 程序

  • 可监控 Waterdrop 程序运行时streaming batch是否存在堆积和延迟

  • 以上两项监控如果达到阈值可发送邮件报警

  • 可自定义实现不同的报警方法(Python),如短信报警,微信报警等。


运行环境

Guardian 虽然是用python开发的,但是它已经被打包为可独立部署的程序包,不依赖任何Python环境及Python依赖包


为Guardian的代码做贡献

强烈建议使用Python2.7.x 作为 Guardian 的开发环境

建议使用virtualenv(但不是必须的)作为python运行环境切换的工具。

安装virtualenv方法:pip install virtualenv==1.11.6

# 初始化开发环境
virtualenv -p python2.7 VENV
source VENV/bin/activate

pip install -r requirements.txt

打包为可独立运行的服务

./package.sh

打包完成后,可以在dist/找到guardian_.tar.gz, 解压缩后可直接运行

运行

# show help information
cd ./dist/guardian_1.1.0/
./bin/guardian checkout config.json.template