linux学习第六十二篇:添加自定义监控项目,配置邮件告警,测试告警,不发邮件的问题处理

本文介绍如何在Zabbix中实现自定义监控项目,包括创建监控脚本、配置代理、设置触发器及图形展示等步骤。此外,还详细讲解了如何通过163或QQ邮箱配置邮件告警,确保及时收到监控通知。

添加自定义监控项目

  • 需求:监控某台web的80端口连接数,并出图

  • 两步:1)zabbix监控中心创建监控项目;2)针对该监控项目以图形展现

  • 对于第一步,需要到客户端定义脚本
    vim /usr/local/sbin/estab.sh
    内容如下

#!/bin/bash
##获取80端口并发连接数
netstat -ant |grep ':80 ' |grep -c ESTABLISHED
  • netstat -ant 查看的是网络的链接状态
    这里写图片描述

  • 修改执行文件权限:
    chmod 755 /usr/local/sbin/estab.sh

  • 客户端上编辑配置文件
    vim /etc/zabbix/zabbix_agentd.conf
    增加

UnsafeUserParameters=1  //表示使用自定义脚本
UserParameter=my.estab.count[*],/usr/local/sbin/estab.sh 
  • 自定义监控项的key为my.estab.count,后面的[*]里面写脚本的参数,如果没有参数则可以省略,脚本为/usr/local/sbin/estab.sh
    这里写图片描述

    • 重启zabbix-agent服务
      systemctl restart zabbix-agent

    • 首先到服务端验证,执行命令
      zabbix_get -s 192.168.85.129 -p 10050 -k ‘my.estab.count’
      如果是0,说明脚本没问题
      这里写图片描述

    • 然后在zabbix监控中心(浏览器)配置增加监控项目:
      配置->主机->点击主机的监控项->创建监控项
      键值写my.estab.count
      这里写图片描述

    • 添加该项目后,到“监测中”->“最新数据”查看刚添加的项目是否有数据出现,有了数据就可以添加图形了
      “配置”->“主机” ->“图形” ->“创建图形”
      这里写图片描述

    • 创建并发连接数的触发器
      这里写图片描述

配置邮件告警

  • 使用163或者QQ邮箱发告警邮件
    首先登录你的163邮箱
    设置->开启POP3、IMAP、SMTP服务
    点击左侧菜单“客户端授权密码”开启并记录授权码

  • 然后到监控中心设置邮件告警
    “管理”,“报警媒介类型”,“创建媒体类型”
    {ALERT.SENDTO} //表示发给谁
    {ALERT.SUBJECT} //主题
    ALERT.MESSAGE} //邮件的内容
    名称自定义,类型选脚本。
    这里写图片描述

  • 在服务端创建报警脚本mail.py
    vim /usr/lib/zabbix/alertscripts/mail.py
    内容:

#!/usr/bin/env python
#-*- coding: UTF-8 -*-
import os,sys
reload(sys)
sys.setdefaultencoding('utf8')
import getopt
import smtplib
from email.MIMEText import MIMEText
from email.MIMEMultipart import MIMEMultipart
from  subprocess import *
def sendqqmail(username,password,mailfrom,mailto,subject,content):
    gserver = 'smtp.qq.com'
    gport = 25
    try:
        msg = MIMEText(unicode(content).encode('utf-8'))
        msg['from'] = mailfrom
        msg['to'] = mailto
        msg['Reply-To'] = mailfrom
        msg['Subject'] = subject
        smtp = smtplib.SMTP(gserver, gport)
        smtp.set_debuglevel(0)
        smtp.ehlo()
        smtp.login(username,password)
        smtp.sendmail(mailfrom, mailto, msg.as_string())
        smtp.close()
    except Exception,err:
        print "Send mail failed. Error: %s" % err
def main():
    to=sys.argv[1]
    subject=sys.argv[2]
    content=sys.argv[3]
##定义QQ邮箱的账号和密码,你需要修改成你自己的账号和密码(请不要把真实的用户名和密码放到网上公开,否则你会死的很惨)
    sendqqmail('1234567@qq.com','aaaaaaaaaa','1234567@qq.com',to,subject,content)
#中间的aaaaaa是邮箱密码
if __name__ == "__main__":
    main()


#####脚本使用说明######
#1. 首先定义好脚本中的邮箱账号和密码
#2. 脚本执行命令为:python mail.py 目标邮箱 "邮件主题" "邮件内容"
  • 执行一下脚本:
    python mail.py 邮箱名 “标题” “内容”

  • 修改脚本执行权限:
    chmod 755 /usr/lib/zabbix/alertscripts/mail.py

  • 创建一个接受告警邮件的用户,“管理”,“用户”,“创建用户”,“报警媒介”,类型选择“报警”。群组选Zabbix administrators
    这里写图片描述
    类型是我们之前添加的“报警”
    这里写图片描述
    注意用户的权限,如果没有需要到用户组去设置权限,点击Zabbix administrators,在里面设置
    这里写图片描述
    这里写图片描述

  • 设置动作,“配置”,“动作”,“创建动作”,名称写“发邮件”(自定义),“新的触发条件”,A维护状态 非在 维护,B触发器示警度>=未分类
    这里写图片描述
    “操作”页面,内容如下

HOST:{HOST.NAME} {HOST.IP}
TIME:{EVENT.DATE}  {EVENT.TIME} 
LEVEL:{TRIGGER.SEVERITY} 
NAME:{TRIGGER.NAME}
messages:{ITEM.NAME}:{ITEM.VALUE}
ID:{EVENT.ID}
  • 这里写图片描述
    “操作”,选择发送的用户为刚创建的用户,仅送到选择“报警”
    记得点添加

  • 切换到“恢复操作”,把信息改成如下

HOST:{HOST.NAME} {HOST.IP}
TIME:{EVENT.DATE}  {EVENT.TIME} 
LEVEL:{TRIGGER.SEVERITY} 
NAME:{TRIGGER.NAME}
messages:{ITEM.NAME}:{ITEM.VALUE}
ID:{EVENT.ID}
  • 点击“新的”,“操作”,选择发送的用户为刚创建的用户,仅送到选择“报警”,跟前面的操作一样。

  • 测试告警
    我们自定义触发器,设置负载小于1的时候就警告发邮件,这里显示邮件已经发送了
    这里写图片描述
    我们的邮箱也收到了邮件
    这里写图片描述

  • 主动模式和被动模式的设置
    这里写图片描述

你已经具备了在 Windows 上通过 **WSL2(Windows Subsystem for Linux)** 部署 Apache Superset 的基础环境,并且已有外部 MySQL 数据库。现在你的目标是构建一个 **生产级的 Superset 架构**,包含 Gunicorn、Nginx + HTTPS、Celery + Redis 异步任务处理、独立初始化、数据源接入、备份与导出等完整功能。 下面我将详细指导你如何一步步实现这些需求,使用 **Docker Compose** 来统一管理服务(推荐方式),并确保可维护性和扩展性。 --- ### ✅ 一、项目结构建议 ```bash superset-prod/ ├── docker-compose.yml ├── .env ├── nginx/ │ ├── nginx.conf │ ├── ssl/ │ └── superset.crt │ └── superset.key ├── scripts/ │ ├── init-superset.sh │ └── backup-mysql.sh └── data/ └── redis/ ``` --- ### ✅ 二、`.env` 环境变量文件 ```env # MySQL 外部数据库 MYSQL_HOST=192.168.110.204 MYSQL_USER=superset_user MYSQL_PASSWORD=Gapinyc123! MYSQL_DATABASE=superset SQLALCHEMY_DATABASE_URI=mysql+pymysql://superset_user:Gapinyc123!@192.168.110.204:3306/superset # Superset 配置 SUPERSET_SECRET_KEY=your-secret-key-here-replace # 使用 openssl rand -base64 42 生成 FLASK_APP=superset FLASK_ENV=production # Redis REDIS_HOST=redis REDIS_PORT=6379 CELERY_BROKER_URL=redis://redis:6379/0 CELERY_RESULT_BACKEND=redis://redis:6379/0 # Nginx & HTTPS NGINX_HOST=localhost SSL_CERT=/etc/nginx/ssl/superset.crt SSL_KEY=/etc/nginx/ssl/superset.key ``` > 🔐 `SUPERSET_SECRET_KEY` 必须设置,用于 session 加密。运行一次: > ```bash > openssl rand -base64 42 > ``` --- ### ✅ 三、`docker-compose.yml` ```yaml version: '3.8' services: superset: image: apache/superset:latest container_name: superset_app ports: - "8088" environment: - SUPERSET_CONFIG_PATH=/etc/superset/superset_config.py - FLASK_APP=${FLASK_APP} - FLASK_ENV=${FLASK_ENV} - SUPERSET_SECRET_KEY=${SUPERSET_SECRET_KEY} - SQLALCHEMY_DATABASE_URI=${SQLALCHEMY_DATABASE_URI} - CELERY_BROKER_URL=${CELERY_BROKER_URL} - CELERY_RESULT_BACKEND=${CELERY_RESULT_BACKEND} volumes: - ./superset_config.py:/etc/superset/superset_config.py - ./logs:/var/log/superset depends_on: - redis command: ["gunicorn", "-w", "4", "-k", "gevent", "--bind", "0.0.0.0:8088", "superset.app:create_app()"] networks: - superset-net celery: image: apache/superset:latest container_name: superset_celery environment: - SUPERSET_CONFIG_PATH=/etc/superset/superset_config.py - SQLALCHEMY_DATABASE_URI=${SQLALCHEMY_DATABASE_URI} - CELERY_BROKER_URL=${CELERY_BROKER_URL} - CELERY_RESULT_BACKEND=${CELERY_RESULT_BACKEND} volumes: - ./superset_config.py:/etc/superset/superset_config.py command: ["celery", "-A", "superset.tasks.celery_app", "worker", "-l", "INFO", "-c", "4"] depends_on: - redis - superset networks: - superset-net redis: image: redis:7-alpine container_name: redis ports: - "6379:6379" volumes: - ./data/redis:/data networks: - superset-net nginx: image: nginx:alpine container_name: nginx ports: - "80:80" - "443:443" volumes: - ./nginx/nginx.conf:/etc/nginx/nginx.conf - ./nginx/ssl:/etc/nginx/ssl depends_on: - superset networks: - superset-net superset-init: image: apache/superset:latest container_name: superset_init environment: - SUPERSET_CONFIG_PATH=/etc/superset/superset_config.py - SQLALCHEMY_DATABASE_URI=${SQLALCHEMY_DATABASE_URI} volumes: - ./superset_config.py:/etc/superset/superset_config.py - ./scripts/init-superset.sh:/init-superset.sh command: ["/bin/bash", "/init-superset.sh"] depends_on: - superset networks: - superset-net networks: superset-net: driver: bridge ``` --- ### ✅ 四、`superset_config.py` 自定义配置 创建 `superset_config.py`: ```python from superset.config import * # === Flask App Builder === SECRET_KEY = 'your-super-secret-key-here' # 替换为 .env 中的值 # === Database URI === SQLALCHEMY_DATABASE_URI = "mysql+pymysql://superset_user:Gapinyc123!@192.168.110.204:3306/superset" # === Celery 配置 === class CeleryConfig: broker_url = 'redis://redis:6379/0' result_backend = 'redis://redis:6379/0' task_acks_late = True task_reject_on_worker_lost = True CELERY_CONFIG = CeleryConfig # === Email(可选,用于告警)=== SMTP_HOST = "smtp.gmail.com" SMTP_STARTTLS = True SMTP_SSL = False SMTP_USER = "your@gmail.com" SMTP_PASSWORD = "app-password" SMTP_PORT = 587 SMTP_MAIL_FROM = "your@gmail.com" # === Feature Flags === FEATURE_FLAGS = { "ENABLE_TEMPLATE_PROCESSING": True, "ALERT_REPORTS": True, } # === Async Query === ENABLE_ASYNC_QUERY = True ASYNC_QUERIES_REDIS_URL = "redis://redis:6379/1" ``` > ⚠️ 注意:`SECRET_KEY` 应和 `.env` 中一致,否则会报错。 --- ### ✅ 五、Nginx 配置 (`nginx/nginx.conf`) ```nginx events { worker_connections 1024; } http { upstream superset { server superset_app:8088; } server { listen 80; server_name localhost; return 301 https://$host$request_uri; } server { listen 443 ssl; server_name localhost; ssl_certificate /etc/nginx/ssl/superset.crt; ssl_certificate_key /etc/nginx/ssl/superset.key; ssl_protocols TLSv1.2 TLSv1.3; ssl_ciphers HIGH:!aNULL:!MD5; location / { proxy_pass http://superset; proxy_set_header Host $host; proxy_set_header X-Real-IP $remote_addr; proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for; proxy_set_header X-Forwarded-Proto $scheme; proxy_redirect off; } location /static { alias /var/lib/superset/static; expires 1y; add_header Cache-Control "public, immutable"; } } } ``` --- ### ✅ 六、生成 SSL 证书(测试用) ```bash mkdir -p nginx/ssl openssl req -x509 -nodes -days 365 -newkey rsa:2048 \ -keyout nginx/ssl/superset.key \ -out nginx/ssl/superset.crt \ -subj "/C=CN/ST=Beijing/L=Beijing/O=Superset/CN=localhost" ``` --- ### ✅ 七、初始化脚本 `scripts/init-superset.sh` ```bash #!/bin/bash echo "Waiting for Superset DB to be ready..." sleep 10 # 初始化数据库 superset db upgrade # 创建管理员用户 fab-cli create-admin \ --username admin \ --firstname Admin \ --lastname User \ --email admin@example.com \ --password admin # 初始化角色权限 superset init echo "✅ Superset 初始化完成!" ``` 赋予执行权限: ```bash chmod +x scripts/init-superset.sh ``` --- ### ✅ 八、添加真实数据源(MySQL) 登录 Superset 后,在 **Settings > Data > Databases** 添加: - Database Name: `My Production MySQL` - SQLAlchemy URI: `mysql+pymysql://superset_user:Gapinyc123!@192.168.110.204:3306/your_db_name` > 替换 `your_db_name` 为你想连接的真实业务数据库。 --- ### ✅ 九、定期备份 MySQL 数据库(脚本) 创建 `scripts/backup-mysql.sh`: ```bash #!/bin/bash DATE=$(date +%Y%m%d_%H%M%S) BACKUP_DIR="/path/to/backup" MYSQL_HOST="192.168.110.204" MYSQL_USER="superset_user" MYSQL_PASSWORD="Gapinyc123!" DATABASE="superset" mkdir -p $BACKUP_DIR mysqldump -h $MYSQL_HOST -u $MYSQL_USER -p$MYSQL_PASSWORD $DATABASE | gzip > "$BACKUP_DIR/superset_backup_$DATE.sql.gz" # 只保留最近7天 find $BACKUP_DIR -name "superset_backup_*.sql.gz" -mtime +7 -delete echo "Backup completed: superset_backup_$DATE.sql.gz" ``` 加入定时任务(crontab): ```bash crontab -e ``` 每天凌晨 2 点备份: ```cron 0 2 * * * /path/to/scripts/backup-mysql.sh ``` --- ### ✅ 十、导出所有仪表盘进行版本控制 手动导出(CLI): ```bash docker exec -it superset_app superset export-all --results ``` 输出文件会包含: - dashboards/ - charts/ - datasets/ 你可以将这些 JSON 文件提交到 Git 进行版本控制。 --- ### ✅ 十一、监控 Redis 和 MySQL 资源 #### 1. Redis 监控 ```bash # 实时查看 Redis 命令 docker exec -it redis redis-cli monitor # 查看内存使用 docker exec -it redis redis-cli info memory ``` #### 2. MySQL 监控 ```sql -- 查看连接数 SHOW STATUS LIKE 'Threads_connected'; -- 查看慢查询 SHOW VARIABLES LIKE 'slow_query_log'; SET GLOBAL slow_query_log = 'ON'; -- 使用 performance_schema 分析 SELECT * FROM information_schema.PROCESSLIST WHERE COMMAND != 'Sleep'; ``` 也可使用 Prometheus + Grafana 监控(进阶)。 --- ### ✅ 启动流程总结 ```bash # 1. 启动所有服务(除初始化) docker-compose up -d superset redis celery nginx # 2. 执行初始化(仅第一次) docker-compose up -d superset-init # 3. 访问 https://localhost 查看 Superset ``` --- ### ✅ 完整功能对照表 | 功能 | 是否实现 | 说明 | |------|----------|------| | 1. Gunicorn 替代 Flask | ✅ | `command: gunicorn ...` | | 2. Nginx + HTTPS | ✅ | 反向代理 + SSL | | 3. Celery + Redis 异步 | ✅ | 支持异步导出、缓存刷新 | | 4. 独立初始化容器 | ✅ | `superset-init` 容器 | | 5. 定期备份 MySQL | ✅ | `backup-mysql.sh + cron` | | 6. 添加真实数据源 | ✅ | 手动或 API 添加 MySQL | | 7. 导出仪表盘版本控制 | ✅ | `superset export-all` | | 8. 监控 Redis/MySQL | ✅ | CLI 工具 + 日志 | --- ### ❗注意事项 - 外部 MySQL 必须允许来自 WSL IP 的连接(检查防火墙和 `bind-address`)。 - WSL2 的 IP 是动态的,可通过 `hostname -I` 获取,确保 MySQL 用户权限允许该 IP 登录。 - 生产环境建议使用 Docker Volume 或外部存储持久化日志和 Redis 数据。 ---
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值