发布事件到 MySQL
MinIO 支持发布存储桶通知事件到MySQL服务端点。MinIO 支持 MySQL 5.7.8 及更高版本仅.
为 MinIO 部署添加 MySQL 端点
以下过程添加一个新的MySQL服务端点以支持存储桶通知在 MinIO 部署中。
前提条件
MySQL 5.7.8 and later
MinIO 依赖于 MySQL 5.7.8 版本引入的功能。
MinIOmc命令行工具
1) 将 MySQL 端点添加到 MinIO
您可以使用环境变量配置新的 MySQL 服务端点or通过设置运行时配置设置。
MinIO 支持通过以下方式指定 MySQL 服务端点及相关
配置设置环境变量. Theminio server进程将在下次启动时应用指定的设置。
以下示例代码设置全部environment variables 与配置 MySQL 服务端点相关。最低必需variables are:
export MINIO_NOTIFY_MYSQL_ENABLE_<IDENTIFIER>="on"
export MINIO_NOTIFY_MYSQL_DSN_STRING_<IDENTIFIER>="user:password@tcp(hostname:port)/database"
export MINIO_NOTIFY_MYSQL_TABLE_<IDENTIFIER>="minio-events"
export MINIO_NOTIFY_MYSQL_FORMAT_<IDENTIFIER>="namespace|access"
export MINIO_NOTIFY_MYSQL_MAX_OPEN_CONNECTIONS_<IDENTIFIER>="2"
export MINIO_NOTIFY_MYSQL_QUEUE_DIR_<IDENTIFIER>="/opt/minio/events"
export MINIO_NOTIFY_MYSQL_QUEUE_LIMIT_<IDENTIFIER>="100000"
export MINIO_NOTIFY_MYSQL_COMMENT_<IDENTIFIER>="MySQL Event Notification Logging for MinIO"
替换
<IDENTIFIER>使用唯一的描述性字符串作为 MySQL 服务端点。使用相同的<IDENTIFIER>所有与新目标服务端点相关的环境变量的值。 以下示例假设标识符为PRIMARY.如果指定的
<IDENTIFIER>匹配 MinIO 部署上的现有 MySQL 服务 端点,新的设置覆盖该端点的任何现有设置。使用mc admin config get notify_mysql审查 MinIO 部署中当前配置的 MySQL 端点。替换
<ENDPOINT>使用 MySQL 服务端点的 DSN。 MinIO 期望以下格式:<user>:<password>@tcp(<host>:<port>)/<database>例如:
"username:password@tcp(mysql.example.com:3306)/miniodb"
看MySQL Service for Bucket Notifications有关每个环境变量的完整文档。
MinIO 支持在运行中添加或更新 MySQL 端点minio server使用该过程mc admin config set命令
和notify_mysql配置键。您必须重启minio server应用任何新的或更新的配置设置的过程。
以下示例代码设置全部与配置 MySQL 服务端点相关的设置。最低必需设置是:
mc admin config set ALIAS/ notify_mysql:IDENTIFIER \
dsn_string="<ENDPOINT>" \
table="<string>" \
format="<string>" \
max_open_connections="<string>" \
queue_dir="<string>" \
queue_limit="<string>" \
comment="<string>"
替换
IDENTIFIER使用唯一的描述性字符串来标识 MySQL服务端点。本过程中的以下示例 假设标识符为PRIMARY.如果指定的
IDENTIFIER匹配 MinIO 部署上的现有 MySQL 服务 端点,新的设置覆盖该端点的任何现有设置。使用mc admin config get notify_mysql审查 MinIO 部署中当前配置的 MySQL 端点。替换
<ENDPOINT>使用 MySQL 服务端点的 DSN。 MinIO 期望以下格式:<user>:<password>@tcp(<host>:<port>)/<database>例如:
"username:password@tcp(mysql.example.com:3306)/miniodb"
看MySQL Bucket 通知配置设置有关每个设置的完整文档。
1) 重启 MinIO 部署
您必须重启 MinIO 部署以使配置更改生效。
使用mc admin service restart重启部署的命令。
mc admin service restart ALIAS
替换ALIAS随着别名部署的重新启动。
Theminio server进程在启动时会为每个配置的 MySQL 目标打印一行信息,类似以下内容:
SQS ARNs: arn:minio:sqs::primary:mysql
在使用关联的 MySQL 部署作为目标配置存储桶通知时,必须指定 ARN 资源。
识别您的存储桶通知的ARN
你定义了<IDENTIFIER>在先前创建端点时分配给您的存储桶通知的目标ARN。
以下步骤返回在部署上配置的ARN。
通过查找先前创建的ARN来识别它。<IDENTIFIER>您指定的。
审查 JSON 输出
复制并运行以下命令,将
ALIAS随着别名部署的。mc admin info --json ALIAS
在 JSON 输出中,查找键
info.sqsARN.您需要的ARN是与该键匹配的值
<IDENTIFIER>您指定的。例如,
arn:minio:sqs::primary:mysql.
使用 jq 解析 JSON 获取值
3) 使用 MySQL 端点作为目标配置存储桶通知
使用mc event add添加新存储桶通知事件的命令,将已配置的 MySQL 服务设为目标:
mc event add ALIAS/BUCKET arn:minio:sqs::primary:mysql \
--event EVENTS
使用mc event ls要查看为给定通知目标配置的所有存储桶事件:
mc event ls ALIAS/BUCKET arn:minio:sqs::primary:mysql
4) 验证已配置的事件
对配置了新事件的存储桶执行操作,并
检查MySQL服务中的通知数据。所需操作
取决于您配置的events在配置存储桶通知时已指定。
例如,如果存储桶通知配置包含s3:ObjectCreated:Put事件,您可以使用mc cp在存储桶中创建新对象并触发通知的命令。
mc cp ~/data/new-object.txt ALIAS/BUCKET
更新 MinIO 部署中的 MySQL 端点
以下过程更新现有的 MySQL 服务端点以提供支持存储桶通知在 MinIO 部署中。
前提条件
MySQL 5.7.8 and later
MinIO 依赖于 MySQL 5.7.8 版本引入的功能。
MinIOmc命令行工具
1) 列出部署中已配置的 MySQL 端点
使用mc admin config get列出部署中当前配置的 MySQL 服务端点的命令:
mc admin config get ALIAS/ notify_mysql
替换ALIAS随着别名MinIO 部署的。
命令输出类似于以下内容:
notify_mysql:primary format="namespace" table="minio_images" dsn_string="user:pass@tcp(mysql.example.com:3306)/miniodb"
notify_mysql:secondary format="namespace" table="minio_images" dsn_string="user:pass@tcp(mysql.example.com:3306)/miniodb"
Thenotify_mysqlkey 是用于配置MySQL 通知设置. Thedsn_stringkey 指定给定服务的 MySQL 端点notify_mysqlkey. Thenotify_mysql:<IDENTIFIER>suffix 描述了该 MySQL 服务端点的唯一标识符。
记下您要为下一步更新的 MySQL 服务端点的标识符。
2) 更新 MySQL 端点
使用mc admin config set设置 MySQL 服务端点新配置的命令:
mc admin config set ALIAS/ notify_mysql:IDENTIFIER \
dsn_string="<ENDPOINT>" \
table="<string>" \
format="<string>" \
max_open_connections="<string>" \
queue_dir="<string>" \
queue_limit="<string>" \
comment="<string>"
以下配置设置是最低要求对于 MySQL 服务端点:
所有其他配置设置都是可选的. 查看MySQL 通知设置有关 MySQL 配置设置的完整列表,请参阅
3) 重启 MinIO 部署
您必须重启 MinIO 部署以使配置更改生效。
使用mc admin service restart重启部署的命令。
mc admin service restart ALIAS
替换ALIAS随着别名部署的重新启动。
Theminio server进程在启动时会为每个配置的 MySQL 目标打印一行信息,类似以下内容:
SQS ARNs: arn:minio:sqs::primary:mysql
4) 验证更改
对配置了事件通知的存储桶执行操作,使用更新后的MySQL服务端点,并在MySQL服务中检查通知数据。所需操作取决于events在配置存储桶通知时已指定。
例如,如果存储桶通知配置包含s3:ObjectCreated:Put事件,您可以使用mc cp在存储桶中创建新对象并触发通知的命令。
mc cp ~/data/new-object.txt ALIAS/BUCKET