obproxy_process_stop OBProxy 进程停止 - 云平台 OCP V4.3.0 | OceanBase 文档中心

文档反馈

V4.3.0

文档概览
产品简介
部署 OceanBase 云平台
升级 OceanBase 云平台
快速入门
集群管理
租户管理
OBProxy 管理
主机管理
告警中心
监控大盘
性能监控
诊断调优
运维管理
备份恢复
容灾管理
日志服务
软件包管理
系统管理
SQL 调优实践
运维最佳实践
参考指南
- 告警参考
  - 概述
  - OceanBase 告警
    - ob_cannot_connected OB 服务器无法连接
    - ob_cluster_rs_not_same Config server 中 rootserver 信息不正确
    - ob_cluster_status_check_failed OB 集群状态检测失败
    - ob_cluster_exists_inactive_server OB 集群存在不工作 OBServer 节点
    - ob_cluster_exists_index_fail_table OB 集群存在索引失败的表
    - ob_cluster_frozen_version_delta_over_threshold OB 集群冻结版本和基线版本的差值超限
    - ob_cluster_merge_error OceanBase 集群合并出错
    - ob_cluster_merge_timeout OB 集群合并超时
    - ob_cluster_no_frozen OB 集群长时间未冻结
    - ob_cluster_no_merge OB 集群长时间未合并
    - ob_cluster_operation_info OB 集群运维操作提醒
    - ob_cluster_sync_failed 获取 OB 集群信息失败
    - ob_cpu_assigned_percent_over_threshold OB 已经分配给租户的 CPU 占比超限
    - ob_cpu_percent_over_threshold OceanBase 服务器上租户线程平均使用率超限
    - ob_host_connection_percent_over_threshold OB 服务器连接数百分比超限
    - ob_host_disk_readonly OB 服务器磁盘只读
    - ob_host_exists_expired_trans OB 服务器存在悬挂事务
    - ob_host_load1_per_cpu_over_threshold OB 服务器 CPU 平均 load1 超限
    - ob_host_partition_count_over_threshold OceanBase 服务器分区数量超限
    - OB 日志告警
    - ob_mem_assigned_percent_over_threshold OB 已经分配给租户的内存占比超限
    - ob_server_sstable_percent_over_threshold OceanBase 服务器数据盘使用率超限
    - ob_server_exists_long_lived_trans OB 服务器存在长事务
    - ob_tenant_operation_info OB 租户运维操作提醒
    - ob_tenant500_mem_hold_over_threshold OB 500 租户的占用内存大小超限
    - ob_tenant500_mem_hold_percent_over_threshold OB 500 租户内存占用率超限
    - tenant_active_memstore_percent_over_threshold OB 租户活跃内存百分比超限
    - tenant_cpu_percent_over_threshold OceanBase 租户线程使用率超限
    - tenant_memstore_percent_over_threshold OB 租户内存使用百分比超限
    - obproxy_process_dead OBProxy 进程不存在
    - obproxyd_process_dead OBProxy 守护进程不存在
    - obproxy_cannot_connected OBProxy 无法连接
    - ob_cluster_sync_delay_time_too_long 主备集群同步延迟过大告警
    - ob_host_data_disk_percent_over_threshold OB 主机数据目录磁盘使用率超限
    - ob_host_log_disk_percent_over_threshold OB 主机日志目录磁盘使用率超限
    - ob_host_install_disk_percent_over_threshold OB 主机安装目录磁盘使用率超限
    - ob_tenant_exists_expired_xa_trans OB 租户存在 XA 悬挂事务
    - ob_cluster_active_session_count_over_threshold OceanBase 集群活跃会话数超限
    - ob_tenant_active_session_count_over_threshold OceanBase 租户活跃会话数超限
    - ob_host_active_session_count_over_threshold OceanBase 服务器活跃会话数超限
    - ob_tenant_slow_sql_exists OB 租户存在慢 SQL
    - ob_tenant_large_trans_exist OB 租户存在大事务
    - same_alarm_rule_detect_too_many_targets 多个实例触发同一告警规则
    - ob_tenant_expired_trans_exist OB 租户存在悬挂事务
    - ob_tenant_long_trans_exist OceanBase 租户存在长事务
    - ob_tenant_task_timeout OB 租户任务超时
    - ob_host_task_timeout OBServer 任务超时
    - ob_tenant_log_disk_usage_high OB 租户日志磁盘使用率超限
    - ob_tenant_no_compaction OB 租户长时间未合并
    - ob_tenant_no_frozen OB 租户长时间未冻结
    - ob_tenant_compaction_error OB 租户合并出错
    - host_operation 主机运维操作提醒
    - obproxy_host_operation OBProxy 主机运维操作提醒
    - obproxy_cluster_operation OBProxy 运维操作提醒
    - ob_host_operation OB 服务器运维操作提醒
    - Refresh OBServer location cache failed OBServer 刷新 location cache 失败
    - ob_tenant_log_stream_degraded OB 租户存在已降级的日志流
    - arbitration_service_unavailable 仲裁服务不可用
    - observer_process_stop OBServer 进程停止
    - obproxyd_process_stop OBProxy 守护进程停止
    - obproxy_process_stop OBProxy 进程停止
    - standby_tenant_sync_delay_too_long 备租户同步延时过大
    - standby_tenant_sync_status_error 备租户同步状态异常
    - obproxy_client_connections_usage_over_threshold OBProxy 客户端连接使用率超限
    - ob_tenant_request_queue_over_threshold OceanBase 租户请求队列超限
    - oas_anomaly_sql_from_anomaly_event_analysis_cpu_percent_high 主机 CPU 超限根因分析，SQL CPU 占比过高
    - oas_anomaly_sql_from_anomaly_event_analysis_perf_degradation 主机 CPU 超限根因分析，SQL 性能下降
    - oas_anomaly_sql_from_anomaly_event_analysis_plan_changed 主机 CPU 超限根因分析，SQL 计划恶化
    - oas_anomaly_sql_from_sql_inspection_perf_degradation SQL 巡检，SQL 性能下降
    - oas_anomaly_sql_from_sql_inspection_plan_changed SQL 巡检，SQL 执行计划恶化
    - os_observer_not_exist OB server 进程不存在
    - refresh_location_cache_failed_by_metric OBServer 刷新 location cache 失败
    - ob_tenant_cpu_usage_over_threshold OceanBase 租户 CPU 使用率超限
    - ob_tenant_partition_replica_absent OceanBase 租户分区缺副本
    - ob_tenant_partition_leader_absent OceanBase 租户分区无主
    - ob_tenant500_storage_short_meta_mem_hold_high OceanBase 500 租户 STORAGE_SHORT_TERM 模块内存占比过高
    - obproxy_core_dump OBProxy server Core Dump
    - ob_server_cannot_connect_arbitration OceanBase 集群存在无法与仲裁服务通信的节点
    - agent_process_count_abnormal ocp-agent 进程数量异常
  - 应用告警
  - OAS 告警
  - 附录
- API 参考
- 监控指标参考
常见问题
附录
版本发布记录

obproxy_process_stop OBProxy 进程停止

更新时间：2026-04-14 11:55:54

分享

告警描述

监测 OBProxy 进程是否停止。

OCP-Agent 进程监控 OceanBase 相关组件进程的启动时间戳，如果时间戳发生变动就可以认为进程发生停止或重启。这个告警只代表进程停止过，并不能说明进程长时间停止运行。如果进程长时间停止，会有其他状态类告警。

相关进程包括：

observer：告警项为 observer_process_stop
obproxy：告警项为 obproxy_process_stop
obproxyd.sh：告警项为 obproxyd_process_stop
ocp_agentd：告警项为 agentd_process_stop
ocp_mgragent：告警项为 mgragent_process_stop
ocp_monagent：告警项为 monagent_process_stop

告警原理

参数	值
监控指标	obproxy_boot_time_delta_seconds
指标来源	系统的 boot time + 进程距离系统重启的时间差值就是进程的启动时间。其中，系统的 boot time 等于命令 cat /proc/stat 返回结果的 btime 值；进程距离系统重启的时间差值等于命令 cat /proc/pid/stat 返回结果的第 22 列数字除以 100 后的值
采集指标	process_boot_time_seconds
监控表达式	max(delta(process_boot_time_seconds{name="obproxy",@LABELS}[@INTERVAL])) by (@GBLABELS)
采集周期	5 秒

规则信息

监控表达式	监控指标含义	默认阈值	检测周期	消除周期
obproxy_boot_time_delta_seconds > 0	当监控指标大于 0，表示进程停止。	0 秒	30 秒	5 分钟

告警信息

告警触发方式	告警等级	范围
基于监控指标的表达式	停服	OBProxy

告警模板

告警概述
- 模板：${alarm_target} ${alarm_name}
- 样例：alarm_template_id=0:obproxy_cluster=ODPT2-2000005:host=xxx.xxx.xxx.xxx OBProxy 进程停止
告警详情
- 模板：集群：BProxy集群：${obproxy_cluster}，主机：${host}，告警：${alarm_name}。进程已运行时长：${value_shown}。
- 样例：OBProxy集群：ODPT2，主机：xxx.xxx.xxx.xxx，告警：OBProxy 进程停止。进程已运行时长：1 天 15 小时 12 分 51 秒。

对系统的影响

OBProxy 进程停止之后会被守护进程（obproxyd.sh）拉起，但是对业务会有影响。业务连接被断开，业务受损，如 qps下跌。

可能原因

OBProxy 进程内存超过限制
其他意外情况

处理方法

OBProxy 进程停止后，应急方法为尝试拉起进程。一般情况下会被守护进程拉起，如果守护进程意外停止，需要手动拉起守护进程：
```
cd /opt/taobao/install/obproxy-3.4.0 && bin/obproxyd.sh -c start -r /home/admin/logs/obproxy -n ODPT2 -p 2883
```
如果守护进程存在，OBProxy 进程不存在，则手动也可能无法启动 OBProxy 进程，需要排查：
1. configurl-server（OCP 可提供该服务，也可能是其他服务）是否正常；如果OBProxy 启动模式为 configurl，应确保 configurl-server 正常。
2. 捞取 OBProxy 进程的错误日志，捞取 coredump 文件，联系 OceanBase 技术支持人员。

有帮助

无帮助