zabbix api与php的配置

本文涉及的产品
云数据库 Redis 版,社区版 2GB
推荐场景:
搭建游戏排行榜
简介:
 因为最近线上的hadoop集群从mrv1升级到mrv2了,监控模板也跟着变动了。。
线上是200台左右的集群,模块采用了link的方式来添加,即一个模板下link大量的模块,然后主机添加到这个模板里。

wKioL1No9wXgRhWjAAGCDva4ZDY163.jpg

这样算下来一台机器差不多有 215个item.

为了增加NM的监控,也采用了link的方式来连接模板,在页面上link时发现一直返回一个空白页。
为了快速上线,改变了下方法,使用了host.update的api,直接把host link到NM的模板。

回过头来看这个问题:
在通过页面link模板时,其实也是调用了zabbix template相关的api(具体调用了template.update方法)
直接通过脚本来调用api测试:
测试脚本:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
18
19
20
21
22
23
24
25
26
27
28
29
30
31
32
33
34
35
36
37
38
39
40
41
42
43
44
45
46
47
48
49
50
51
52
53
54
55
56
57
58
59
60
61
62
63
64
65
66
67
68
69
70
71
72
73
74
#!/usr/bin/env python
import  urllib2
import  sys
import  json
def  requestJason(url,values):
     data  =  json.dumps(values)
     print  data
     req  =  urllib2.Request(url, data, { 'Content-Type' 'application/json-rpc' })
     response  =  urllib2.urlopen(req, data)
     data_get  =  response.read()
     output  =  json.loads(data_get)
     print  output
     try :
         message  =  output[ 'result' ]
     except :
         message  =  output[ 'error' ][ 'data' ]
         quit()
     print  json.dumps(message) 
     return  output
def  authenticate(url, username, password):
     values  =  { 'jsonrpc' '2.0' ,
               'method' 'user.login' ,
               'params' : {
                   'user' : username,
                   'password' : password
               },
               'id' '0'
               }
     idvalue  =  requestJason(url,values)
     return  idvalue[ 'result' ]
def  getTemplate(hostname,url,auth):
     values  =  { 'jsonrpc' '2.0' ,
               'method' 'template.get' ,
               'params' : {
                   'output' "extend" ,
                   'filter' : {
                       'host' : hostname
                   }
               },
               'auth' : auth,
               'id' '2'
               }
     output  =  requestJason(url,values)
     print  output[ 'result' ][ 0 ][ 'hostid' ]
     return   output[ 'result' ][ 0 ][ 'hostid' ]
def  changeTemplate(idx,id_list,url,auth):
     values  =  { 'jsonrpc' '2.0' ,
               'method' 'template.update' ,
               'params' : {
                 "templateid" :idx,           
                 "templates" :id_list
               },
               'auth' : auth,
               'id' '2'
               }
     output  =  requestJason(url,values)
     print  output
def  main():
     id_list  =  []
     hostname  =  "Vipshop_Template_OS_Linux_Hadoop_Datanode_Pro"
     url  =  'xxxx'
     username  =  'admin'
     password  =  'xxxx'
     auth  =  authenticate(url, username, password)
     idx  =  getTemplate(hostname,url,auth)
     temlist  =  [ 'Vipshop_Template_LB_Tengine_8090' , 'Vipshop_Template_Redis_6379' , 'Vipshop_Template_Redis_6380' , 'Vipshop_Template_Redis_6381' , 'Vipshop_Template_Redis_6382' , 'Vipshop_Template_Redis_6383' ]
     for  tem  in  temlist:
         idtemp  =  getTemplate(tem,url,auth)
         id_list.append({ "templateid" :idtemp})
     print  id_list
     #id_list = [{"templateid":'10843'},{"templateid":"10554"},{"templateid":"10467"},{"templateid":"10560"},{"templateid":"10566"},{"templateid":"10105"}]
     changeTemplate(idx,id_list,url,auth)
if  __name__  = =  '__main__' :
     main()
脚本结果:
urllib2.HTTPError: HTTP Error 500: Internal Server Error
因为api其实是发送了一个jason格式的post请求,手动使用curl来验证:
1
2
3
4
curl  -vvv -i -X POST -H  'Content-Type:application/json'  -d
'{ "params" : { "templates" : [{ "templateid" "10117" }, { "templateid" "10132" }, { "templateid" "10133" }, { "templateid" "10134" },
{ "templateid" "10135" }, { "templateid" "10136" }],  "templateid" "10464" },  "jsonrpc" "2.0" "method" "template.update" "auth" "421a04b400e859834357b5681a586a5f" "id" "2" }'
http: //zabbix .idc.vipshop.com /api_jsonrpc .php
返回500错误(即后端php处理时遇到错误导致),调整php的配置,把日志改成debug格式:
1
2
php-fpm.conf:
log_level = debug
在error log中发现如下错误:
1
2
3
4
5
6
7
8
[04-May-2014 14:04:32.115189] WARNING: pid 6270, fpm_request_check_timed_out(), line 271: [pool www] child 6294, script  '/apps/svr/zabbix/wwwroot/api_jsonrpc.php'  (request:  "POST /api_jsonrpc.php" ) executing too slow (1.269946 sec), logging
[04-May-2014 14:04:32.115327] DEBUG: pid 6270, fpm_got_signal(), line 72: received SIGCHLD
[04-May-2014 14:04:32.115371] NOTICE: pid 6270, fpm_children_bury(), line 227: child 6294 stopped  for  tracing
[04-May-2014 14:04:32.115385] NOTICE: pid 6270, fpm_php_trace(), line 142: about to trace 6294
[04-May-2014 14:04:32.115835] NOTICE: pid 6270, fpm_php_trace(), line 170: finished trace of 6294
[04-May-2014 14:04:32.115874] DEBUG: pid 6270, fpm_event_loop(), line 409: event module triggered 1 events
[04-May-2014 14:04:35.318614] WARNING: pid 6270, fpm_stdio_child_said(), line 166: [pool www] child 6294 said into stderr:  "NOTICE: sapi_cgi_log_message(), line 663: PHP message: PHP Fatal error:  Allowed memory size of 134217728 bytes exhausted (tried to allocate 512 bytes) in /apps/svr/zabbix/wwwroot/api/classes/CItem.php on line 1088"
[04-May-2014 14:04:35.318665] DEBUG: pid 6270, fpm_event_loop(), line 409: event module triggered 1 events
即在做link模板时,需要把相关的数据放在php的内存中,而默认的设置是128M,如果在item和host比较多的时候,很容易就会超过这个限制。
更改为
1
memory_limit = 1280M
重新测试,返回了502 Bad Gateway错误,即后端执行超时导致。
error log:
1
[04-May-2014 14:50:21.318071] WARNING: pid 4131, fpm_request_check_timed_out(), line 281: [pool www] child 4147, script  '/apps/svr/zabbix/wwwroot/api_jsonrpc.php'  (request:  "POST /api_jsonrpc.php" ) execution timed out (10.030883 sec), terminating
执行时间超过request_terminate_timeout 设置。导致502产生。
更改 request_terminate_timeout = 1800(默认是10s),max_execution_time = 0(默认30s),重新测试。ok.

小结:
zabbix不同于一般的线上应用,在调用api做更新时,是一个batch的行为,对内存和执行时间有一定的要求。
因此要合理的设置php的相关参数,在debug的时候调低日志级别并开启slow log来方便定位问题.



本文转自菜菜光 51CTO博客,原文链接:http://blog.51cto.com/caiguangguang/1407422,如需转载请自行联系原作者
相关实践学习
基于Redis实现在线游戏积分排行榜
本场景将介绍如何基于Redis数据库实现在线游戏中的游戏玩家积分排行榜功能。
云数据库 Redis 版使用教程
云数据库Redis版是兼容Redis协议标准的、提供持久化的内存数据库服务,基于高可靠双机热备架构及可无缝扩展的集群架构,满足高读写性能场景及容量需弹性变配的业务需求。 产品详情:https://www.aliyun.com/product/kvstore     ------------------------------------------------------------------------- 阿里云数据库体验:数据库上云实战 开发者云会免费提供一台带自建MySQL的源数据库 ECS 实例和一台目标数据库 RDS实例。跟着指引,您可以一步步实现将ECS自建数据库迁移到目标数据库RDS。 点击下方链接,领取免费ECS&RDS资源,30分钟完成数据库上云实战!https://developer.aliyun.com/adc/scenario/51eefbd1894e42f6bb9acacadd3f9121?spm=a2c6h.13788135.J_3257954370.9.4ba85f24utseFl
相关文章
|
8天前
|
监控 关系型数据库 Linux
|
2月前
|
关系型数据库 MySQL API
|
4月前
|
PHP
windows11 vscode 配置 php环境
windows11 vscode 配置 php环境
33 0
|
5月前
|
PHP Apache
PHP环境搭建(配置php模块到apache服务器)
PHP环境搭建(配置php模块到apache服务器)
53 0
|
8天前
|
消息中间件 缓存 Java
Kafka Consumer java api 配置
Kafka Consumer java api 配置
|
2月前
|
安全 Linux 测试技术
PHP环境配置和验证
PHP环境配置和验证
18 0
|
2月前
|
供应链 数据挖掘 API
和 SAP 系统单点登录 MYSAPSSO2 相关的一些配置和 API
和 SAP 系统单点登录 MYSAPSSO2 相关的一些配置和 API
20 0
|
3月前
|
监控 前端开发 应用服务中间件
Zabbix【部署 01】Zabbix企业级分布式监控系统部署配置使用实例(在线安装及问题处理)程序安装+数据库初始+前端配置+服务启动+Web登录
Zabbix【部署 01】Zabbix企业级分布式监控系统部署配置使用实例(在线安装及问题处理)程序安装+数据库初始+前端配置+服务启动+Web登录
177 0
|
3月前
|
Java API
SpringBoot【集成ElasticSearch 01】2种方式的高级客户端 RestHighLevelClient 使用(依赖+配置+客户端API测试源码)
SpringBoot【集成ElasticSearch 01】2种方式的高级客户端 RestHighLevelClient 使用(依赖+配置+客户端API测试源码)
50 0

相关产品

  • 云迁移中心
  • 推荐镜像

    更多