【BUG】创建 APM 监控时报错

[m84641693]

bk-monitor 版本(The versions used):
3.8.2

发生了什么(What happened):
在创建 APM 场景时报错（监控平台---观测场景---APM---新建应用---设置应用名称以及应用英文名---提交）

期望是什么(What you expected to happen):
能够创建一个 APM 应用

如何复现(How to reproduce it):
按照发现过程，100%复现。

相关的日志详情(访问日志及应用日志)和截图等(Log & Screenshot):
目前不确定需要哪些日志，如有需要将补充。

备注(Anything else we need to know):

[m84641693]

• 问题现象关键片段（文字）： 7c5ef6f7f651010a3491df6193aa3cf5 ： 请求系统'apm_api'错误，返回错误码: 1306201，返回消息: {'result': False, 'code': 1306201, 'data': None, 'message': 'Component request third-party system [MONITOR_V3] interface [create_apm_application] error: Third-party system interface response time exceeds 30 seconds, please try again later or contact component developer to handle this'}，请求URL: /create_apm_application/

[liuwenping]

看着像是es创建索引问题，可以尝试去掉副本数试试

[m84641693]

看着像是es创建索引问题，可以尝试去掉副本数试试

将副本数置 0 还是一样的错误。

[m84641693]

[liuwenping]

看着像是es创建索引问题，可以尝试去掉副本数试试

将副本数置 0 还是一样的错误。

从两次的截图来看(空闲率和索引数)，当前选择的ES正在频繁的创建索引中。较为繁忙
先排查下该ES相关的一些healthz情况，或者尝试更换一个ES再试试

[m84641693]

看着像是es创建索引问题，可以尝试去掉副本数试试

将副本数置 0 还是一样的错误。

从两次的截图来看(空闲率和索引数)，当前选择的ES正在频繁的创建索引中。较为繁忙 先排查下该ES相关的一些healthz情况，或者尝试更换一个ES再试试

1. 更换为蓝鲸自带的 ES 也是相同的报错；
2. 当前使用的这个 ES 状态似乎是好的；
3. 单独调用create_apm_application 接口，貌似也是正常的。

curl -X POST  -H 'X-Bkapi-Authorization: {"bk_app_code": "bk_monitorv3", "bk_app_secret": "a8c9f548-e919-4d16-a3ec-529d8e03a18a", "bk_token": "UpI-0iHFYU26jNLTDV_3Jv7gCoY7LPvfr9k0xJMGy2Q", "bk_username": "admin"}' "http://bkapi.xxxxxx.com:80/api/bk-esb/prod/v2/monitor_v3/apm/create_application/"

{"result": false, "message": "Resource[CreateApplicationSimple] 请求参数格式错误：(app_name) 该字段是必填项。", "data": {}, "detail": "Resource[CreateApplicationSimple] 请求参数格式错误：(app_name) 该字段是必填项。", "code": 500, "request_id": "388600e6eaaf4848a5d6fe92d600b4e6"}%

[m84641693]

使用 apigw 自带的接口测试工具测试create_apm_application 接口：返回接口不存在：

请求网关资源失败，错误消息：HTTPConnectionPool(host='bkapi.xxxxxx.com', port=80): Max retries exceeded with url: /api/bk-esb/prod/v2/monitor_v3/create_apm_application/ (Caused by NewConnectionError('<urllib3.connection.HTTPConnection object at 0x7fe6a7690390>: Failed to establish a new connection: [Errno -2] Name or service not known',))。

[m84641693]

请问一下这个BKAPP_MONITOR_API_BASE_URL值是在哪里配置的？

[m84641693]

使用 apigw 自带的接口测试工具测试create_apm_application 接口：返回接口不存在：

请求网关资源失败，错误消息：HTTPConnectionPool(host='bkapi.xxxxxx.com', port=80): Max retries exceeded with url: /api/bk-esb/prod/v2/monitor_v3/create_apm_application/ (Caused by NewConnectionError('<urllib3.connection.HTTPConnection object at 0x7fe6a7690390>: Failed to establish a new connection: [Errno -2] Name or service not known',))。

我大概分析了一下：
在系统里面请求create_apm_application的url是这个：
/api/bk-esb/prod/v2/monitor_v3/create_apm_application/
而真实的url是/api/bk-esb/prod/v2/monitor_v3/apm/create_application/
所以会导致创建出错。

[liuwenping]

根据页面报错信息，最前面的traceid，从监控的后台日志文件(kernel*.log)找下看。看下步骤到了哪一步

[m84641693]

根据页面报错信息，最前面的traceid，从监控的后台日志文件(kernel*.log)找下看。看下步骤到了哪一步

您好！您指的的 traceid 是这个吗？

按照图中红框中的 id 去检索 kernel.log中的信息，没有找到。

我重新尝试创建了一个，按照上面的方法去找，也没有过滤相关数据。

[liuwenping]

估计没有开启traceid记录，也可以根据页面填写的英文名来grep，搜到任意一条日志后，再根据当前这条日志的进程ID做进一步grep

[liuwenping]

kernel开头的日志文件都要搜索一下，不能只检索kernel.log

[m84641693]

kernel开头的日志文件都要搜索一下，不能只检索kernel.log

搜索到有以下两个以 kernel 开头的日志文件中有相关信息：
13152_kerner_api.log
kernel_metadata.log

[liuwenping]

kernel开头的日志文件都要搜索一下，不能只检索kernel.log

搜索到有以下两个以 kernel 开头的日志文件中有相关信息： 13152_kerner_api.log kernel_metadata.log

根据" 13152 "这个ID，进一步grep下这个文件，得到更多上下文