ssoLogin频繁挂死报Time-out并导致系统宕机

stevenwl

近期X5系统运行期间会突发性报错如下：


翻查此部分开源代码，具体如下：



代码中的"JustepConfig.getBusinessServer()"对应我们系统中的配置为：https://**********:443/BusinessServer （****为本系统域名）

因此整个网络访问URL为：https://**********:443/BusinessServer/login2

以上URL在进行ActionEngine.invokeActions，概率性的发生了访问异常
java.lang.RuntimeException: 连接业务服务器出错, HTTP/1.1 504 Gateway Time-out
之后系统会陷入宕机，无法对外提供任何服务，只能重启解决。

请大侠们帮忙看看，是否是底层在做网络请求的时候，造成了死锁？
BeX5版本为V3.8，license鉴权模式用的本地鉴权，即没有走licenseServer（之前说是有一个lincenseServer的bug）

stevenwl

jishuang 发表于 2023-10-12 16:13
日志中4点40分左右都还在正常操作，报了线程后才可以出行的504

不行就在服务器上安装监控工具，监控一下请 ...

好了，我们先落实跟踪一段时间，后面如果再有宕机情况，再麻烦大侠帮忙一块定位下。
请结帖。

jishuang

看model同级的logs下的日志和tomcat的日志

stevenwl

jishuang 发表于 2023-10-9 19:27
看model同级的logs下的日志和tomcat的日志

帖子中的堆栈就是从model同级logs中摘出来的

tomcat的access日志中是对应的504异常，没有其它有用的信息

stevenwl

jishuang 发表于 2023-10-9 19:27
看model同级的logs下的日志和tomcat的日志

请问login2这个服务的底层，是否会跟license交互，或者里面是否有加锁的代码？

这个异常跟论坛上说明的3.9之前版本license server的bug有没有关联？

jishuang

1.把完整的日志文件发出来
2.没有用license-server就跟license-server无关，这个接口好多客户都再用，登录会去记录在线跟license交互无关

stevenwl

jishuang 发表于 2023-10-10 13:47
1.把完整的日志文件发出来
2.没有用license-server就跟license-server无关，这个接口好多客户都再用，登录 ...

附件已提交

jishuang

tomcat日志中有错误，看日志做了微信集成，一直再做登录？


https://blog.csdn.net/weixin_30617737/article/details/98226939

stevenwl

jishuang 发表于 2023-10-12 11:21
tomcat日志中有错误，看日志做了微信集成，一直再做登录？

是的，我们企业确实做了微信集成，在企业微信可以登录X5系统，但肯定到不了同时在线人数1000这个规模。

jishuang

现在看错误是这个错误，先调整参数看看

stevenwl

jishuang 发表于 2023-10-12 13:54
现在看错误是这个错误，先调整参数看看

我们平时监控线程数，基本都是在100上下。我觉得这个Maximum number of threads 1000 的日志并不是错误原因，而是错误现象。真正的原因应该是4点40分左右，系统某种原因在ssoLogin的地方死锁了，才会有后来所有的请求都在排队等，最终在4点51分请求数超1000，才爆了这么一个日志。

所以说，根因还是在于为什么进程都卡在ssoLogin报错了