最近服务总是宕掉，不清楚原因。 - 永洪社区

上传

点击文件名下载附件

作者: 美滋滋 时间: 2022-1-6 10:28
另外，我现在重启了服务器，这个swap已经有空余了，但是服务起不来，提示内存溢出了。但是我明明还是有内存空间的。

作者: _贝贝 时间: 2022-1-6 10:41

笑呵呵发表于 2022-1-6 10:28
另外，我现在重启了服务器，这个swap已经有空余了，但是服务起不来，提示内存溢出了。但是我明明还是有内存 ...

出现内存溢出，服务器内存多大，给BI分配的内存又是多大呢？给bi加大内存看一下

作者: 美滋滋 时间: 2022-1-6 11:06

永洪tech-Muse 发表于 2022-1-6 10:41
出现内存溢出，服务器内存多大，给BI分配的内存又是多大呢？给bi加大内存看一下 ...

我现在服务器内存调整为16G，永洪分配8G，但是服务还是无法正常启动

作者: _贝贝 时间: 2022-1-6 11:14
可以取日志看下吗

作者: 美滋滋 时间: 2022-1-6 11:23

永洪tech-Muse 发表于 2022-1-6 11:14
可以取日志看下吗

我加一下您的微信吧，或者您用我的手机号加一下我微信

作者: _贝贝 时间: 2022-1-6 11:31
本帖最后由永洪tech-Muse 于 2022-1-6 11:32 编辑

笑呵呵发表于 2022-1-6 11:23
我加一下您的微信吧，或者您用我的手机号加一下我微信

您好，日志信息可以发送到咱们永洪技术支持邮箱support@yonghongtech.com，我们将优先解决该邮箱内的问题。

作者: 永洪tech-Lan 时间: 2022-1-6 11:34

笑呵呵发表于 2022-1-6 10:28
另外，我现在重启了服务器，这个swap已经有空余了，但是服务起不来，提示内存溢出了。但是我明明还是有内存 ...

如果是Bi占用的，重启BI后会释放，但是这里说Bi无法重启，请确认当前服务器是否还部署了其它软件服务，参考以下链接查询占用swap分区的进程，直接kill掉后重启。
https://blog.csdn.net/daiyudong2020/article/details/78572306

作者: 美滋滋 时间: 2022-1-6 11:43

永洪tech-Muse 发表于 2022-1-6 11:31
您好，日志信息可以发送到咱们永洪技术支持邮箱support@yonghongtech.com，我们将优先解决该邮箱内的问题 ...

日志信息已邮寄，请查收。如果需要的话，可以远程访问一下我这里。

作者: 美滋滋 时间: 2022-1-6 11:44

永洪tech-Lan 发表于 2022-1-6 11:34
如果是Bi占用的，重启BI后会释放，但是这里说Bi无法重启，请确认当前服务器是否还部署了其它软件服务，参 ...

之前是发现有swap空间用完的问题，目前服务器重新启动后，现在swap已经没有问题了。但是服务还是无法启动，我看日志信息中提示说内存溢出了，但是我目前的环境内存空间应该很足。不会溢出，具体因为什么不清楚，日志信息已邮寄。

作者: _贝贝 时间: 2022-1-6 11:50

笑呵呵发表于 2022-1-6 11:44
之前是发现有swap空间用完的问题，目前服务器重新启动后，现在swap已经没有问题了。但是服务还是无法启动 ...

好的，邮件已收到

作者: 美滋滋 时间: 2022-1-6 13:26

永洪tech-Muse 发表于 2022-1-6 11:50
好的，邮件已收到

请问，您这边大概什么时候能给出个结论呢？

作者: 永洪tech-Lan 时间: 2022-1-6 13:29

笑呵呵发表于 2022-1-6 11:44
之前是发现有swap空间用完的问题，目前服务器重新启动后，现在swap已经没有问题了。但是服务还是无法启动 ...

1、从反馈的日志来看咱们服务器时间不对，目前最新日志时间记录是01月06号 19点的。且bi.log中看Bi在出问题的时候空闲物理内存还有5G左右，而且jvm中内存回收正常没有出现gc，从咱们服务器截图来看，swap都用完了但是服务器和Bi都还有那么多物理内存，怀疑是服务器使用策略有问题，请咱们反馈下服务器的运维人员，检查并调整下 swap 的使用策略，优先用物理内存。
(, 下载次数: 931)

上传

点击文件名下载附件

(, 下载次数: 1033)

上传

点击文件名下载附件

2、至于BI无法启动的问题，从catalina.out中也没有内存溢出oom的记录，从最新记录来看，修改内存为8G后启动了两次，在还未完全启动正在加载BI目录/home/Yonghong/tomcat/webapps/下的文件时就停止了，是咱们强制停掉的？

（1）请咱们查询服务器上Bi进程，确保所有进程都停掉了再启动，当catalina.out中最新启动日志出现如下面第二章截图中 Server startup才算启动完成。
（2）如果按照1操作还是不行，请咱们确定下说的服务无法启动是指启动BI后没有查询到BI进程，还是说能查到Bi进程但是浏览器不能访问？如果是能查到进程但是浏览器不能访问请在服务器上执行命令：curl localhost:8080/bi/Viewer看是否正常。

(, 下载次数: 968)

上传

点击文件名下载附件
(, 下载次数: 996)

上传

点击文件名下载附件

作者: 美滋滋 时间: 2022-1-6 13:35
关于第一个问题，目前已经修改了策略，并且服务器重新启动了。目前物理内存和虚拟内存都有很多空闲可以使用。
关于第二个问题，服务器时间默认是快了8小时，这个应该没有直接影响。之前也是这样，可以启动服务的。现在的问题是执行启动startup.sh后，当时是可以看到相关进程，但是过了一会就自动没了，不知道是什么原因。所以直观的表现就是现在服务无法正常启动了。如果可以的话，您那边可以远程到我这里看一下。另外，目前服务器上并没有别的进程，只有永洪BI。

作者: 美滋滋 时间: 2022-1-6 13:41
奇怪了，上午一直无法正常启动，可就在刚刚，我又重新启动了一次，这次居然正常启动了。。。。。
但是具体为什么上午无法正常启动，还是不清楚具体原因

作者: 美滋滋 时间: 2022-1-6 13:50
不过我刚刚使用了一会，又宕掉了。。。。

作者: 永洪tech-Lan 时间: 2022-1-6 14:17

笑呵呵发表于 2022-1-6 13:50
不过我刚刚使用了一会，又宕掉了。。。。

咱们将附件的jstack和jmap脚本部署后启动下，是自动打印jstack堆栈日志和jmap内存日志，解压后附件中txt为部署文档，部署后观察如果Bi再出现宕机，需要咱们再次取下日志包含jstack_log&jmap_log给i我们一下，可能需要反馈测试研发帮忙跟进看看。

作者: 美滋滋 时间: 2022-1-6 14:33

永洪tech-Lan 发表于 2022-1-6 14:17
咱们将附件的jstack和jmap脚本部署后启动下，是自动打印jstack堆栈日志和jmap内存日志，解压后附件中txt ...

已经按照手顺操作了，如下图
(, 下载次数: 1048)

上传

点击文件名下载附件

作者: 永洪tech-Lan 时间: 2022-1-6 14:57

笑呵呵发表于 2022-1-6 14:33
已经按照手顺操作了，如下图

看截图已经正常生产jmap_log和jstack_log了，咱们再关注下，如果再次宕机，除了上午反馈的日志还需要再给到截至当前时间的，咱们jmap_log和jstack_log也需要一起打包给下。

作者: 美滋滋 时间: 2022-1-6 15:41

永洪tech-Lan 发表于 2022-1-6 14:57
看截图已经正常生产jmap_log和jstack_log了，咱们再关注下，如果再次宕机，除了上午反馈的日志还需要再给 ...

好的，我也确认了一下，新的jmap,jstact对应的文件夹下已经正常生产日志文件了，如果再次宕机，我会一并提供日志信息。这个问题很奇怪。目前服务是正常起来了，还没有宕机，但是总是个隐患，要查明原因

作者: 永洪tech-Lan 时间: 2022-1-6 16:01

笑呵呵发表于 2022-1-6 15:41
好的，我也确认了一下，新的jmap,jstact对应的文件夹下已经正常生产日志文件了，如果再次宕机，我会一并 ...

嗯嗯，出现后再次打包日志反馈到之前的support邮箱即可。

作者: 美滋滋 时间: 2022-1-11 09:49

永洪tech-Lan 发表于 2022-1-6 16:01
嗯嗯，出现后再次打包日志反馈到之前的support邮箱即可。

今天刚刚又发生了宕机，我把日志信息都取了下来，邮件方式发送了，麻烦查收一下，帮忙调查一下具体原因。

作者: 永洪tech-Lan 时间: 2022-1-11 14:19

笑呵呵发表于 2022-1-11 09:49
今天刚刚又发生了宕机，我把日志信息都取了下来，邮件方式发送了，麻烦查收一下，帮忙调查一下具体原因。 ...

当前问题内部相关流程已反馈跟进，后续进展会及时与咱们同步~

作者: 美滋滋 时间: 2022-1-11 16:24

永洪tech-Lan 发表于 2022-1-11 14:19
当前问题内部相关流程已反馈跟进，后续进展会及时与咱们同步~

感谢！！！！

欢迎光临永洪社区 (https://club.yonghongtech.com/)