Ошибка errcode = 2843 и падения сервера

shodaner

Green Team
04.02.2022
114
10
BIT
101
Добрый день

Сваливается периодически сервер баз данных. Сервис пишет failed, последние записи о том, как он kill process
Последняя запись лога домино.сервиса при последнем падении

Aug 12, 2024 3:31:19 PM org.apache.cxf.jaxrs.utils.JAXRSUtils logMessageHandlerProblem
SEVERE: Problem with writing the data, class org.apache.tika.server.core.MetadataList, ContentType: application/json
Aug 12, 2024 3:31:19 PM org.apache.cxf.phase.PhaseInterceptorChain doDefaultLogging
WARNING: Interceptor for { }RecursiveMetadataResource has thrown exception, unwinding now
org.apache.cxf.interceptor.Fault
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.handleWriteException(JAXRSOutInterceptor.java:399)
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.serializeMessage(JAXRSOutInterceptor.java:275)
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.processResponse(JAXRSOutInterceptor.java:122)
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.handleMessage(JAXRSOutInterceptor.java:84)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:307)
at org.apache.cxf.interceptor.OutgoingChainInterceptor.handleMessage(OutgoingChainInterceptor.java:90)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:307)
at org.apache.cxf.transport.ChainInitiationObserver.onMessage(ChainInitiationObserver.java:121)
at org.apache.cxf.transport.http.AbstractHTTPDestination.invoke(AbstractHTTPDestination.java:265)
at org.apache.cxf.transport.http_jetty.JettyHTTPDestination.doService(JettyHTTPDestination.java:247)
at org.apache.cxf.transport.http_jetty.JettyHTTPHandler.handle(JettyHTTPHandler.java:79)
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127)
at org.eclipse.jetty.server.handler.ScopedHandler.nextHandle(ScopedHandler.java:235)
at org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1440)
at org.eclipse.jetty.server.handler.ScopedHandler.nextScope(ScopedHandler.java:190)
at org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1355)
at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:141)
at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:191)
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127)
at org.eclipse.jetty.server.Server.handle(Server.java:516)
at org.eclipse.jetty.server.HttpChannel.lambda$handle$1(HttpChannel.java:487)
at org.eclipse.jetty.server.HttpChannel.dispatch(HttpChannel.java:732)
at org.eclipse.jetty.server.HttpChannel.handle(HttpChannel.java:479)
at org.eclipse.jetty.server.HttpConnection.onFillable(HttpConnection.java:277)
at org.eclipse.jetty.io.AbstractConnection$ReadCallback.succeeded(AbstractConnection.java:311)
at org.eclipse.jetty.io.FillInterest.fillable(FillInterest.java:105)
at org.eclipse.jetty.io.ChannelEndPoint$1.run(ChannelEndPoint.java:104)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.runTask(EatWhatYouKill.java:338)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.doProduce(EatWhatYouKill.java:315)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.tryProduce(EatWhatYouKill.java:173)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.run(EatWhatYouKill.java:131)
at org.eclipse.jetty.util.thread.ReservedThreadExecutor$ReservedThread.run(ReservedThreadExecutor.java:409)
at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:883)
at org.eclipse.jetty.util.thread.QueuedThreadPool$Runner.run(QueuedThreadPool.java:1034)
at java.lang.Thread.run(Thread.java:826)
Caused by: org.eclipse.jetty.io.EofException
at org.eclipse.jetty.io.ChannelEndPoint.flush(ChannelEndPoint.java:280)
at org.eclipse.jetty.io.WriteFlusher.flush(WriteFlusher.java:422)
at org.eclipse.jetty.io.WriteFlusher.completeWrite(WriteFlusher.java:378)
at org.eclipse.jetty.io.ChannelEndPoint$2.run(ChannelEndPoint.java:119)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.runTask(EatWhatYouKill.java:338)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.doProduce(EatWhatYouKill.java:300)
... 6 more
Suppressed: org.eclipse.jetty.io.EofException: Closed
at org.eclipse.jetty.server.HttpOutput.checkWritable(HttpOutput.java:771)
at org.eclipse.jetty.server.HttpOutput.write(HttpOutput.java:795)
at org.apache.cxf.transport.http_jetty.JettyHTTPDestination$JettyOutputStream.write(JettyHTTPDestination.java:322)
at org.apache.cxf.io.AbstractWrappedOutputStream.write(AbstractWrappedOutputStream.java:51)
at sun.nio.cs.StreamEncoder.writeBytes(StreamEncoder.java:221)
at sun.nio.cs.StreamEncoder.implClose(StreamEncoder.java:316)
at sun.nio.cs.StreamEncoder.close(StreamEncoder.java:149)
at java.io_OutputStreamWriter.close(OutputStreamWriter.java:233)
at org.apache.tika.server.core.writer.MetadataListMessageBodyWriter.writeTo(MetadataListMessageBodyWriter.java:62)
at org.apache.tika.server.core.writer.MetadataListMessageBodyWriter.writeTo(MetadataListMessageBodyWriter.java:38)
at org.apache.cxf.jaxrs.utils.JAXRSUtils.writeMessageBody(JAXRSUtils.java:1651)
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.serializeMessage(JAXRSOutInterceptor.java:249)
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.processResponse(JAXRSOutInterceptor.java:122)
at org.apache.cxf.jaxrs.interceptor.JAXRSOutInterceptor.handleMessage(JAXRSOutInterceptor.java:84)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:307)
at org.apache.cxf.interceptor.OutgoingChainInterceptor.handleMessage(OutgoingChainInterceptor.java:90)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:307)
at org.apache.cxf.transport.ChainInitiationObserver.onMessage(ChainInitiationObserver.java:121)
at org.apache.cxf.transport.http.AbstractHTTPDestination.invoke(AbstractHTTPDestination.java:265)
at org.apache.cxf.transport.http_jetty.JettyHTTPDestination.doService(JettyHTTPDestination.java:247)
at org.apache.cxf.transport.http_jetty.JettyHTTPHandler.handle(JettyHTTPHandler.java:79)
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127)
at org.eclipse.jetty.server.handler.ScopedHandler.nextHandle(ScopedHandler.java:235)
at org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1440)
at org.eclipse.jetty.server.handler.ScopedHandler.nextScope(ScopedHandler.java:190)
at org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1355)
at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:141)
at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:191)
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127)
at org.eclipse.jetty.server.Server.handle(Server.java:516)
at org.eclipse.jetty.server.HttpChannel.lambda$handle$1(HttpChannel.java:487)
at org.eclipse.jetty.server.HttpChannel.dispatch(HttpChannel.java:732)
at org.eclipse.jetty.server.HttpChannel.handle(HttpChannel.java:479)
at org.eclipse.jetty.server.HttpConnection.onFillable(HttpConnection.java:277)
at org.eclipse.jetty.io.AbstractConnection$ReadCallback.succeeded(AbstractConnection.java:311)
at org.eclipse.jetty.io.FillInterest.fillable(FillInterest.java:105)
at org.eclipse.jetty.io.ChannelEndPoint$1.run(ChannelEndPoint.java:104)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.runTask(EatWhatYouKill.java:338)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.doProduce(EatWhatYouKill.java:315)
... 6 more
Caused by: java.io.IOException: Connection reset by peer
at sun.nio.ch.FileDispatcherImpl.writev0(Native Method)
at sun.nio.ch.SocketDispatcher.writev(SocketDispatcher.java:51)
at sun.nio.ch.IOUtil.write(IOUtil.java:148)
at sun.nio.ch.SocketChannelImpl.write(SocketChannelImpl.java:503)
at java.nio.channels.SocketChannel.write(SocketChannel.java:502)
at org.eclipse.jetty.io.ChannelEndPoint.flush(ChannelEndPoint.java:274)
... 11 more

Aug 12, 2024 3:31:19 PM org.apache.cxf.phase.PhaseInterceptorChain doDefaultLogging
WARNING: Interceptor for { }RecursiveMetadataResource has thrown exception, unwinding now
org.apache.cxf.interceptor.Fault: XML_WRITE_EXC
at org.apache.cxf.jaxrs.interceptor.JAXRSDefaultFaultOutInterceptor.handleMessage(JAXRSDefaultFaultOutInterceptor.java:106)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:307)
at org.apache.cxf.interceptor.AbstractFaultChainInitiatorObserver.onMessage(AbstractFaultChainInitiatorObserver.java:112)
at org.apache.cxf.phase.PhaseInterceptorChain.wrapExceptionAsFault(PhaseInterceptorChain.java:373)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:331)
at org.apache.cxf.interceptor.OutgoingChainInterceptor.handleMessage(OutgoingChainInterceptor.java:90)
at org.apache.cxf.phase.PhaseInterceptorChain.doIntercept(PhaseInterceptorChain.java:307)
at org.apache.cxf.transport.ChainInitiationObserver.onMessage(ChainInitiationObserver.java:121)
at org.apache.cxf.transport.http.AbstractHTTPDestination.invoke(AbstractHTTPDestination.java:265)
at org.apache.cxf.transport.http_jetty.JettyHTTPDestination.doService(JettyHTTPDestination.java:247)
at org.apache.cxf.transport.http_jetty.JettyHTTPHandler.handle(JettyHTTPHandler.java:79)
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127)
at org.eclipse.jetty.server.handler.ScopedHandler.nextHandle(ScopedHandler.java:235)
at org.eclipse.jetty.server.handler.ContextHandler.doHandle(ContextHandler.java:1440)
at org.eclipse.jetty.server.handler.ScopedHandler.nextScope(ScopedHandler.java:190)
at org.eclipse.jetty.server.handler.ContextHandler.doScope(ContextHandler.java:1355)
at org.eclipse.jetty.server.handler.ScopedHandler.handle(ScopedHandler.java:141)
at org.eclipse.jetty.server.handler.ContextHandlerCollection.handle(ContextHandlerCollection.java:191)
at org.eclipse.jetty.server.handler.HandlerWrapper.handle(HandlerWrapper.java:127)
at org.eclipse.jetty.server.Server.handle(Server.java:516)
at org.eclipse.jetty.server.HttpChannel.lambda$handle$1(HttpChannel.java:487)
at org.eclipse.jetty.server.HttpChannel.dispatch(HttpChannel.java:732)
at org.eclipse.jetty.server.HttpChannel.handle(HttpChannel.java:479)
at org.eclipse.jetty.server.HttpConnection.onFillable(HttpConnection.java:277)
at org.eclipse.jetty.io.AbstractConnection$ReadCallback.succeeded(AbstractConnection.java:311)
at org.eclipse.jetty.io.FillInterest.fillable(FillInterest.java:105)
at org.eclipse.jetty.io.ChannelEndPoint$1.run(ChannelEndPoint.java:104)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.runTask(EatWhatYouKill.java:338)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.doProduce(EatWhatYouKill.java:315)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.tryProduce(EatWhatYouKill.java:173)
at org.eclipse.jetty.util.thread.strategy.EatWhatYouKill.run(EatWhatYouKill.java:131)
at org.eclipse.jetty.util.thread.ReservedThreadExecutor$ReservedThread.run(ReservedThreadExecutor.java:409)
at org.eclipse.jetty.util.thread.QueuedThreadPool.runJob(QueuedThreadPool.java:883)
at org.eclipse.jetty.util.thread.QueuedThreadPool$Runner.run(QueuedThreadPool.java:1034)
at java.lang.Thread.run(Thread.java:826)
Caused by: com.ctc.wstx.exc.WstxIOException: Closed
at com.ctc.wstx.sw.BaseStreamWriter.flush(BaseStreamWriter.java:262)
at org.apache.cxf.jaxrs.interceptor.JAXRSDefaultFaultOutInterceptor.handleMessage(JAXRSDefaultFaultOutInterceptor.java:104)
... 34 more
Caused by: org.eclipse.jetty.io.EofException: Closed
at org.eclipse.jetty.server.HttpOutput.checkWritable(HttpOutput.java:771)
at org.eclipse.jetty.server.HttpOutput.write(HttpOutput.java:795)
at org.apache.cxf.transport.http_jetty.JettyHTTPDestination$JettyOutputStream.write(JettyHTTPDestination.java:322)
at org.apache.cxf.io.AbstractWrappedOutputStream.write(AbstractWrappedOutputStream.java:51)
at com.ctc.wstx.sw.EncodingXmlWriter.flushBuffer(EncodingXmlWriter.java:742)
at com.ctc.wstx.sw.EncodingXmlWriter.flush(EncodingXmlWriter.java:176)
at com.ctc.wstx.sw.BaseStreamWriter.flush(BaseStreamWriter.java:260)
... 35 more

/opt/hcl/domino/bin/server: line 1008: 677890 Killed "${ToRun}" "$@"


Постоянно вижу в logasio файле (вторая строка с кодом может отличаться)
12.08.2024 15:21:28 comp = 11, fnc = 74, probeid = 125, errcode = 2843, extsympt = logger/amqhpie0.c:371
12.08.2024 15:21:28 02810300
12.08.2024 15:21:28 logger/amqhmrp0.c - curExtentsArchive = 64

Очень много подобных семафоров
ti="00453E2C-43258B77" sq="0000D976" THREAD [677906:000010-00007FEC6CD25700] WAITING FOR SEM 0x013A (@00007FEC73ED8F68) (OWNER=677890:00007F4756D27700) FOR 30000 ms

NSD файлов нет, краш не записывает

Может кто знает, что это за ошибка errcode = 2843
Или может подсказать, почему возможно он падает?
 
Последнее редактирование:

NetWood

Lotus Team
17.04.2008
565
96
BIT
174
WIN/LIN? Version? VDS/VPS/Хостинг? Тест памяти и зеркала? Температура на камне? Конденсаторы на маме?
 

shodaner

Green Team
04.02.2022
114
10
BIT
101
Это виртуалка на сфере. Версия линукс rhel8.9. Версия домино 12.0.2fp4. Недавно переустановлен с сохранением каталога notesdata с версии 9fp10. Но на 9-й версии тоже падал постоянно.
 
Последнее редактирование:

savl

Lotus Team
28.10.2011
2 624
314
BIT
516
Самописка какая-то работает на java?
в консоль логирует постоянно?
 

shodaner

Green Team
04.02.2022
114
10
BIT
101
Самописка какая-то работает на java?
в консоль логирует постоянно?
Да полно агентов, часть на джаве, есть драйвера ojdbc8 (хоть и 8 но версия 21 года), jt400, sql драйвер (не факт, что все сейчас используются). Базы тоже собственной разработки. В консоль логирует постоянно, но чего-то подозрительного перед падением не залогировало. Просто обрывается и всё.
 
Последнее редактирование:

garrick

Lotus Team
26.10.2009
1 367
152
BIT
348
Да полно агентов, часть на джаве, есть драйвера ojdbc8 (хоть и 8 но версия 21 года), jt400, sql драйвер (не факт, что все сейчас используются). Базы тоже собственной разработки. В консоль логирует постоянно, но чего-то подозрительного перед падением не залогировало. Просто обрывается и всё.
Файлы драйверов JDBC на жестком диске или приаттачены к агенту? Да и вообще любые JAR файлы.
 

garrick

Lotus Team
26.10.2009
1 367
152
BIT
348
В стектрейсе что-то про CXF и почему-то Jetty. Возможно пытаетесь разобрать или сформировать XML очень большого размера.
 

shodaner

Green Team
04.02.2022
114
10
BIT
101
Как отлетел сервис домино - сообщение из messages
Aug 12 15:31:18 kernel: oom-kill:constraint=CONSTRAINT_NONE,nodemask=(null),cpuset=/,mems_allowed=0,global_oom,task_memcg=/system.slice/domino.service,task=server,pid=677890,uid=1004

Aug 12 15:31:18 kernel: Out of memory: Killed process 677890 (server) total-vm:9546188kB, anon-rss:783660kB, file-rss:0kB, shmem-rss:1735844kB, UID:1004 pgtables:13960kB oom_score_adj:0

Aug 12 15:31:19 systemd[1]: domino.service: Main process exited, code=exited, status=9/n/a

Aug 12 15:36:19 systemd[1]: domino.service: State 'stop-sigterm' timed out. Killing.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 677898 (logasio) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 677906 (event) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678388 (replica) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678390 (replica) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678394 (replica) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678395 (router) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678396 (update) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678397 (update) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678398 (update) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678399 (update) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678400 (amgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678401 (adminp) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678402 (sched) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678405 (calconn) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678406 (rnrmgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678408 (http) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678409 (collect) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678410 (certmgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 678412 (daosmgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679010 (amgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679011 (amgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679012 (amgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679013 (amgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679014 (amgr) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679047 (mtc) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679582 (cldbdir) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679777 (clrepl) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679786 (clrepl) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679787 (clrepl) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679788 (clrepl) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Killing process 679789 (clrepl) with signal SIGKILL.

Aug 12 15:36:19 systemd[1]: domino.service: Failed with result 'exit-code'.
 

garrick

Lotus Team
26.10.2009
1 367
152
BIT
348
Aug 12 15:31:18 kernel: Out of memory:
О! 99% оно самое. Какой-то агент формирует или парсит XML, который не умещается в памяти. И ещё, как мне кажется CXF вообще не нужен в агентах, там есть всё необходимое в самой JVM. Хотя вам с вашей стороны виднее, я тут из далека могу навыдумывать разного.
 

lmike

нет, пердело совершенство
Lotus Team
27.08.2008
7 983
611
BIT
453
чтобы не ронять домину, если задача позволяет, ябы вынес "наружу" как здесь описано
 

shodaner

Green Team
04.02.2022
114
10
BIT
101
Перед падением вылетаем в 100% цпу минут на 20 - 12 Ггц (4 цпу по 3 Ггц). Диск тоже цирфы взлетают - до 1 ГБ/с. РАМ как ни странно на низком уровне. Но на сервак не зайти даже по ссш. Потом линукс похоже киляет процесс. Или сервис сам себя киляет. Но вся эта жесть как-то рандомно, не совпадает вроде ни с одним агентом. То раз в неделю, то уже три дня подряд. Но при этом в разное время.
 
Последнее редактирование:

savl

Lotus Team
28.10.2011
2 624
314
BIT
516
Перед падением вылетаем в 100% цпу минут на 20 - 12 Ггц (4 цпу по 3 Ггц). Диск тоже цирфы взлетают - до 1 ГБ/с. РАМ как ни странно на низком уровне. Но на сервак не зайти даже по ссш. Потом линукс похоже киляет процесс. Или сервис сам себя киляет. Но вся эта жесть как-то рандомно, не совпадает вроде ни с одним агентом. То раз в неделю, то уже три дня подряд. Но при этом в разное время.
мне вот думается там не агент, а веб-сервис, который принимает запросы. Есть такие?
 

shodaner

Green Team
04.02.2022
114
10
BIT
101
мне вот думается там не агент, а веб-сервис, который принимает запросы. Есть такие?
Веб сервисы есть. Один подозреваемый даже был, но проверили - не совпадает по времени. Но в эту сторону надо глубже копнуть.
 

savl

Lotus Team
28.10.2011
2 624
314
BIT
516
Веб сервисы есть. Один подозреваемый даже был, но проверили - не совпадает по времени. Но в эту сторону надо глубже копнуть.
Это может помочь, файлов будет много, но можно попробовать поймать.
Что веб-сервис, что http-агент.

 

garrick

Lotus Team
26.10.2009
1 367
152
BIT
348
Странно через поиск Google по "KB0037403" выводит на эту страницу, а при открытии её по URL ошибка. Опять какие-то санкции?

How to enable HTTP Request Logging in Domino​

updated 12mo ago12 months ago • 834 Views • (*)(*) (*) ( ) ( )

Applies to​

Domino 9.0.x, 10.0.x;HCL Domino 11.0.x and later versions

Question​

How do you enable HTTP request logs on a Domino Web server? You want a record of all requests sent by Web browsers to the Domino server to use for troubleshooting.

Answer​

Below is a short guide to turning on request logging that provides the basic logging level. More verbose logging can be enabled by following the instructions in .

Important: HTTP request logging should be used only for troubleshooting specific issues, usually at the direction of and with assistance from HCL Support. Do not use request logs for other purposes, such as administrative reasons. Because these log files grow in size over time, you should not leave this setting enabled for long periods of time, or you will exhaust the available drive space.

To enable logging of HTTP requests for a Domino server for the current HTTP session only, enter the following command on the server console:

  • "tell HTTP debug thread on"
When you restart the HTTP task, requests are no longer logged. You can also end request logging by entering the following command on the server console:

  • "tell HTTP debug thread off"
To enable request logging for more than one HTTP session, add the following line to the notes.ini file:

  • HTTPEnableThreadDebug=1 (for the default level)
Domino 9 and later servers create htthr*.log files in the IBM_TECHNICAL_SUPPORT directory.

Additional Information:

Be aware that Request Log files grow in size. You should periodically move or delete the files, at least once a day. Refer to for more information. Also, if you restart the server or HTTP task, you should delete or move the existing log files because new ones will be created.
 

savl

Lotus Team
28.10.2011
2 624
314
BIT
516
Проблема в движке форума, который сокращает ссылки, когда она в браузере открывается, то надо & заменить на & и всё заработает.

1723711709895.png
 

garrick

Lotus Team
26.10.2009
1 367
152
BIT
348
Это как в моём смартфоне - пишешь "Дорогие коллеги", а он отправляет "Да идите вы все в ж...."
 
  • Нравится
Реакции: savl

shodaner

Green Team
04.02.2022
114
10
BIT
101
Пока временное решение (или постоянное) - добавили оперативной памяти. Как оказалось 8 гигов в 2024 году для высоко нагруженного сервера баз данных мало :) Выжирало полностью свап и рам (то, что сфера показывала низкий занятый рам - полная фигня). Ща 16, плюс почистили кэш. Ждём повторения события - возможно этого хватит, чтобы его пережить.
 
Мы в соцсетях:

Обучение наступательной кибербезопасности в игровой форме. Начать игру!