High IO Delay - queue file write error

[SPINNER IT]

Hallo,
seit unseren monatlichen PMG Updates vor einer Woche beobachten wir einen konstant hohen IO Delay:



Memory und Disk Usage sind unauffällig, Mails wurden verarbeitet.

Heute Mittag wurden sämtliche Mails mit folgender Meldung abgelehnt:

2025-02-12T12:40:22.543210+01:00 mail postfix/smtpd[3766104]: warning: timeout talking to proxy 127.0.0.1:10024
2025-02-12T12:40:22.543390+01:00 mail postfix/smtpd[3766104]: proxy-reject: END-OF-MESSAGE: 451 4.3.0 Error: queue file write error;

Ein Neustart des PMX änderte nichts an der hohen IO Delay, allerdings werden die Mails wieder verarbeitet.

Ist dieses Phänomen bekannt und gibt es eine Lösung?
Was bedeutet diese Fehlermeldung?

Mit freundlichen Grüßen
M.Negele

 

[dakralex]

Hi!

Gibt es um diese Fehlermeldungen (davor und/oder danach) Kontext warum dieser Fehler zustande gekommen ist (z.B. von pmg-smtp-filter, postfix*)?

 

[Stoiko Ivanov]

Auf einen Verdacht hin - ist avast in dem PMG aktiv und wurde auf 4.6.0 upgegraded? siehe:

N

Thread 'pmg-smtp-filter time-outs using Avast 4.6.0'

Feb 4, 2025

We are running PMG for some time now with both ClamAV and Avast to scan incoming mail.
Since the update avast:amd64 (4.5.1-1~debian11, 4.6.0-1~debian11) we've noticed that our mailqueue is increasing fast.
After some time we've noticed multiple errors in our logs:

pmg-smtp-filter[77018]: 12312267A1DD0B6180A: Maximum time (300 sec) exceeded. virus analyze (avast) failed: ERROR at /usr/share/perl5/PMG/Utils.pm line 515.

The avast logs itself are clean.
By disabling avast using pmgsh set /config/admin --avast 0 everything is delivered like it should.

Are there known issues...

• ndonkersloot
• Replies: 23
• Forum: Mail Gateway: Installation and configuration

 

[SPINNER IT]

Hallo Stoiko,
Avast ist tatsächlich installiert und aktiv.
Ich habe das Syslog durchsucht und tatsächlich die oben erwähnte Fehlermeldung gefunden (mehrfach).

Feb 12 12:04:50 mail pmg-smtp-filter[3760098]: 818E667AC7F0390D66: Maximum time (300 sec) exceeded. virus analyze (avast) failed: ERROR at /usr/share/perl5/PMG/Utils.pm line 515.

Vielen Dank für den Hinweis.
Dann wissen wir jetzt, in welcher Richtung wir weiter suchen müssen.

 

[Stoiko Ivanov]

Freut zu lesen! - Solltet ihr was herausfinden (oder vor dem anderen User vom avast support antwort erhalten) - bitte den anderen Thread auch updaten!
(dann sehen das die anderen auch)

Danke!

 

[Foxhole1Commander]

Hallo Stoiko,
Avast ist tatsächlich installiert und aktiv.
Ich habe das Syslog durchsucht und tatsächlich die oben erwähnte Fehlermeldung gefunden (mehrfach).

Feb 12 12:04:50 mail pmg-smtp-filter[3760098]: 818E667AC7F0390D66: Maximum time (300 sec) exceeded. virus analyze (avast) failed: ERROR at /usr/share/perl5/PMG/Utils.pm line 515.

Vielen Dank für den Hinweis.
Dann wissen wir jetzt, in welcher Richtung wir weiter suchen müssen.

Neue Erkenntnisse?

Der Avast-Support scheint auf dem Schlauch zu stehen, was wir nicht akzeptieren werden:



Darf ich fragen, in welcher Konstellation das bei Euch auftaucht? Hypervisor, CPU-Plattform? Vielleicht lässt sich es darüber etwas eingrenzen.

 

[Stoiko Ivanov]

Neue Erkenntnisse?

Der Avast-Support scheint auf dem Schlauch zu stehen, was wir nicht akzeptieren werden:

hab im anderen thread geantwortet https://forum.proxmox.com/threads/pmg-smtp-filter-time-outs-using-avast-4-6-0.161740/page-2

 

[SPINNER IT]

Neue Erkenntnisse?

Der Avast-Support scheint auf dem Schlauch zu stehen, was wir nicht akzeptieren werden:

View attachment 82962

Darf ich fragen, in welcher Konstellation das bei Euch auftaucht? Hypervisor, CPU-Plattform? Vielleicht lässt sich es darüber etwas eingrenzen.

Guten Morgen,
PMG läuf bei uns als virtuelle Maschine (2.Generation) auf einem WS22 Hyper-V Cluster.
Die VM hat 1 CPU und 8GB Ram, Linux 6.8.12-5-pve (Debian).
Auf dem Host werkeln Intel® Xeon® Gold 6346, 16-Core, 3.10 GHz CPU's.

Wir haben noch keinen Avast Downgrade durchgeführt, haben aber ausser dem hohen IO Delay keine Probleme bei der Mailverarbeitung (momentan).
Das oben beschriebene Problem trat bis jetzt nicht mehr auf.

 

[SPINNER IT]

Guten Morgen,
gestern die monatlichen Proxmox Updates gefahren, heute morgen kam ein Avast Update (4.6.1-1~debian12).
Seitdem ist der IO Delay unter 1%.
Das Problem scheint behoben.
Wir werden weiter beobachten.

 

[Foxhole1Commander]

Guten Morgen,

danke für das Feedback. Wir werden es heute mit einem sekundären Host testen.