Proxmox - mce: [Hardware Error]: Machine check events logged

Hej,

Har precis satt upp en Proxmox VE server och några vm's.
Alla 3 vms ligger och idlar så inte mycket belastning på varken cpu eller disk.
Och lite då och då under dagen får jag följande fel i hosten.

mce: [Hardware Error]: Machine check events logged

Jag märker inte av detta på något sätt.
En utav VM är ipfire som agerar router/brandvägg.
En är pihole och en openmediavault.

Inga utav dessa har några fel som jag märker.
Enda stället detta syns i är proxmox noden.

Jag har provat memtest under 2 dygn utan att hitta några fel där iaf.
rasdaemon visar:
root@xeon:~# ras-mc-ctl --summary
No Memory errors.

No PCIe AER errors.

No Extlog errors.

No MCE errors.

Vad tror ni kan vara fel? Inga HW errors loggade i BIOS heller.
Kan det vara kärnan som bråkar? Kan jag felsöka något mer?
Felmeddelandet känns inte speciellt specifikt.
6.5.13-3-pve

Spec:
Xeon 2697v2
128gb ecc ram
dubbla nätagg.

Total drifttid på servern är några månader endast.

/S

Ja har läst den. Därför jag postade rasdaemon loggen. Inga fel.
Tittar jag i journal så ser jag följande:
Apr 02 18:44:41 xeon pvedaemon[11906]: INFO: Starting Backup of VM 102 (qemu)
Apr 02 18:45:04 xeon kernel: mce_notify_irq: 10 callbacks suppressed
Apr 02 18:45:04 xeon kernel: mce: [Hardware Error]: Machine check events logged
Apr 02 18:45:04 xeon kernel: mce: [Hardware Error]: Machine check events logged
Apr 02 18:45:15 xeon pvedaemon[11906]: INFO: Finished Backup of VM 102 (00:00:34)

Alltså hände detta när jag körde att backupjobb runt den tiden.
Efter det så finns det inget mer.
Ska köra en backup till för att se om jag bringar fram felet igen...

Jo jag läste runt en hel del och jag fick den bilden också. Dock lyckades jag fånga detta nu med rasdaemon

rasdaemon: read
<...>-27034 [000] 0.000652: mce_record: 2024-04-02 19:47:04 +0200 bank=8, status= 8c00004000010090, MEMORY CONTROLLER RD_CHANNEL0_ERR Transaction: Memory read error, mci=Corrected_error, n_errors=1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 21405ada86, addr= 1fc5c98c80, mcgstatus=0, mcgcap= 1000c1d, apicid= 0

<...>-27034 [000] 0.000652: mce_record: 2024-04-02 19:47:04 +0200 bank=d, status= 8800004000800090, MEMORY CONTROLLER RD_CHANNEL0_ERR Transaction: Memory read error Corrected memory read error, mci=Corrected_error, n_errors=1 memory_channel=0 ranks=5 and -1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 5229400040004000, mcgstatus=0, mcgcap= 1000c1d, apicid= 0

<...>-27034 [000] 0.000652: mce_record: 2024-04-02 19:47:05 +0200 bank=8, status= 8c00004000010090, MEMORY CONTROLLER RD_CHANNEL0_ERR Transaction: Memory read error, mci=Corrected_error, n_errors=1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 20406eee86, addr= 2d6b5b680, mcgstatus=0, mcgcap= 1000c1d, apicid= 0

<...>-27034 [000] 0.000652: mce_record: 2024-04-02 19:47:05 +0200 bank=d, status= 8800004000800090, MEMORY CONTROLLER RD_CHANNEL0_ERR Transaction: Memory read error Corrected memory read error, mci=Corrected_error, n_errors=1 memory_channel=0 ranks=5 and -1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 5229400200020000, mcgstatus=0, mcgcap= 1000c1d, apicid= 0

<...>-27034 [000] 0.000657: mce_record: 2024-04-02 19:48:01 +0200 bank=8, status= 8c00004000010090, MEMORY CONTROLLER RD_CHANNEL0_ERR Transaction: Memory read error, mci=Corrected_error, n_errors=1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 2140787886, addr= 25fd1c680, mcgstatus=0, mcgcap= 1000c1d, apicid= 0

<...>-27034 [000] 0.000657: mce_record: 2024-04-02 19:48:01 +0200 bank=d, status= 8800004000800090, MEMORY CONTROLLER RD_CHANNEL0_ERR Transaction: Memory read error Corrected memory read error, mci=Corrected_error, n_errors=1 memory_channel=0 ranks=5 and -1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 5229400100010000, mcgstatus=0, mcgcap= 1000c1d, apicid= 0
y read error Corrected memory read error, mci=Corrected_error, n_errors=1 memory_channel=0 ranks=5 and -1, cpu_type= Ivy Bridge EP/EX, cpu= 0, socketid= 0, misc= 5229400100010000, mcgstatus=0, mcgcap= 1000c1d, apicid= 0

Som jag tolkar detta så är det minnesproblem. Stämmer det?

/S

Ser ut att vara kanal 0 som felar.
Sticka A1 och A2. Jag har en! reservsticka av samma modell.
Ska testa byta ut en och en så får vi se. Annars har jag kompatibla PC3L stickor
så kan jag byta ut alla

Här funkar dem nya minnen fortfarande fint.
Dem gamla där felet visade på 3 möjliga stickor så satte jag dem i en annan server en och en och körde minnestest på alla
först separat sedan alla 3 i med några fler för att få rätt minneskonf.
Inga av minnena visade tecken på fel. Kan helt enkelt vara inkompatibla minnen för moderkortet jag har då.