[SOLVED] Weboberfläche & Shell nicht mehr erreichbar

Tim1

Member
May 5, 2022
55
0
6
Hallo Zusammen,

Ich hatte vorhin an einer VM die PCI Passthrough geändert um das Audio Geräte nutzen zu können.

Wie folgt:

in der vmid.conf habe ich dies hier eingefügt hostpci0:01:00.0

Da es nicht funktioniert hat, habe ich es entfernt und wollte die VM wieder starten.

Hier kam dieser Fehler:

Fehler (500) & Rohrbruch 565​


Irgendwann bin ich aus der WebGui rausgeflogen und seitdem komme ich auch nicht mehr drauf (Website nicht erreichbar)

Bereits probiert:

Ping, okay
über Putty, Verbindung verweigert
https://ip:8006 Rufe ich auf, nicht erreichbar



Aktuell läuft noch die TS3 VM (Windows), ich habe noch keinen Reboot von proxmox gemacht (bevor noch mehr kaputt geht)

Wie kann ich die aktuellen Probleme lösen?

Vielen Dank vorab
 
Last edited:
Neuer fehler alles was ich per Shell ausführe zb auf /pve-root bringt Input/Output Error
VMs können nicht mehr gestartet werden unable to create file
 
Last edited:
Guck mal mit df -h ob dein root Dateisystem vielleicht voll ist (also ob "mounted on" mit "/" nicht ein "use%" von "100%" hat).
 
Last edited:
Guck mal mit df -h ob dein root Dateisystem vielleicht voll ist (also ob "mounted on" mit "/" nicht ein "use%" von "100%" hat).
Sieht soweit gut aus

root@pve:~# df -h
Filesystem Size Used Avail Use% Mounted on
udev 30G 0 30G 0% /dev
tmpfs 5.9G 1.1M 5.9G 1% /run
/dev/mapper/pve-root 394G 102G 276G 27% /
tmpfs 30G 40M 30G 1% /dev/shm
tmpfs 5.0M 0 5.0M 0% /run/lock
/dev/nvme0n1p2 511M 328K 511M 1% /boot/efi
/dev/fuse 128M 16K 128M 1% /etc/pve
tmpfs 5.9G 0 5.9G 0% /run/user/0

Was mir noch auffällt, wenn ich eine VM Starte, läuft er laut Tasks ewig (evtl. geht das ins leere)?
Habe ich als Ausgabe beim VM Starten erhalten

1651989474429.png

Gleiches wenn ich das hier ausführe:

root@pve:~# pveversion -v
-bash: /usr/bin/pveversion: Input/output error
 
Last edited:
Klingt dann nach kaputter Disk bzw. defektem Dateisystem.
Hast du vielleicht das falsche PCI Gerät durchgereicht oder waren da noch andere Onboard-Geräte mit in der gleichen IOMMU-Gruppe, dass du da z.B. ausversehen den Onboard Storage Controller oder so mit vom Host in die VM durchgereicht hast oder ähnliches, was dir dann die Daten zerschossen haben könnte?
 
Last edited:
Guck mal mit df -h ob dein root Dateisystem vielleicht voll ist (also ob "mounted on" mit "/" nicht ein "use%" von "100%" hat).
Ich hab glaub alles durchgereicht was mit dem einen Befehl ging. Hebt er das nicht wieder auf, als ich das entfernt habe?


Kann man das irgendwie wieder fixen?
 
Ja, aber wenn dir das kurze falsche Passthrough kurzzeitig falsche Hardware entfernt hat, kann dir das trotzdem Daten zerstört haben. Kurz mal im Kopiervorgang das SATA Kabel von der Disk ziehen und wieder ranstecken, ist ja auch nicht gerade gut für die Datenintegrität und kann bleibenden Datenverlust zur Folge haben.

Du könntest mal einen Smart-Selbsttest laufen starten (smartctl -t long /dev/DeineDisk). Der braucht dann ggf. ein paar Stunden und das ergebnis kann man sich dann mit smartctl -a /dev/DeineDisk später angucken.
von PVE ISO booten, in den Rescue Mode gehen und einmal mit fsck das Root-Dateisystem checken lassen kann auch nicht schaden.

Oder ist vielleicht auch nur ein doofer Zufall mit dem PCI Passthrough und die Disk macht einfach nur so plötzlich Probleme.
 
Last edited:
Ja, aber wenn dir das kurze falsche Passthrough kurzzeitig falsche Hardware entfernt hat, kann dir das trotzdem Daten zerstört haben. Kurz mal im Kopiervorgang das SATA Kabel von der Disk ziehen und wieder ranstecken, ist ja auch nicht gerade gut für die Datenintegrität und kann bleibenden Datenverlust zur Folge haben.

Du könntest mal einen Smart-Selbsttest laufen starten (smartctl -t long /dev/DeineDisk). Der braucht dann ggf. ein paar Stunden und das ergebnis kann man sich dann mit smartctl -a /dev/DeineDisk später angucken.
von PVE ISO booten, in den Rescue Mode gehen und einmal mit fsck das Root-Dateisystem checken lassen kann auch nicht schaden.

Oder ist vielleicht auch nur ein doofer Zufall mit dem PCI Passthrough und die Disk macht einfach nur so plötzlich Probleme.
Vielen Dank für die Tipps, der Test läuft gerade durch, mal schauen was er sagt.

Kann es aber auch deswegen sein, weil die SSD mir nicht mehr als GPT angezeigt wird?
 
Last edited:
Ja, aber wenn dir das kurze falsche Passthrough kurzzeitig falsche Hardware entfernt hat, kann dir das trotzdem Daten zerstört haben. Kurz mal im Kopiervorgang das SATA Kabel von der Disk ziehen und wieder ranstecken, ist ja auch nicht gerade gut für die Datenintegrität und kann bleibenden Datenverlust zur Folge haben.

Du könntest mal einen Smart-Selbsttest laufen starten (smartctl -t long /dev/DeineDisk). Der braucht dann ggf. ein paar Stunden und das ergebnis kann man sich dann mit smartctl -a /dev/DeineDisk später angucken.
von PVE ISO booten, in den Rescue Mode gehen und einmal mit fsck das Root-Dateisystem checken lassen kann auch nicht schaden.

Oder ist vielleicht auch nur ein doofer Zufall mit dem PCI Passthrough und die Disk macht einfach nur so plötzlich Probleme.
Anbei die Ergebnisse:
=== START OF INFORMATION SECTION ===
Model Family: Crucial/Micron Client SSDs
Device Model: CT1000MX500SSD1
Serial Number: 2107E4F948C6
LU WWN Device Id: 5 00a075 1e4f948c6
Firmware Version: M3CR033
User Capacity: 1,000,204,886,016 bytes [1.00 TB]
Sector Sizes: 512 bytes logical, 4096 bytes physical
Rotation Rate: Solid State Device
Form Factor: 2.5 inches
TRIM Command: Available
Device is: In smartctl database [for details use: -P show]
ATA Version is: ACS-3 T13/2161-D revision 5
SATA Version is: SATA 3.3, 6.0 Gb/s (current: 6.0 Gb/s)
Local Time is: Sun May 8 16:24:47 2022 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED

General SMART Values:
Offline data collection status: (0x82) Offline data collection activity
was completed without error.
Auto Offline Data Collection: Enabled.
Self-test execution status: ( 0) The previous self-test routine completed
without error or no self-test has ever
been run.
Total time to complete Offline
data collection: ( 0) seconds.
Offline data collection
capabilities: (0x7b) SMART execute Offline immediate.
Auto Offline data collection on/off support.
Suspend Offline collection upon new
command.
Offline surface scan supported.
Self-test supported.
Conveyance Self-test supported.
Selective Self-test supported.
SMART capabilities: (0x0003) Saves SMART data before entering
power-saving mode.
Supports SMART auto save timer.
Error logging capability: (0x01) Error logging supported.
General Purpose Logging supported.
Short self-test routine
recommended polling time: ( 2) minutes.
Extended self-test routine
recommended polling time: ( 30) minutes.
Conveyance self-test routine
recommended polling time: ( 2) minutes.
SCT capabilities: (0x0031) SCT Status supported.
SCT Feature Control supported.
SCT Data Table supported.

SMART Attributes Data Structure revision number: 16
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME FLAG VALUE WORST THRESH TYPE UPDATED WHEN_FAILED RAW_VALUE
1 Raw_Read_Error_Rate 0x002f 100 100 000 Pre-fail Always - 0
5 Reallocate_NAND_Blk_Cnt 0x0032 100 100 010 Old_age Always - 0
9 Power_On_Hours 0x0032 100 100 000 Old_age Always - 23
12 Power_Cycle_Count 0x0032 100 100 000 Old_age Always - 33
171 Program_Fail_Count 0x0032 100 100 000 Old_age Always - 0
172 Erase_Fail_Count 0x0032 100 100 000 Old_age Always - 0
173 Ave_Block-Erase_Count 0x0032 100 100 000 Old_age Always - 1
174 Unexpect_Power_Loss_Ct 0x0032 100 100 000 Old_age Always - 11
180 Unused_Reserve_NAND_Blk 0x0033 000 000 000 Pre-fail Always - 23
183 SATA_Interfac_Downshift 0x0032 100 100 000 Old_age Always - 0
184 Error_Correction_Count 0x0032 100 100 000 Old_age Always - 0
187 Reported_Uncorrect 0x0032 100 100 000 Old_age Always - 0
194 Temperature_Celsius 0x0022 068 038 000 Old_age Always - 32 (Min/Max 0/62)
196 Reallocated_Event_Count 0x0032 100 100 000 Old_age Always - 0
197 Current_Pending_ECC_Cnt 0x0032 100 100 000 Old_age Always - 0
198 Offline_Uncorrectable 0x0030 100 100 000 Old_age Offline - 0
199 UDMA_CRC_Error_Count 0x0032 100 100 000 Old_age Always - 0
202 Percent_Lifetime_Remain 0x0030 100 100 001 Old_age Offline - 0
206 Write_Error_Rate 0x000e 100 100 000 Old_age Always - 0
210 Success_RAIN_Recov_Cnt 0x0032 100 100 000 Old_age Always - 0
246 Total_LBAs_Written 0x0032 100 100 000 Old_age Always - 1189320802
247 Host_Program_Page_Count 0x0032 100 100 000 Old_age Always - 9709728
248 FTL_Program_Page_Count 0x0032 100 100 000 Old_age Always - 3504718

SMART Error Log Version: 1
Warning: ATA error count 0 inconsistent with error log pointer 1

ATA Error Count: 0
CR = Command Register [HEX]
FR = Features Register [HEX]
SC = Sector Count Register [HEX]
SN = Sector Number Register [HEX]
CL = Cylinder Low Register [HEX]
CH = Cylinder High Register [HEX]
DH = Device/Head Register [HEX]
DC = Device Command Register [HEX]
ER = Error register [HEX]
ST = Status register [HEX]
Powered_Up_Time is measured from power on, and printed as
DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes,
SS=sec, and sss=millisec. It "wraps" after 49.710 days.

Error 0 occurred at disk power-on lifetime: 0 hours (0 days + 0 hours)
When the command that caused the error occurred, the device was in an unknown state.

After command completion occurred, registers were:
ER ST SC SN CL CH DH
-- -- -- -- -- -- --
00 ec 00 00 00 00 00

Commands leading to the command that caused the error were:
CR FR SC SN CL CH DH DC Powered_Up_Time Command/Feature_Name
-- -- -- -- -- -- -- -- ---------------- --------------------
ec 00 00 00 00 00 00 00 00:00:00.000 IDENTIFY DEVICE
ec 00 00 00 00 00 00 00 00:00:00.000 IDENTIFY DEVICE
ec 00 00 00 00 00 00 00 00:00:00.000 IDENTIFY DEVICE
ec 00 00 00 00 00 00 00 00:00:00.000 IDENTIFY DEVICE
c8 00 00 00 00 00 00 00 00:00:00.000 READ DMA

SMART Self-test log structure revision number 1
Num Test_Description Status Remaining LifeTime(hours) LBA_of_first_error
# 1 Extended offline Completed without error 00% 23 -

SMART Selective self-test log data structure revision number 1
SPAN MIN_LBA MAX_LBA CURRENT_TEST_STATUS
1 0 0 Not_testing
2 0 0 Not_testing
3 0 0 Not_testing
4 0 0 Not_testing
5 0 0 Not_testing
Selective self-test flags (0x0):
After scanning selected spans, do NOT read-scan remainder of disk.
If Selective self-test is pending on power-up, resume after 0 minute delay.

root@pve:~# smartctl -a /dev/nvme0n1
smartctl 7.2 2020-12-30 r5155 [x86_64-linux-5.15.30-2-pve] (local build)
Copyright (C) 2002-20, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Model Number: Samsung SSD 980 500GB
Serial Number: S64DNF0R626963E
Firmware Version: 1B4QFXO7
PCI Vendor/Subsystem ID: 0x144d
IEEE OUI Identifier: 0x002538
Total NVM Capacity: 500,107,862,016 [500 GB]
Unallocated NVM Capacity: 0
Controller ID: 5
NVMe Version: 1.4
Number of Namespaces: 1
Namespace 1 Size/Capacity: 500,107,862,016 [500 GB]
Namespace 1 Utilization: 440,518,553,600 [440 GB]
Namespace 1 Formatted LBA Size: 512
Namespace 1 IEEE EUI-64: 002538 d611b06953
Local Time is: Sun May 8 16:27:46 2022 CEST
Firmware Updates (0x16): 3 Slots, no Reset required
Optional Admin Commands (0x0017): Security Format Frmw_DL Self_Test
Optional NVM Commands (0x0055): Comp DS_Mngmt Sav/Sel_Feat Timestmp
Log Page Attributes (0x0f): S/H_per_NS Cmd_Eff_Lg Ext_Get_Lg Telmtry_Lg
Maximum Data Transfer Size: 512 Pages
Warning Comp. Temp. Threshold: 82 Celsius
Critical Comp. Temp. Threshold: 85 Celsius
Namespace 1 Features (0x10): NP_Fields

Supported Power States
St Op Max Active Idle RL RT WL WT Ent_Lat Ex_Lat
0 + 5.24W - - 0 0 0 0 0 0
1 + 4.49W - - 1 1 1 1 0 0
2 + 2.19W - - 2 2 2 2 0 500
3 - 0.0500W - - 3 3 3 3 210 1200
4 - 0.0050W - - 4 4 4 4 1000 9000

Supported LBA Sizes (NSID 0x1)
Id Fmt Data Metadt Rel_Perf
0 + 512 0 0

=== START OF SMART DATA SECTION ===
SMART overall-health self-assessment test result: FAILED!
- temperature is above or below threshold

SMART/Health Information (NVMe Log 0x02)
Critical Warning: 0x02
Temperature: 84 Celsius
Available Spare: 100%
Available Spare Threshold: 10%
Percentage Used: 0%
Data Units Read: 1,138,471 [582 GB]
Data Units Written: 2,034,595 [1.04 TB]
Host Read Commands: 1,580,133
Host Write Commands: 1,515,292
Controller Busy Time: 25
Power Cycles: 30
Power On Hours: 5
Unsafe Shutdowns: 14
Media and Data Integrity Errors: 0
Error Information Log Entries: 0
Warning Comp. Temperature Time: 43
Critical Comp. Temperature Time: 0
Temperature Sensor 1: 84 Celsius
Temperature Sensor 2: 43 Celsius
Thermal Temp. 2 Transition Count: 445
Thermal Temp. 2 Total Time: 2068

Error Information (NVMe Log 0x01, 16 of 64 entries)
No Errors Logged

Was mir aufgefallen ist, kurzzeitig war die Proxmox Partition sichbar, jetzt wird sie mir als Disk nicht mehr im Knoten angezeigt

1652020335501.png
 
Ja, aber wenn dir das kurze falsche Passthrough kurzzeitig falsche Hardware entfernt hat, kann dir das trotzdem Daten zerstört haben. Kurz mal im Kopiervorgang das SATA Kabel von der Disk ziehen und wieder ranstecken, ist ja auch nicht gerade gut für die Datenintegrität und kann bleibenden Datenverlust zur Folge haben.

Du könntest mal einen Smart-Selbsttest laufen starten (smartctl -t long /dev/DeineDisk). Der braucht dann ggf. ein paar Stunden und das ergebnis kann man sich dann mit smartctl -a /dev/DeineDisk später angucken.
von PVE ISO booten, in den Rescue Mode gehen und einmal mit fsck das Root-Dateisystem checken lassen kann auch nicht schaden.

Oder ist vielleicht auch nur ein doofer Zufall mit dem PCI Passthrough und die Disk macht einfach nur so plötzlich Probleme.
Ergebnis Rescue Boot:

/dev/mapper/pve-root
e2fsck: is mounted, cannot countinue, aborting
 

About

The Proxmox community has been around for many years and offers help and support for Proxmox VE, Proxmox Backup Server, and Proxmox Mail Gateway.
We think our community is one of the best thanks to people like you!

Get your subscription!

The Proxmox team works very hard to make sure you are running the best software and getting stable updates and security enhancements, as well as quick enterprise support. Tens of thousands of happy customers have a Proxmox subscription. Get yours easily in our online shop.

Buy now!