Probleme de sauvegardes proxmox

bonjour,

je viens de m’apercevoir que je n’ai plus de sauvegardes de mes VM depuis une semaine.

j’ai le log ci joint mais je ne trouve pas ce que ca signifie et encore moins pourquoi du coup …

log proxmox.txt (4,3 Ko)

pouvez vous m’en dire plus ?

seb

Tu as assez de place dans le disque de destination ?

L’erreur : job failed with err -5 - Input/output error

Ou une instabilité réseau ?

Un pb de droit d’accès au répertoire de sauvegarde?

ben j’arrive bien a lire son contenu depuis proxmox et je n’ai pas de soucis affiché …

comment vérifier les droits ?
me rappelle plus, cette install doit dater de 2 ans …

oupsn msg loupé

oui, il y a de la place

instabilité a chaque tentative de sauvegarde, tous les jours a n’importe quelle heure ? ca me parait bizarre d’autant que je n’ai rien d’autre qui me signale ca …

et pas de quota?

pas sur le NAS

sur proxmox, je limite a 5 jours, ca marchait bien. Si je lance une sauvegarde manuellement, il me signale qu’il faut en enlever une pour mettre la nouvelle, ce que j’ai fais par le passé puis hop, ca sauvegarde …

Comme indiqué par d’autres ça ressemble pourtant bien à un problème d’espace car il bloque environ sur la même quantité de données pour les 2 VM.

Si tu as bien assez d’espace disque as-tu tenté un reboot des 2 matériels : NAS + machine Proxmox.

il ne bloque pas toujours au même moment, sur la VM101, il bloque à 7% ou va jusqu’à 43% (dernier record)
ci joint image du disque NAS qui est le NAS depuis proxmox :


depuis l’interface du NAS :

j’ai rebooté proxmox et MAJ, idem pour le NAS

par contre, je viens de voir que mon fils en voulant redémarrer la box dimanche dernier a couper le courant a tout ce petit monde (NUC, Routeur, Box et NAS). Le lundi matin, la sauvegarde ne fonctionnait plus …

Comment est paramétré ton backup au niveau Proxmox (snapshot, suspend, stop) ?
As-tu essayé de lancer la commande de backup en direct (Backup now) et VM arrêtée ?

config

j’ai déjà essayé sur une VM non démarrée et même problème.

idem en arrêtant celle de prod …

ça se gâte !

Essaye peut-être de lancer un self test sur ton disque : smartctl -t short /dev/sda
Puis au bout du délais annoncé regarder les erreurs : smartctl -l selftest /dev/sda

je suis d’accord !! lol

euh, ok, je tape ces commandes où ? console des VM ? noeud ? hyperviseur ?

ssh sur la machine de Proxmox

??

Il n’arrive pas à aller au bout de l’auto-test.

smartctl --all /dev/sda

root@nucvm:~# smartctl --all /dev/sda
smartctl 7.1 2019-12-30 r5022 [x86_64-linux-5.4.34-1-pve] (local build)
Copyright (C) 2002-19, Bruce Allen, Christian Franke, www.smartmontools.org

=== START OF INFORMATION SECTION ===
Device Model:     SATA3 120GB SSD
Serial Number:    2020102400707
Firmware Version: S1127B0
User Capacity:    120,034,123,776 bytes [120 GB]
Sector Size:      512 bytes logical/physical
Rotation Rate:    Solid State Device
Form Factor:      2.5 inches
Device is:        Not in smartctl database [for details use: -P showall]
ATA Version is:   ACS-2 T13/2015-D revision 3
SATA Version is:  SATA 3.2, 6.0 Gb/s (current: 3.0 Gb/s)
Local Time is:    Sun Oct  3 13:24:40 2021 CEST
SMART support is: Available - device has SMART capability.
SMART support is: Enabled

=== START OF READ SMART DATA SECTION ===
SMART overall-health self-assessment test result: PASSED

General SMART Values:
Offline data collection status:  (0x00) Offline data collection activity
                                        was never started.
                                        Auto Offline Data Collection: Disabled.
Self-test execution status:      (  41) The self-test routine was interrupted
                                        by the host with a hard or soft reset.
Total time to complete Offline
data collection:                (  120) seconds.
Offline data collection
capabilities:                    (0x11) SMART execute Offline immediate.
                                        No Auto Offline data collection support.
                                        Suspend Offline collection upon new
                                        command.
                                        No Offline surface scan supported.
                                        Self-test supported.
                                        No Conveyance Self-test supported.
                                        No Selective Self-test supported.
SMART capabilities:            (0x0002) Does not save SMART data before
                                        entering power-saving mode.
                                        Supports SMART auto save timer.
Error logging capability:        (0x01) Error logging supported.
                                        General Purpose Logging supported.
Short self-test routine
recommended polling time:        (   2) minutes.
Extended self-test routine
recommended polling time:        (  10) minutes.

SMART Attributes Data Structure revision number: 1
Vendor Specific SMART Attributes with Thresholds:
ID# ATTRIBUTE_NAME          FLAG     VALUE WORST THRESH TYPE      UPDATED  WHEN_ FAILED RAW_VALUE
  1 Raw_Read_Error_Rate     0x0032   100   100   050    Old_age   Always       -        0
  5 Reallocated_Sector_Ct   0x0032   100   100   050    Old_age   Always       -        11
  9 Power_On_Hours          0x0032   100   100   050    Old_age   Always       -        7505
 12 Power_Cycle_Count       0x0032   100   100   050    Old_age   Always       -        31
160 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        100
161 Unknown_Attribute       0x0033   100   100   050    Pre-fail  Always       -        87
163 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        1
164 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        585781
165 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        2558
166 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        288
167 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        465
168 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        5050
169 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        91
175 Program_Fail_Count_Chip 0x0032   100   100   050    Old_age   Always       -        0
176 Erase_Fail_Count_Chip   0x0032   100   100   050    Old_age   Always       -        0
177 Wear_Leveling_Count     0x0032   100   100   050    Old_age   Always       -        0
178 Used_Rsvd_Blk_Cnt_Chip  0x0032   100   100   050    Old_age   Always       -        11
181 Program_Fail_Cnt_Total  0x0032   100   100   050    Old_age   Always       -        0
182 Erase_Fail_Count_Total  0x0032   100   100   050    Old_age   Always       -        0
192 Power-Off_Retract_Count 0x0032   100   100   050    Old_age   Always       -        9
194 Temperature_Celsius     0x0022   100   100   050    Old_age   Always       -        40
195 Hardware_ECC_Recovered  0x0032   100   100   050    Old_age   Always       -        0
196 Reallocated_Event_Count 0x0032   100   100   050    Old_age   Always       -        100
197 Current_Pending_Sector  0x0032   100   100   050    Old_age   Always       -        11
198 Offline_Uncorrectable   0x0032   100   100   050    Old_age   Always       -        100
199 UDMA_CRC_Error_Count    0x0032   100   100   050    Old_age   Always       -        0
232 Available_Reservd_Space 0x0032   100   100   050    Old_age   Always       -        87
241 Total_LBAs_Written      0x0030   100   100   050    Old_age   Offline      -        372586
242 Total_LBAs_Read         0x0030   100   100   050    Old_age   Offline      -        591523
245 Unknown_Attribute       0x0032   100   100   050    Old_age   Always       -        392914

SMART Error Log Version: 1
Warning: ATA error count 0 inconsistent with error log pointer 2

ATA Error Count: 0
        CR = Command Register [HEX]
        FR = Features Register [HEX]
        SC = Sector Count Register [HEX]
        SN = Sector Number Register [HEX]
        CL = Cylinder Low Register [HEX]
        CH = Cylinder High Register [HEX]
        DH = Device/Head Register [HEX]
        DC = Device Command Register [HEX]
        ER = Error register [HEX]
        ST = Status register [HEX]
Powered_Up_Time is measured from power on, and printed as
DDd+hh:mm:SS.sss where DD=days, hh=hours, mm=minutes,
SS=sec, and sss=millisec. It "wraps" after 49.710 days.

Error 0 occurred at disk power-on lifetime: 0 hours (0 days + 0 hours)
  When the command that caused the error occurred, the device was active or idle .

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  04 51 00 00 00 00 00

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  e5 00 00 00 00 00 00 08      00:00:00.000  CHECK POWER MODE
  b0 da 00 00 4f c2 00 08      00:00:00.000  SMART RETURN STATUS
  b0 d0 01 00 4f c2 00 08      00:00:00.000  SMART READ DATA
  b0 d5 01 06 4f c2 00 08      00:00:00.000  SMART READ LOG
  b0 d5 01 01 4f c2 00 08      00:00:00.000  SMART READ LOG

Error -4 occurred at disk power-on lifetime: 0 hours (0 days + 0 hours)
  When the command that caused the error occurred, the device was active or idle .

  After command completion occurred, registers were:
  ER ST SC SN CL CH DH
  -- -- -- -- -- -- --
  04 51 00 00 00 00 00  Error: ABRT

  Commands leading to the command that caused the error were:
  CR FR SC SN CL CH DH DC   Powered_Up_Time  Command/Feature_Name
  -- -- -- -- -- -- -- --  ----------------  --------------------
  b0 d0 01 00 4f c2 00 08      00:00:00.000  SMART READ DATA
  b0 d1 01 01 4f c2 00 08      00:00:00.000  SMART READ ATTRIBUTE THRESHOLDS [OB S-4]
  b0 da 00 00 4f c2 00 08      00:00:00.000  SMART RETURN STATUS
  b0 d5 01 00 4f c2 00 08      00:00:00.000  SMART READ LOG
  b0 d5 01 01 4f c2 00 08      00:00:00.000  SMART READ LOG

SMART Self-test log structure revision number 1
Num  Test_Description    Status                  Remaining  LifeTime(hours)  LBA _of_first_error
# 1  Short offline       Interrupted (host reset)      90%      7504         -
# 2  Short offline       Interrupted (host reset)      90%      7504         -

Selective Self-tests/Logging not supported

root@nucvm:~#

Bon donc à priori le disque a des erreurs, pour moi c’est surement pour ça que l’opération de sauvegarde ne vas pas au bout.

Je pense qu’il faudrait tenter une opération de réparation lors du boot mais clairement j’aime pas trop ces trucs, c’est toujours un peu flippant.

Bref une page avec le process : How to Use ‹ fsck › to Repair File System Errors in Linux (tecmint.com)

à toi de voir évidemment je décline toute responsabilité …

Tu peux aussi attendre des avis différents mais la coupure de courant n’est visiblement pas étrangère à tout ça.

hum… merci pour le diag qui ne me rassure pas et me pousse a la réflexion …

alors, histoire d’avoir un plan B. Si je clone mon ssd avant de tenter cette opération et que mon ssd ne se remet pas de la tentative de réparation … je peux revenir au même point, non ?

pour le moment, la sauvegarde jeedom, elle, marche correctement, donc je pense que je peux préparer mon coup pour le we prochain par exemple…

que dites vous de tout ca ?

j’y pense maintenant, je n’ai pas d’écran ni clavier sur la machine, donc je crée le fichier et j’attend d’avoir de nouveau accès a proxmox, la commande corrige les erreurs mais je ne vois pas le résultat ?