Diagnostic crash disque sur serveur Linux

Panne de disque dur (celui de Ambre) le 02/05/2017

Erreur écran de boot :  fsck.ext3 : Unable to resolve ‘UIID=683a30bc-f4c7-4791-ab14-083d447ece86’ …

Erreur mail OTRS :
De:root         À:lanadmin@hitec.fr
Sujet: SMART error (FailedReadSmartData) detected on host: brawndo
This email was generated by the smartd daemon running on:
host name: brawndo
DNS domain: hitec
NIS domain: (none)
The following warning/error was logged by the smartd daemon:
Device: /dev/sdb [SAT], failed to read SMART Attribute Data
For details see host’s SYSLOG.
You can also use the smartctl utility for further investigation.
Another email message will be sent in 24 hours if the problem persists.

Diagnostic de panne :

cmd / ipconfig sur mon poste : 172.20.0.30    => DHCP OK
cmd / ping brawndo.hitec  => KO
Branchement d’un clavier + écran sur le serveur Brawndo
reboot : pour lire message d’erreur ?   fsck.ext3 : Unable to resolve ‘UIID=683a30bc-f4c7-4791-ab14-083d447ece86’
cat /proc/mdstat : le mirroring est OK
lsblk : on ne voit plus /ambre  => C’est le disque de sauvegarde interne (qui n’est pas mirroré)

Solution 1 : Pour permettre de booter sur Brawndo
> Mise en commentaire du montage automatique de la partition /ambre : dans /etc/fstab

Solution 2 : Remplacer le disque défectueux  (sdb qui contient /ambre)
> on a utilisé un des 2 disques externes de 3 To

Solution 3 : Remplacer l’UUID du disque retiré par l’UUID du nouveau disque (USB-Backup2)

Solution 4 : crontab -e  (commenter puis remettre les batches de backup)

========================================================================
root@brawndo:# lsblk
NAME                               MAJ:MIN RM   SIZE RO TYPE  MOUNTPOINT
sdc                                  8:32   0 298,1G  0 disk
├─sdc1                               8:33   0   487M  0 part
│ └─md0                              9:0    0 486,7M  0 raid1 /boot
└─sdc2                               8:34   0 238,4G  0 part
└─md1                              9:1    0 238,3G  0 raid1
├─brawndo-root (dm-0)          253:0    0   952M  0 lvm   /
├─brawndo-swap_1 (dm-1)        253:1    0   3,7G  0 lvm   [SWAP]
├─brawndo-home-real (dm-2)     253:2    0  59,6G  0 lvm
│ ├─brawndo-home (dm-3)        253:3    0  59,6G  0 lvm   /home
│ └─brawndo-homenight (dm-5)   253:5    0  59,6G  0 lvm
├─brawndo-homenight-cow (dm-4) 253:4    0 101,4G  0 lvm
│ └─brawndo-homenight (dm-5)   253:5    0  59,6G  0 lvm
├─brawndo-usr (dm-6)           253:6    0   5,6G  0 lvm   /usr
├─brawndo-var (dm-7)           253:7    0  59,6G  0 lvm   /var
└─brawndo-tmp (dm-8)           253:8    0   7,5G  0 lvm   /tmp
sda                                  8:0    0 465,8G  0 disk
├─sda1                               8:1    0   487M  0 part
│ └─md0                              9:0    0 486,7M  0 raid1 /boot
└─sda2                               8:2    0 238,4G  0 part
└─md1                              9:1    0 238,3G  0 raid1
├─brawndo-root (dm-0)          253:0    0   952M  0 lvm   /
├─brawndo-swap_1 (dm-1)        253:1    0   3,7G  0 lvm   [SWAP]
├─brawndo-home-real (dm-2)     253:2    0  59,6G  0 lvm
│ ├─brawndo-home (dm-3)        253:3    0  59,6G  0 lvm   /home
│ └─brawndo-homenight (dm-5)   253:5    0  59,6G  0 lvm
├─brawndo-homenight-cow (dm-4) 253:4    0 101,4G  0 lvm
│ └─brawndo-homenight (dm-5)   253:5    0  59,6G  0 lvm
├─brawndo-usr (dm-6)           253:6    0   5,6G  0 lvm   /usr
├─brawndo-var (dm-7)           253:7    0  59,6G  0 lvm   /var
└─brawndo-tmp (dm-8)           253:8    0   7,5G  0 lvm   /tmp
sdb                                  8:16   0   2,7T  0 disk
└─sdb1                               8:17   0   2,7T  0 part  /ambre
root@brawndo:#
======================================================================
root@brawndo:~# more /etc/fstab
# /etc/fstab: static file system information.
#
# Use ‘blkid’ to print the universally unique identifier for a
# device; this may be used with UUID= as a more robust way to name devices
# that works even if disks are added and removed. See fstab(5).
#
# <file system> <mount point>   <type>  <options>       <dump>  <pass>
/dev/mapper/brawndo-root /               ext4    errors=remount-ro 0       1
# /boot was on /dev/sda1 during installation
#UUID=9a0e146b-6eff-4259-ac31-dbc16fc91d6f /boot           ext2    defaults        0       2
# /boot on /dev/md0
UUID=1b8f35af-dadb-4409-8507-a12e96af36e9 /boot           ext2    defaults        0       2
/dev/mapper/brawndo-home /home           ext4    defaults        0       2
/dev/mapper/brawndo-tmp /tmp            ext4    defaults        0       2
/dev/mapper/brawndo-usr /usr            ext4    defaults        0       2
/dev/mapper/brawndo-var /var            ext4    defaults        0       2
/dev/mapper/brawndo-swap_1 none            swap    sw              0       0
#/dev/sdc1       /media/usb0     auto    rw,user,noauto  0       0
#/dev/sdc2       /media/usb1     auto    rw,user,noauto  0       0
# /ambre was on /dev/sdc1
#UUID=683a30bc-f4c7-4791-ab14-083d447ece86 /ambre         ext3   defaults       0        2

root@brawndo:~#

===================================================================

root@brawndo:~# blkid
/dev/mapper/brawndo-swap_1: UUID=”497bc996-6e1d-4563-aa78-865ec0c82523″ TYPE=”swap”
/dev/sdb1: UUID=”9070b30f-db30-1420-d47f-bea12a284603″ UUID_SUB=”218c7e78-66db-dc04-2edb-9710e7b3b944″ LABEL=”brawndo:0″ TYPE=”linux_raid_member”
/dev/sda1: UUID=”9a0e146b-6eff-4259-ac31-dbc16fc91d6f” TYPE=”ext2″
/dev/sda2: UUID=”bdd666a5-2d3f-08d2-f04e-5f4087906fad” UUID_SUB=”da0dc202-e625-a7f0-397c-cbb61ad07855″ LABEL=”brawndo:1″ TYPE=”linux_raid_member”
/dev/md0: UUID=”1b8f35af-dadb-4409-8507-a12e96af36e9″ TYPE=”ext2″
/dev/md1: UUID=”0TWAFR-aCd2-Cpps-pQXl-IpEt-6S7b-EKOCik” TYPE=”LVM2_member”
/dev/mapper/brawndo-root: UUID=”9a5ddbe8-ce22-4339-bcb1-7a7a2974a7f3″ TYPE=”ext4″
/dev/mapper/brawndo-home: UUID=”258cc9d5-24c8-4884-84ac-2c3e2655058d” TYPE=”ext4″
/dev/mapper/brawndo-usr: UUID=”9fc60261-8094-4262-8d7e-4f9a07a2d0b5″ TYPE=”ext4″
/dev/mapper/brawndo-var: UUID=”71d0ad84-3d18-46ea-bcc6-1544224b58ea” TYPE=”ext4″
/dev/mapper/brawndo-tmp: UUID=”7abaf453-0c2c-4c35-a1fd-6554c41a1da3″ TYPE=”ext4″
/dev/mapper/brawndo-homenight: UUID=”258cc9d5-24c8-4884-84ac-2c3e2655058d” TYPE=”ext4″
/dev/mapper/brawndo-home-real: UUID=”258cc9d5-24c8-4884-84ac-2c3e2655058d” TYPE=”ext4″
/dev/mapper/brawndo-homenight-cow: TYPE=”DM_snapshot_cow”
/dev/sdb2: UUID=”bdd666a5-2d3f-08d2-f04e-5f4087906fad” UUID_SUB=”1ce7303d-2ded-2ebb-2893-0b41133557d2″ LABEL=”brawndo:1″ TYPE=”linux_raid_member”
root@brawndo:~#

=========================================================================
root@brawndo:~# mount -l
sysfs on /sys type sysfs (rw,nosuid,nodev,noexec,relatime)
proc on /proc type proc (rw,nosuid,nodev,noexec,relatime)
udev on /dev type devtmpfs (rw,relatime,size=10240k,nr_inodes=493587,mode=755)
devpts on /dev/pts type devpts (rw,nosuid,noexec,relatime,gid=5,mode=620,ptmxmode=000)
tmpfs on /run type tmpfs (rw,nosuid,noexec,relatime,size=395452k,mode=755)
/dev/mapper/brawndo-root on / type ext4 (rw,relatime,errors=remount-ro,user_xattr,barrier=1,data=ordered)
tmpfs on /run/lock type tmpfs (rw,nosuid,nodev,noexec,relatime,size=5120k)
tmpfs on /run/shm type tmpfs (rw,nosuid,nodev,noexec,relatime,size=790880k)
/dev/md0 on /boot type ext2 (rw,relatime,errors=continue,user_xattr,acl)
/dev/mapper/brawndo-home on /home type ext4 (rw,relatime,user_xattr,barrier=1,data=ordered)
/dev/mapper/brawndo-tmp on /tmp type ext4 (rw,relatime,user_xattr,barrier=1,data=ordered)
/dev/mapper/brawndo-usr on /usr type ext4 (rw,relatime,user_xattr,barrier=1,data=ordered)
/dev/mapper/brawndo-var on /var type ext4 (rw,relatime,user_xattr,barrier=1,data=ordered)
rpc_pipefs on /var/lib/nfs/rpc_pipefs type rpc_pipefs (rw,relatime)
root@brawndo:~#

================================================================
root@brawndo:~# df -h
Sys. fich.               Taille Util. Dispo Uti% Monté sur
rootfs                     938M  404M  486M  46% /
udev                        10M     0   10M   0% /dev
tmpfs                      387M  1,7M  385M   1% /run
/dev/mapper/brawndo-root   938M  404M  486M  46% /
tmpfs                      5,0M     0  5,0M   0% /run/lock
tmpfs                      773M     0  773M   0% /run/shm
/dev/md0                   472M   16M  432M   4% /boot
/dev/mapper/brawndo-home    59G   43G   13G  77% /home
/dev/mapper/brawndo-tmp    7,4G  145M  6,9G   3% /tmp
/dev/mapper/brawndo-usr    5,5G  790M  4,5G  15% /usr
/dev/mapper/brawndo-var     59G  601M   56G   2% /var
root@brawndo:~#
==================================================================
root@brawndo:~# fdisk -l

Disque /dev/sdb : 320.1 Go, 320072933376 octets
255 têtes, 63 secteurs/piste, 38913 cylindres, total 625142448 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 512 octets
taille d’E/S (minimale / optimale) : 512 octets / 512 octets
Identifiant de disque : 0x09feadbb

Périphérique Amorce  Début        Fin      Blocs     Id  Système
/dev/sdb1   *        2048      999423      498688   fd  RAID Linux autodétecté
/dev/sdb2          999424   501000191   250000384   fd  RAID Linux autodétecté

Disque /dev/sda : 500.1 Go, 500107862016 octets
255 têtes, 63 secteurs/piste, 60801 cylindres, total 976773168 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0xdc8415f9

Périphérique Amorce  Début        Fin      Blocs     Id  Système
/dev/sda1   *        2048      999423      498688   83  Linux
/dev/sda2          999424   501000191   250000384   fd  RAID Linux autodétecté

Disque /dev/md0 : 510 Mo, 510328832 octets
2 têtes, 4 secteurs/piste, 124592 cylindres, total 996736 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/md0 ne contient pas une table de partitions valable

Disque /dev/md1 : 255.9 Go, 255865978880 octets
2 têtes, 4 secteurs/piste, 62467280 cylindres, total 499738240 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/md1 ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-root : 998 Mo, 998244352 octets
255 têtes, 63 secteurs/piste, 121 cylindres, total 1949696 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-root ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-swap_1 : 3997 Mo, 3997171712 octets
255 têtes, 63 secteurs/piste, 485 cylindres, total 7806976 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-swap_1 ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-home-real : 64.0 Go, 63996690432 octets
255 têtes, 63 secteurs/piste, 7780 cylindres, total 124993536 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-home-real ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-home : 64.0 Go, 63996690432 octets
255 têtes, 63 secteurs/piste, 7780 cylindres, total 124993536 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-home ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-homenight-cow : 108.9 Go, 108875743232 octets
255 têtes, 63 secteurs/piste, 13236 cylindres, total 212647936 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-homenight-cow ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-homenight : 64.0 Go, 63996690432 octets
255 têtes, 63 secteurs/piste, 7780 cylindres, total 124993536 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-homenight ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-usr : 5997 Mo, 5997854720 octets
255 têtes, 63 secteurs/piste, 729 cylindres, total 11714560 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-usr ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-var : 64.0 Go, 63996690432 octets
255 têtes, 63 secteurs/piste, 7780 cylindres, total 124993536 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-var ne contient pas une table de partitions valable

Disque /dev/mapper/brawndo-tmp : 7998 Mo, 7998537728 octets
255 têtes, 63 secteurs/piste, 972 cylindres, total 15622144 secteurs
Unités = secteurs de 1 * 512 = 512 octets
Taille de secteur (logique / physique) : 512 octets / 4096 octets
taille d’E/S (minimale / optimale) : 4096 octets / 4096 octets
Identifiant de disque : 0x00000000

Le disque /dev/mapper/brawndo-tmp ne contient pas une table de partitions valable
root@brawndo:~#

===================================================================
root@brawndo:/var/log# ls -alFt
total 5952
-rw-r—–  1 root        adm  1933699 mai    2 11:04 monit.log
-rw-rw-r–  1 root        utmp  296964 mai    2 10:49 lastlog
-rw-rw-r–  1 root        utmp   51840 mai    2 10:49 wtmp
-rw-r—–  1 root        adm   146611 mai    2 10:49 auth.log
-rw-r—–  1 root        adm   111569 mai    2 10:39 syslog
-rw-r—–  1 root        adm    24014 mai    2 10:11 debug
-rw-r—–  1 root        adm    81358 mai    2 10:11 kern.log
-rw-r—–  1 root        adm    50355 mai    2 10:11 daemon.log
-rw-r—–  1 root        adm    57046 mai    2 10:11 messages
-rw-r—–  1 root        adm    51911 mai    2 10:11 dmesg
-rw-r—–  1 root        adm       73 avril 30 03:31 user.log
-rw-r—–  1 root        adm      691 avril 29 23:53 mail.info
-rw-r—–  1 root        adm      691 avril 29 23:53 mail.log

root@brawndo:/var/log#

==================================================================
root@brawndo:/var/log# grep -i err dmesg

[    6.208662] ata3.00: ACPI cmd ef/10:06:00:00:00:00 (SET FEATURES) failed (Emask=0x4 Stat=0x50 Err=0x01)
[   16.505252] ata3.00: ACPI cmd ef/10:06:00:00:00:00 (SET FEATURES) failed (Emask=0x4 Stat=0x50 Err=0x01)
[   21.813258] ata3.00: failed to read native max address (err_mask=0x4)
[   24.505504] Error: Driver ‘pcspkr’ is already registered, aborting…

==================================================================
root@brawndo:/var/log# grep -i failed dmesg
[    0.547047]  pci0000:00: ACPI _OSC request failed (AE_ERROR), returned control mask: 0x1d
[    6.208662] ata3.00: ACPI cmd ef/10:06:00:00:00:00 (SET FEATURES) failed (Emask=0x4 Stat=0x50 Err=0x01)
[   16.505252] ata3.00: ACPI cmd ef/10:06:00:00:00:00 (SET FEATURES) failed (Emask=0x4 Stat=0x50 Err=0x01)
[   16.505324] ata3.00: ACPI: failed the second time, disabled
[   21.813258] ata3.00: failed to read native max address (err_mask=0x4)
[   24.336001] [drm] MTRR allocation failed.  Graphics performance may suffer.

===================================================================