linux磁盤關系知識心得

之前也多多少少的了解過linux的磁盤管理，包括硬盤，邏輯盤，lvm等，但不系統，但昨天在檢查linux數據庫的時候還是遇到了很多的問題和困惑，就順便又溫習了1下相干知識。
首先看1下磁盤的情況：df -k
文件系統                 1K-塊      已用      可用 已用% 掛載點
/dev/mapper/vg_sspdb1-lv_root
                      51606140   2754580  46230120   6% /
tmpfs                 32984140         0  32984140   0% /dev/shm
/dev/sda1               495844     38042    432202   9% /boot
/dev/mapper/vg_sspdb1-lv_home
                     777577944    201368 737877824   1% /home
/dev/mapper/ssp-data 1078031100    206080 1023064216   1% /opt/sspdata

看了這個后感覺分區不太公道，因而又查了磁盤的情況:fdisk -l
Disk /dev/sda: 897.0 GB, 896998047744 bytes
255 heads, 63 sectors/track, 109053 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x0007306b

注：這塊磁盤分了兩個區，1個是linux分區，1個是lvm分區
   Device Boot      Start         End      Blocks   Id  System
/dev/sda1   *           1          64      512000   83  Linux
Partition 1 does not end on cylinder boundary.
/dev/sda2              64      109054   875461632   8e  Linux LVM

注：下面的3個分區是linux了lv分區，就是vg下面的lv分區
Disk /dev/mapper/vg_sspdb1-lv_root: 53.7 GB, 53687091200 bytes
255 heads, 63 sectors/track, 6527 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

Disk /dev/mapper/vg_sspdb1-lv_swap: 33.8 GB, 33848033280 bytes
255 heads, 63 sectors/track, 4115 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

Disk /dev/mapper/vg_sspdb1-lv_home: 808.9 GB, 808934440960 bytes
255 heads, 63 sectors/track, 98347 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

Disk /dev/sdb: 1121.5 GB, 1121501315072 bytes
255 heads, 63 sectors/track, 136348 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

Disk /dev/sdc: 1121.5 GB, 1121501315072 bytes
255 heads, 63 sectors/track, 136348 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

這個分區很奇怪當時看起來很1直沒有弄懂，看名字也很奇怪，不像是vg或lv分區，后面明白了，后面會繼續解釋的。
Disk /dev/mapper/ssp-data: 1121.5 GB, 1121501315072 bytes
255 heads, 63 sectors/track, 136348 cylinders
Units = cylinders of 16065 * 512 = 8225280 bytes
Sector size (logical/physical): 512 bytes / 512 bytes
I/O size (minimum/optimal): 512 bytes / 512 bytes
Disk identifier: 0x00000000

先查1下pv信息,可以知道pv是由第1個硬盤的第2個盤構成的：pvdisplay
  --- Physical volume ---
  PV Name               /dev/sda2
  VG Name               vg_sspdb1
  PV Size               834.91 GiB / not usable 3.00 MiB
  Allocatable           yes (but full)
  PE Size               4.00 MiB
  Total PE              213735
  Free PE               0
  Allocated PE          213735
  PV UUID               JIOUSx-HSBm-L1uJ-roee-DARr-BMRw-XfgeRP

然后再查vg信息：vgdisplay
  --- Volume group ---
  VG Name               vg_sspdb1
  System ID             
  Format                lvm2
  Metadata Areas        1
  Metadata Sequence No  4
  VG Access             read/write
  VG Status             resizable
  MAX LV                0
  Cur LV                3
  Open LV               3
  Max PV                0
  Cur PV                1
  Act PV                1
  VG Size               834.90 GiB
  PE Size               4.00 MiB
  Total PE              213735
  Alloc PE / Size       213735 / 834.90 GiB
  Free  PE / Size       0 / 0   
  VG UUID               5fmSVl⑴ZfR-Z01F-Ktx0-qeKg-rB97-wxk27c  


然后再查詢lv驗證上面的疑問：lvdisplay
  --- Logical volume ---
  LV Path                /dev/vg_sspdb1/lv_root
  LV Name                lv_root
  VG Name                vg_sspdb1
  LV UUID                gxYyXJ-KdQY-XivF-ZfH8-ET7H-gX5Y-WjAVak
  LV Write Access        read/write
  LV Creation host, time ssp-db⑴, 2014⑴2-05 17:42:41 +0800
  LV Status              available
  # open                 1
  LV Size                50.00 GiB
  Current LE             12800
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:0
   
  --- Logical volume ---
  LV Path                /dev/vg_sspdb1/lv_home
  LV Name                lv_home
  VG Name                vg_sspdb1
  LV UUID                NprKvy-Uc76-JjHf-oZo2-LxBR-NS59-ima9VJ
  LV Write Access        read/write
  LV Creation host, time ssp-db⑴, 2014⑴2-05 17:42:46 +0800
  LV Status              available
  # open                 1
  LV Size                753.38 GiB
  Current LE             192865
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:2
   
  --- Logical volume ---
  LV Path                /dev/vg_sspdb1/lv_swap
  LV Name                lv_swap
  VG Name                vg_sspdb1
  LV UUID                hD9Hx9-EonS-RpBH-Qiv0-s4kY-PeXv-Z6RaNG
  LV Write Access        read/write
  LV Creation host, time ssp-db⑴, 2014⑴2-05 17:43:52 +0800
  LV Status              available
  # open                 1
  LV Size                31.52 GiB
  Current LE             8070
  Segments               1
  Allocation             inherit
  Read ahead sectors     auto
  - currently set to     256
  Block device           253:1

通過上面的查詢得知，大概了解了，里面的關系，但有個問題就是/dev/mapper/ssp-data，這個磁盤信息1直不知道從哪里來的：
然后看1下硬盤信息，通過此信息可以知道lv和dm的對應關系 Block device 253:1和下面的major minor有關系：cat /proc/partitions
major minor  #blocks  name
   8        0  875974656 sda
   8        1     512000 sda1
   8        2  875461632 sda2
 253        0   52428800 dm-0
 253        1   33054720 dm⑴
 253        2  789975040 dm⑵
   8       16 1095216128 sdb
   8       32 1095216128 sdc
 253        3 1095216128 dm⑶
 
然后查詢 /dev/mapper/的詳細信息,看到這個上面的名字和fdisk-l的名字很像了吧，下面的就是lv名字和硬盤的對應關系，所以我們從df-k看到的就是vg_sspdb1-lv_home這類名字，其實就是個快捷鏈接：ll  /dev/mapper/
總用量 0
crw-rw----. 1 root root 10, 58 12月 22 11:35 control
lrwxrwxrwx. 1 root root      7 12月 22 11:45 ssp-data -> ../dm⑶
lrwxrwxrwx. 1 root root      7 12月 22 11:35 vg_sspdb1-lv_home -> ../dm⑵
lrwxrwxrwx. 1 root root      7 12月 22 11:35 vg_sspdb1-lv_root -> ../dm-0
lrwxrwxrwx. 1 root root      7 12月 22 11:35 vg_sspdb1-lv_swap -> ../dm⑴

但是還不知道ssp-data是從哪里來的。
然后再看1下存儲裝備及其文件系統的信息：cat /etc/fstab
/dev/mapper/vg_sspdb1-lv_root /                       ext4    defaults        1 1
UUID=1f705c1d-fc2c⑷3ee⑻7af⑷900830a3ec0 /boot                   ext4    defaults        1 2
/dev/mapper/vg_sspdb1-lv_home /home                   ext4    defaults        1 2
/dev/mapper/vg_sspdb1-lv_swap swap                    swap    defaults        0 0
tmpfs                   /dev/shm                tmpfs   defaults        0 0
devpts                  /dev/pts                devpts  gid=5,mode=620  0 0
sysfs                   /sys                    sysfs   defaults        0 0
proc                    /proc                   proc    defaults        0 0
/dev/mapper/ssp-data   /opt/sspdata           ext4   _netdev     0 0
從上面的分析發現1個不1致的地方，就是ssp-data的類型是_netdev，從名字是上來看是和網絡相干的。我們在接著查詢。

查看1下iscsi存儲情況，表示此期間啟用了存儲。
 ps -ef|grep iscsi
root      2074  1972 10 14:24 pts/0    00:00:00 grep iscsi
[root@justin Packages]# chkconfig --list|grep iscsi
iscsi             0:off   1:off   2:off   3:on    4:on    5:on    6:off
iscsid             0:off   1:off   2:off   3:on    4:on    5:on    6:off

查看1下iscsi的信息
 more /etc/iscsi/initiatorname.iscsi 
InitiatorName=iqn.1994-05.com.redhat:4ef28aa338b5

顯示磁盤陣列：iscsiadm -m node
10.11.102.2:3260,9 iqn.2000-09.com.fujitsu:storage-system.eternus-dx400:00C0C1P0
查看文件信息：ls /var/lib/iscsi/nodes/ 
iqn.2000-09.com.fujitsu:storage-system.eternus-dx400:00C0C1P0

然后查詢，表示有多路徑進行啟動：ps -ef|grep multipathd
root      2726     1  0  2014 ?        00:01:50 /sbin/multipathd

root     10379 10358  0 11:26 pts/1    00:00:00 grep multipathd

然后查看：multipath -ll
ssp-data (3600000e00d10000000100846001f0000) dm⑶ FUJITSU,ETERNUS_DX400
size=1.0T features='1 queue_if_no_path' hwhandler='0' wp=rw
|-+- policy='round-robin 0' prio=130 status=active
| `- 14:0:0:0 sdb 8:16 active ready running
`-+- policy='round-robin 0' prio=10 status=enabled
  `- 13:0:0:0 sdc 8:32 active ready running

然后這個名字和fdisk -l中的名字對應上了。