WARNING - OLD ARCHIVES

This is an archived copy of the Xen.org mailing list, which we have preserved to ensure that existing links to archives are not broken. The live archive, which contains the latest emails, can be found at http://lists.xen.org/
   
 
 
Xen 
 
Home Products Support Community News
 
   
 

xen-devel

Re: [Xen-devel] Automation scripts

To: Ian Pratt <Ian.Pratt@xxxxxxxxxxxx>
Subject: Re: [Xen-devel] Automation scripts
From: Peri Hankey <mpah@xxxxxxxxxxxxxx>
Date: Tue, 28 Sep 2004 15:55:07 +0100
Cc: Michael Vrable <mvrable@xxxxxxxxxxx>, xen-devel@xxxxxxxxxxxxxxxxxxxxx
Delivery-date: Tue, 28 Sep 2004 16:10:46 +0100
Envelope-to: steven.hand@xxxxxxxxxxxx
In-reply-to: <E1CCH49-0003dp-00@xxxxxxxxxxxxxxxxx>
List-archive: <http://sourceforge.net/mailarchive/forum.php?forum=xen-devel>
List-help: <mailto:xen-devel-request@lists.sourceforge.net?subject=help>
List-id: List for Xen developers <xen-devel.lists.sourceforge.net>
List-post: <mailto:xen-devel@lists.sourceforge.net>
List-subscribe: <https://lists.sourceforge.net/lists/listinfo/xen-devel>, <mailto:xen-devel-request@lists.sourceforge.net?subject=subscribe>
List-unsubscribe: <https://lists.sourceforge.net/lists/listinfo/xen-devel>, <mailto:xen-devel-request@lists.sourceforge.net?subject=unsubscribe>
References: <E1CCH49-0003dp-00@xxxxxxxxxxxxxxxxx>
Sender: xen-devel-admin@xxxxxxxxxxxxxxxxxxxxx
User-agent: Mozilla/5.0 (X11; U; Linux i686; en-US; rv:1.6) Gecko/20040115
It looks as if lvm2 uses quite a lot of memory analysing multiple snapshots of a single origin. I rebooted the dom0 machine and immediately did 'vchange -ay vmspace' which makes the volume group vmspace active. This claims to run out of memory - always so far on one of a list of snapshots of a common origin, but not always on the same one. When it runs out memory adding a new snapshot, it tends to mention one of the other snapshots, and as I have said, the whole caboodle then becomes unusable until after a reboot.

Here is the sequence of events, with slabinfo before and after the second 'vchange -ay vmspace':

... login after reboot (no xenU systems started) ...
[root@a4 root]# vgchange -ay vmspace
 device-mapper ioctl cmd 9 failed: Cannot allocate memory
 Couldn't load device 'vmspace-a44'.
 26 logical volume(s) in volume group "vmspace" now active
...
[root@a4 root]# vgchange -an vmspace
 0 logical volume(s) in volume group "vmspace" now active
...
[root@a4 root]# cat /proc/slabinfo >slabinfo-1
[root@a4 root]# vgchange -ay vmspace
 device-mapper ioctl cmd 9 failed: Cannot allocate memory
 Couldn't load device 'vmspace-a51'.
 25 logical volume(s) in volume group "vmspace" now active
[root@a4 root]# cat /proc/slabinfo >slabinfo-2

[root@a4 root]# lvs
 LV            VG      Attr   LSize   Origin       Snap%  Move Copy%
 a32           vmspace -wi-a-   2.00G
 a32-swap      vmspace -wi-a-  64.00M
 a33           vmspace -wi-a-   2.00G
 a37           vmspace -wi-a-   2.00G
 a38-swap      vmspace -wi-a-  64.00M
 a39           vmspace swi-a- 100.00M mdk10.0-a      0.02
 a39-swap      vmspace -wi-a-  64.00M
 a40           vmspace swi--- 100.00M mdk10.0
 a40-swap      vmspace -wi-a-  64.00M
 a41           vmspace swi--- 100.00M mdk10.0
 a41-swap      vmspace -wi-a-  64.00M
 a42           vmspace swi-s- 100.00M mdk10.0       36.77
 a42-swap      vmspace -wi-a-  64.00M
 a43           vmspace swi-s- 100.00M mdk10.0       35.14
 a43-swap      vmspace -wi-a-  64.00M
 a44           vmspace Swi-S- 100.00M mdk10.0      100.00
 a44-swap      vmspace -wi-a-  64.00M
 a45           vmspace swi-s- 100.00M mdk10.0        0.45
 a45-swap      vmspace -wi-a-  64.00M
 a46           vmspace swi-a- 100.00M mdk10.0-a     42.78
 a46-swap      vmspace -wi-a-  64.00M
 a47           vmspace swi-a- 100.00M mdk10.0-a      0.45
 a47-swap      vmspace -wi-a-  64.00M
 a48           vmspace swi-a- 100.00M mdk10.0-a      0.45
 a48-swap      vmspace -wi-a-  64.00M
 a49           vmspace swi-a- 100.00M mdk10.0-a      0.02
 a49-swap      vmspace -wi-a-  64.00M
 a50           vmspace swi-a- 100.00M mdk10.0-a      0.45
 a50-swap      vmspace -wi-a-  64.00M
 a51           vmspace Swi-I- 256.00M fedora-core2 100.00
 a51-swap      vmspace -wi-a-  64.00M
 a52           vmspace swi-a- 256.00M fedora-core2   0.01
 a52-swap      vmspace -wi-a-  64.00M
 a55           vmspace swi-a- 256.00M fedora-core2   2.53
 a55-swap      vmspace -wi-a-  64.00M
 a56           vmspace swi-a- 256.00M fedora-core2  11.80
 a56-swap      vmspace -wi-a-  64.00M
 a57           vmspace swi--- 256.00M fedora-core2
 a57-swap      vmspace -wi-a-  64.00M
 fedora-core2  vmspace owi---   2.00G
 gentoo-2004.2 vmspace -wi-a-   6.00G
 mdk10.0       vmspace owi---   6.00G
 mdk10.0-a     vmspace owi-a-   6.00G
 mdk10.0-b     vmspace -wi-a-   6.00G

... reboot and login again ...
[root@a4 root]# lvs
 LV            VG      Attr   LSize   Origin       Snap%  Move Copy%
 a32           vmspace -wi---   2.00G
 a32-swap      vmspace -wi---  64.00M
 a33           vmspace -wi---   2.00G
 a37           vmspace -wi---   2.00G
 a38-swap      vmspace -wi---  64.00M
 a39           vmspace swi--- 100.00M mdk10.0-a
 a39-swap      vmspace -wi---  64.00M
 a40           vmspace swi--- 100.00M mdk10.0
 a40-swap      vmspace -wi---  64.00M
 a41           vmspace swi--- 100.00M mdk10.0
 a41-swap      vmspace -wi---  64.00M
 a42           vmspace swi--- 100.00M mdk10.0
 a42-swap      vmspace -wi---  64.00M
 a43           vmspace swi--- 100.00M mdk10.0
 a43-swap      vmspace -wi---  64.00M
 a44           vmspace swi--- 100.00M mdk10.0
 a44-swap      vmspace -wi---  64.00M
 a45           vmspace swi--- 100.00M mdk10.0
 a45-swap      vmspace -wi---  64.00M
 a46           vmspace swi--- 100.00M mdk10.0-a
 a46-swap      vmspace -wi---  64.00M
 a47           vmspace swi--- 100.00M mdk10.0-a
 a47-swap      vmspace -wi---  64.00M
 a48           vmspace swi--- 100.00M mdk10.0-a
 a48-swap      vmspace -wi---  64.00M
 a49           vmspace swi--- 100.00M mdk10.0-a
 a49-swap      vmspace -wi---  64.00M
 a50           vmspace swi--- 100.00M mdk10.0-a
 a50-swap      vmspace -wi---  64.00M
 a51           vmspace swi--- 256.00M fedora-core2
 a51-swap      vmspace -wi---  64.00M
 a52           vmspace swi--- 256.00M fedora-core2
 a52-swap      vmspace -wi---  64.00M
 a55           vmspace swi--- 256.00M fedora-core2
 a55-swap      vmspace -wi---  64.00M
 a56           vmspace swi--- 256.00M fedora-core2
 a56-swap      vmspace -wi---  64.00M
 a57           vmspace swi--- 256.00M fedora-core2
 a57-swap      vmspace -wi---  64.00M
 fedora-core2  vmspace owi---   2.00G
 gentoo-2004.2 vmspace -wi---   6.00G
 mdk10.0       vmspace owi---   6.00G
 mdk10.0-a     vmspace owi---   6.00G
 mdk10.0-b     vmspace -wi---   6.00G

[root@a4 root]# lvs |wc
    45     201    3195

[root@a4 root]# lvchange -a y vmspace/fedora-core2
 device-mapper ioctl cmd 9 failed: Cannot allocate memory
 Couldn't load device 'vmspace-a52'.

Here it runs out memory dealing making active an origin volume with just 5 snapshots. So there's clearly something wrong, and as I have said, lvm2 snapshots weren't really designed for these purposes. It may be a case of DIY, as Christian suggested.

-- Peri


Ian Pratt wrote:

My experience (LVM2.2.00.24 - Mandrake 10.0 - 2.6.8.1-xen0) has been that when lvm2 runs out of memory (particularly when creating a new snapshot of an original that already has other snaphots against it) the whole lvm system with any xenU domains based on it becomes unusable until the xen0 system is rebooted. Has lvm2 behaved better for you in that kind of circumstance?

I haven't really used multiple snapshots enough to experience
this. Do you really mean that you're running out of memory, or
that the volume for holding the snapshot deltas is filling up?

I presume LVM2 just stores a cache of the remapped extents table
in memory, so I'm surprised that there's a significant memory
overhead. Maybe its not really that smart.

Either way, it might be interesting to see the output of
/proc/slabinfo when its low on memory.

Ian


-------------------------------------------------------
This SF.Net email is sponsored by: YOU BE THE JUDGE. Be one of 170
Project Admins to receive an Apple iPod Mini FREE for your judgement on
who ports your project to Linux PPC the best. Sponsored by IBM.
Deadline: Sept. 24. Go here: http://sf.net/ppc_contest.php
_______________________________________________
Xen-devel mailing list
Xen-devel@xxxxxxxxxxxxxxxxxxxxx
https://lists.sourceforge.net/lists/listinfo/xen-devel



slabinfo - version: 2.0
# name            <active_objs> <num_objs> <objsize> <objperslab> 
<pagesperslab> : tunables <batchcount> <limit> <sharedfactor> : slabdata 
<active_slabs> <num_slabs> <sharedavail>
kcopyd-jobs          512    525    184   21    1 : tunables  120   60    0 : 
slabdata     25     25      0
dm-io-5               16     16   3072    2    2 : tunables   24   12    0 : 
slabdata      8      8      0
dm-io-4               32     35   1536    5    2 : tunables   24   12    0 : 
slabdata      7      7      0
dm-io-3               64     65    768    5    1 : tunables   54   27    0 : 
slabdata     13     13      0
dm-io-2              128    140    192   20    1 : tunables  120   60    0 : 
slabdata      7      7      0
dm-io-1              256    305     64   61    1 : tunables  120   60    0 : 
slabdata      5      5      0
dm-io-0              512    678     16  226    1 : tunables  120   60    0 : 
slabdata      3      3      0
dm-io-bio            512    549     64   61    1 : tunables  120   60    0 : 
slabdata      9      9      0
rpc_buffers            8      8   2048    2    1 : tunables   24   12    0 : 
slabdata      4      4      0
rpc_tasks              8     25    160   25    1 : tunables  120   60    0 : 
slabdata      1      1      0
rpc_inode_cache        0      0    416    9    1 : tunables   54   27    0 : 
slabdata      0      0      0
bridge_fdb_cache       0      0     64   61    1 : tunables  120   60    0 : 
slabdata      0      0      0
unix_sock            101    110    384   10    1 : tunables   54   27    0 : 
slabdata     11     11      0
tcp_tw_bucket          0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
tcp_bind_bucket       19    226     16  226    1 : tunables  120   60    0 : 
slabdata      1      1      0
tcp_open_request       0      0     64   61    1 : tunables  120   60    0 : 
slabdata      0      0      0
inet_peer_cache        1     61     64   61    1 : tunables  120   60    0 : 
slabdata      1      1      0
ip_fib_hash           10    226     16  226    1 : tunables  120   60    0 : 
slabdata      1      1      0
ip_dst_cache          10     15    256   15    1 : tunables  120   60    0 : 
slabdata      1      1      0
arp_cache              3     31    128   31    1 : tunables  120   60    0 : 
slabdata      1      1      0
raw4_sock              0      0    480    8    1 : tunables   54   27    0 : 
slabdata      0      0      0
udp_sock               7      8    480    8    1 : tunables   54   27    0 : 
slabdata      1      1      0
tcp_sock              29     32   1024    4    1 : tunables   54   27    0 : 
slabdata      8      8      0
flow_cache             0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
dm-snapshot-in       128    162     48   81    1 : tunables  120   60    0 : 
slabdata      2      2      0
dm-snapshot-ex      9240   9266     16  226    1 : tunables  120   60    0 : 
slabdata     41     41      0
dm_tio              2304   2486     16  226    1 : tunables  120   60    0 : 
slabdata     11     11      0
dm_io               2304   2486     16  226    1 : tunables  120   60    0 : 
slabdata     11     11      0
blkif_cache            0      0    112   35    1 : tunables  120   60    0 : 
slabdata      0      0      0
nfs_write_data        36     36    448    9    1 : tunables   54   27    0 : 
slabdata      4      4      0
nfs_read_data         32     36    416    9    1 : tunables   54   27    0 : 
slabdata      4      4      0
nfs_inode_cache        0      0    544    7    1 : tunables   54   27    0 : 
slabdata      0      0      0
nfs_page               0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
isofs_inode_cache      0      0    320   12    1 : tunables   54   27    0 : 
slabdata      0      0      0
ext2_inode_cache       0      0    416    9    1 : tunables   54   27    0 : 
slabdata      0      0      0
journal_handle         8    135     28  135    1 : tunables  120   60    0 : 
slabdata      1      1      0
journal_head          67    162     48   81    1 : tunables  120   60    0 : 
slabdata      2      2      0
revoke_table           8    290     12  290    1 : tunables  120   60    0 : 
slabdata      1      1      0
revoke_record          0      0     16  226    1 : tunables  120   60    0 : 
slabdata      0      0      0
ext3_inode_cache    4376   5517    448    9    1 : tunables   54   27    0 : 
slabdata    613    613      0
ext3_xattr             0      0     44   88    1 : tunables  120   60    0 : 
slabdata      0      0      0
reiser_inode_cache      0      0    384   10    1 : tunables   54   27    0 : 
slabdata      0      0      0
eventpoll_pwq          0      0     36  107    1 : tunables  120   60    0 : 
slabdata      0      0      0
eventpoll_epi          0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
kioctx                 0      0    160   25    1 : tunables  120   60    0 : 
slabdata      0      0      0
kiocb                  0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
dnotify_cache          0      0     20  185    1 : tunables  120   60    0 : 
slabdata      0      0      0
file_lock_cache        5     43     92   43    1 : tunables  120   60    0 : 
slabdata      1      1      0
fasync_cache           0      0     16  226    1 : tunables  120   60    0 : 
slabdata      0      0      0
shmem_inode_cache      5     10    384   10    1 : tunables   54   27    0 : 
slabdata      1      1      0
posix_timers_cache      0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
uid_cache              8    119     32  119    1 : tunables  120   60    0 : 
slabdata      1      1      0
xen-skb               17     17   4096    1    1 : tunables   24   12    0 : 
slabdata     17     17      0
sgpool-128            32     32   2048    2    1 : tunables   24   12    0 : 
slabdata     16     16      0
sgpool-64             32     32   1024    4    1 : tunables   54   27    0 : 
slabdata      8      8      0
sgpool-32             32     32    512    8    1 : tunables   54   27    0 : 
slabdata      4      4      0
sgpool-16             32     45    256   15    1 : tunables  120   60    0 : 
slabdata      3      3      0
sgpool-8              32     62    128   31    1 : tunables  120   60    0 : 
slabdata      2      2      0
cfq_pool              64    119     32  119    1 : tunables  120   60    0 : 
slabdata      1      1      0
crq_pool               0      0     36  107    1 : tunables  120   60    0 : 
slabdata      0      0      0
deadline_drq           0      0     48   81    1 : tunables  120   60    0 : 
slabdata      0      0      0
as_arq               523    585     60   65    1 : tunables  120   60    0 : 
slabdata      9      9      0
blkdev_ioc            57    185     20  185    1 : tunables  120   60    0 : 
slabdata      1      1      0
blkdev_queue         412    414    448    9    1 : tunables   54   27    0 : 
slabdata     46     46      0
blkdev_requests      522    546    152   26    1 : tunables  120   60    0 : 
slabdata     21     21      0
biovec-(256)          60     60   3072    2    2 : tunables   24   12    0 : 
slabdata     30     30      0
biovec-128           121    125   1536    5    2 : tunables   24   12    0 : 
slabdata     25     25      0
biovec-64            242    245    768    5    1 : tunables   54   27    0 : 
slabdata     49     49      0
biovec-16            242    260    192   20    1 : tunables  120   60    0 : 
slabdata     13     13      0
biovec-4             242    244     64   61    1 : tunables  120   60    0 : 
slabdata      4      4      0
biovec-1             267    452     16  226    1 : tunables  120   60    0 : 
slabdata      2      2      0
bio                  272    305     64   61    1 : tunables  120   60    0 : 
slabdata      5      5      0
sock_inode_cache     139    143    352   11    1 : tunables   54   27    0 : 
slabdata     13     13      0
skbuff_head_cache     25     40    192   20    1 : tunables  120   60    0 : 
slabdata      2      2      0
sock                   2     12    320   12    1 : tunables   54   27    0 : 
slabdata      1      1      0
proc_inode_cache     151    312    320   12    1 : tunables   54   27    0 : 
slabdata     26     26      0
sigqueue              16     27    148   27    1 : tunables  120   60    0 : 
slabdata      1      1      0
radix_tree_node      787   1876    276   14    1 : tunables   54   27    0 : 
slabdata    134    134      0
bdev_cache            14     18    416    9    1 : tunables   54   27    0 : 
slabdata      2      2      0
mnt_cache             17     41     96   41    1 : tunables  120   60    0 : 
slabdata      1      1      0
inode_cache         4405   4410    288   14    1 : tunables   54   27    0 : 
slabdata    315    315      0
dentry_cache       12133  17836    140   28    1 : tunables  120   60    0 : 
slabdata    637    637      0
filp                 825    825    160   25    1 : tunables  120   60    0 : 
slabdata     33     33      0
names_cache            1      1   4096    1    1 : tunables   24   12    0 : 
slabdata      1      1      0
idr_layer_cache       66     87    136   29    1 : tunables  120   60    0 : 
slabdata      3      3      0
buffer_head          350   1620     48   81    1 : tunables  120   60    0 : 
slabdata     20     20      0
mm_struct             61     63    512    7    1 : tunables   54   27    0 : 
slabdata      9      9      0
vm_area_struct      2491   2491     84   47    1 : tunables  120   60    0 : 
slabdata     53     53      0
fs_cache              68    119     32  119    1 : tunables  120   60    0 : 
slabdata      1      1      0
files_cache           61     72    416    9    1 : tunables   54   27    0 : 
slabdata      8      8      0
signal_cache          97    123     96   41    1 : tunables  120   60    0 : 
slabdata      3      3      0
sighand_cache         72     72   1312    3    1 : tunables   24   12    0 : 
slabdata     24     24      0
task_struct           95     95   1424    5    2 : tunables   24   12    0 : 
slabdata     19     19      0
anon_vma             740    814      8  407    1 : tunables  120   60    0 : 
slabdata      2      2      0
pgd                   47     47   4096    1    1 : tunables   24   12    0 : 
slabdata     47     47      0
pte                  183    183   4096    1    1 : tunables   24   12    0 : 
slabdata    183    183      0
size-131072(DMA)       0      0 131072    1   32 : tunables    8    4    0 : 
slabdata      0      0      0
size-131072            1      1 131072    1   32 : tunables    8    4    0 : 
slabdata      1      1      0
size-65536(DMA)        0      0  65536    1   16 : tunables    8    4    0 : 
slabdata      0      0      0
size-65536             1      1  65536    1   16 : tunables    8    4    0 : 
slabdata      1      1      0
size-32768(DMA)        0      0  32768    1    8 : tunables    8    4    0 : 
slabdata      0      0      0
size-32768             0      0  32768    1    8 : tunables    8    4    0 : 
slabdata      0      0      0
size-16384(DMA)        0      0  16384    1    4 : tunables    8    4    0 : 
slabdata      0      0      0
size-16384             0      0  16384    1    4 : tunables    8    4    0 : 
slabdata      0      0      0
size-8192(DMA)         0      0   8192    1    2 : tunables    8    4    0 : 
slabdata      0      0      0
size-8192             84     84   8192    1    2 : tunables    8    4    0 : 
slabdata     84     84      0
size-4096(DMA)         0      0   4096    1    1 : tunables   24   12    0 : 
slabdata      0      0      0
size-4096             42     42   4096    1    1 : tunables   24   12    0 : 
slabdata     42     42      0
size-2048(DMA)         0      0   2048    2    1 : tunables   24   12    0 : 
slabdata      0      0      0
size-2048             20     20   2048    2    1 : tunables   24   12    0 : 
slabdata     10     10      0
size-1024(DMA)         0      0   1024    4    1 : tunables   54   27    0 : 
slabdata      0      0      0
size-1024            110    140   1024    4    1 : tunables   54   27    0 : 
slabdata     35     35      0
size-512(DMA)          0      0    512    8    1 : tunables   54   27    0 : 
slabdata      0      0      0
size-512             281    536    512    8    1 : tunables   54   27    0 : 
slabdata     67     67      0
size-256(DMA)          0      0    256   15    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-256             678    690    256   15    1 : tunables  120   60    0 : 
slabdata     46     46      0
size-128(DMA)          0      0    128   31    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-128             960   1054    128   31    1 : tunables  120   60    0 : 
slabdata     34     34      0
size-64(DMA)           0      0     64   61    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-64              491    671     64   61    1 : tunables  120   60    0 : 
slabdata     11     11      0
size-32(DMA)           0      0     32  119    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-32             6243   8211     32  119    1 : tunables  120   60    0 : 
slabdata     69     69      0
kmem_cache           124    124    128   31    1 : tunables  120   60    0 : 
slabdata      4      4      0
slabinfo - version: 2.0
# name            <active_objs> <num_objs> <objsize> <objperslab> 
<pagesperslab> : tunables <batchcount> <limit> <sharedfactor> : slabdata 
<active_slabs> <num_slabs> <sharedavail>
kcopyd-jobs          512    525    184   21    1 : tunables  120   60    0 : 
slabdata     25     25      0
dm-io-5               16     16   3072    2    2 : tunables   24   12    0 : 
slabdata      8      8      0
dm-io-4               32     35   1536    5    2 : tunables   24   12    0 : 
slabdata      7      7      0
dm-io-3               64     65    768    5    1 : tunables   54   27    0 : 
slabdata     13     13      0
dm-io-2              128    140    192   20    1 : tunables  120   60    0 : 
slabdata      7      7      0
dm-io-1              256    305     64   61    1 : tunables  120   60    0 : 
slabdata      5      5      0
dm-io-0              512    678     16  226    1 : tunables  120   60    0 : 
slabdata      3      3      0
dm-io-bio            512    549     64   61    1 : tunables  120   60    0 : 
slabdata      9      9      0
rpc_buffers            8      8   2048    2    1 : tunables   24   12    0 : 
slabdata      4      4      0
rpc_tasks              8     25    160   25    1 : tunables  120   60    0 : 
slabdata      1      1      0
rpc_inode_cache        0      0    416    9    1 : tunables   54   27    0 : 
slabdata      0      0      0
bridge_fdb_cache       0      0     64   61    1 : tunables  120   60    0 : 
slabdata      0      0      0
unix_sock            102    110    384   10    1 : tunables   54   27    0 : 
slabdata     11     11      0
tcp_tw_bucket          0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
tcp_bind_bucket       19    226     16  226    1 : tunables  120   60    0 : 
slabdata      1      1      0
tcp_open_request       0      0     64   61    1 : tunables  120   60    0 : 
slabdata      0      0      0
inet_peer_cache        1     61     64   61    1 : tunables  120   60    0 : 
slabdata      1      1      0
ip_fib_hash           10    226     16  226    1 : tunables  120   60    0 : 
slabdata      1      1      0
ip_dst_cache           9     15    256   15    1 : tunables  120   60    0 : 
slabdata      1      1      0
arp_cache              3     31    128   31    1 : tunables  120   60    0 : 
slabdata      1      1      0
raw4_sock              0      0    480    8    1 : tunables   54   27    0 : 
slabdata      0      0      0
udp_sock               7      8    480    8    1 : tunables   54   27    0 : 
slabdata      1      1      0
tcp_sock              29     32   1024    4    1 : tunables   54   27    0 : 
slabdata      8      8      0
flow_cache             0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
dm-snapshot-in       128    162     48   81    1 : tunables  120   60    0 : 
slabdata      2      2      0
dm-snapshot-ex     19556  19662     16  226    1 : tunables  120   60    0 : 
slabdata     87     87      0
dm_tio             14336  14464     16  226    1 : tunables  120   60    0 : 
slabdata     64     64      0
dm_io              14336  14464     16  226    1 : tunables  120   60    0 : 
slabdata     64     64      0
blkif_cache            0      0    112   35    1 : tunables  120   60    0 : 
slabdata      0      0      0
nfs_write_data        36     36    448    9    1 : tunables   54   27    0 : 
slabdata      4      4      0
nfs_read_data         32     36    416    9    1 : tunables   54   27    0 : 
slabdata      4      4      0
nfs_inode_cache        0      0    544    7    1 : tunables   54   27    0 : 
slabdata      0      0      0
nfs_page               0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
isofs_inode_cache      0      0    320   12    1 : tunables   54   27    0 : 
slabdata      0      0      0
ext2_inode_cache       0      0    416    9    1 : tunables   54   27    0 : 
slabdata      0      0      0
journal_handle         3    135     28  135    1 : tunables  120   60    0 : 
slabdata      1      1      0
journal_head         135    162     48   81    1 : tunables  120   60    0 : 
slabdata      2      2      0
revoke_table           8    290     12  290    1 : tunables  120   60    0 : 
slabdata      1      1      0
revoke_record          0      0     16  226    1 : tunables  120   60    0 : 
slabdata      0      0      0
ext3_inode_cache    4193   5445    448    9    1 : tunables   54   27    0 : 
slabdata    605    605      0
ext3_xattr             0      0     44   88    1 : tunables  120   60    0 : 
slabdata      0      0      0
reiser_inode_cache      0      0    384   10    1 : tunables   54   27    0 : 
slabdata      0      0      0
eventpoll_pwq          0      0     36  107    1 : tunables  120   60    0 : 
slabdata      0      0      0
eventpoll_epi          0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
kioctx                 0      0    160   25    1 : tunables  120   60    0 : 
slabdata      0      0      0
kiocb                  0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
dnotify_cache          0      0     20  185    1 : tunables  120   60    0 : 
slabdata      0      0      0
file_lock_cache        5     43     92   43    1 : tunables  120   60    0 : 
slabdata      1      1      0
fasync_cache           0      0     16  226    1 : tunables  120   60    0 : 
slabdata      0      0      0
shmem_inode_cache      5     10    384   10    1 : tunables   54   27    0 : 
slabdata      1      1      0
posix_timers_cache      0      0     96   41    1 : tunables  120   60    0 : 
slabdata      0      0      0
uid_cache              8    119     32  119    1 : tunables  120   60    0 : 
slabdata      1      1      0
xen-skb               17     17   4096    1    1 : tunables   24   12    0 : 
slabdata     17     17      0
sgpool-128            32     32   2048    2    1 : tunables   24   12    0 : 
slabdata     16     16      0
sgpool-64             32     32   1024    4    1 : tunables   54   27    0 : 
slabdata      8      8      0
sgpool-32             32     32    512    8    1 : tunables   54   27    0 : 
slabdata      4      4      0
sgpool-16             32     45    256   15    1 : tunables  120   60    0 : 
slabdata      3      3      0
sgpool-8              32     62    128   31    1 : tunables  120   60    0 : 
slabdata      2      2      0
cfq_pool              64    119     32  119    1 : tunables  120   60    0 : 
slabdata      1      1      0
crq_pool               0      0     36  107    1 : tunables  120   60    0 : 
slabdata      0      0      0
deadline_drq           0      0     48   81    1 : tunables  120   60    0 : 
slabdata      0      0      0
as_arq               533    585     60   65    1 : tunables  120   60    0 : 
slabdata      9      9      0
blkdev_ioc            41    185     20  185    1 : tunables  120   60    0 : 
slabdata      1      1      0
blkdev_queue         459    459    448    9    1 : tunables   54   27    0 : 
slabdata     51     51      0
blkdev_requests      546    546    152   26    1 : tunables  120   60    0 : 
slabdata     21     21      0
biovec-(256)          60     60   3072    2    2 : tunables   24   12    0 : 
slabdata     30     30      0
biovec-128           121    125   1536    5    2 : tunables   24   12    0 : 
slabdata     25     25      0
biovec-64            242    245    768    5    1 : tunables   54   27    0 : 
slabdata     49     49      0
biovec-16            242    260    192   20    1 : tunables  120   60    0 : 
slabdata     13     13      0
biovec-4             242    244     64   61    1 : tunables  120   60    0 : 
slabdata      4      4      0
biovec-1             256    452     16  226    1 : tunables  120   60    0 : 
slabdata      2      2      0
bio                  305    305     64   61    1 : tunables  120   60    0 : 
slabdata      5      5      0
sock_inode_cache     143    143    352   11    1 : tunables   54   27    0 : 
slabdata     13     13      0
skbuff_head_cache     19     40    192   20    1 : tunables  120   60    0 : 
slabdata      2      2      0
sock                  12     12    320   12    1 : tunables   54   27    0 : 
slabdata      1      1      0
proc_inode_cache     151    312    320   12    1 : tunables   54   27    0 : 
slabdata     26     26      0
sigqueue               4     27    148   27    1 : tunables  120   60    0 : 
slabdata      1      1      0
radix_tree_node      784   1876    276   14    1 : tunables   54   27    0 : 
slabdata    134    134      0
bdev_cache            30     36    416    9    1 : tunables   54   27    0 : 
slabdata      4      4      0
mnt_cache             17     41     96   41    1 : tunables  120   60    0 : 
slabdata      1      1      0
inode_cache         4687   4690    288   14    1 : tunables   54   27    0 : 
slabdata    335    335      0
dentry_cache       11606  17528    140   28    1 : tunables  120   60    0 : 
slabdata    626    626      0
filp                 785    850    160   25    1 : tunables  120   60    0 : 
slabdata     34     34      0
names_cache            1      1   4096    1    1 : tunables   24   12    0 : 
slabdata      1      1      0
idr_layer_cache       66     87    136   29    1 : tunables  120   60    0 : 
slabdata      3      3      0
buffer_head          387   1620     48   81    1 : tunables  120   60    0 : 
slabdata     20     20      0
mm_struct             70     70    512    7    1 : tunables   54   27    0 : 
slabdata     10     10      0
vm_area_struct      2486   2491     84   47    1 : tunables  120   60    0 : 
slabdata     53     53      0
fs_cache              68    119     32  119    1 : tunables  120   60    0 : 
slabdata      1      1      0
files_cache           46     72    416    9    1 : tunables   54   27    0 : 
slabdata      8      8      0
signal_cache          97    123     96   41    1 : tunables  120   60    0 : 
slabdata      3      3      0
sighand_cache         71     78   1312    3    1 : tunables   24   12    0 : 
slabdata     25     26      0
task_struct           84     95   1424    5    2 : tunables   24   12    0 : 
slabdata     19     19      0
anon_vma             732    814      8  407    1 : tunables  120   60    0 : 
slabdata      2      2      0
pgd                   58     58   4096    1    1 : tunables   24   12    0 : 
slabdata     58     58      0
pte                  193    196   4096    1    1 : tunables   24   12    0 : 
slabdata    193    196      0
size-131072(DMA)       0      0 131072    1   32 : tunables    8    4    0 : 
slabdata      0      0      0
size-131072            2      2 131072    1   32 : tunables    8    4    0 : 
slabdata      2      2      0
size-65536(DMA)        0      0  65536    1   16 : tunables    8    4    0 : 
slabdata      0      0      0
size-65536             0      0  65536    1   16 : tunables    8    4    0 : 
slabdata      0      0      0
size-32768(DMA)        0      0  32768    1    8 : tunables    8    4    0 : 
slabdata      0      0      0
size-32768             0      0  32768    1    8 : tunables    8    4    0 : 
slabdata      0      0      0
size-16384(DMA)        0      0  16384    1    4 : tunables    8    4    0 : 
slabdata      0      0      0
size-16384             0      0  16384    1    4 : tunables    8    4    0 : 
slabdata      0      0      0
size-8192(DMA)         0      0   8192    1    2 : tunables    8    4    0 : 
slabdata      0      0      0
size-8192             87     88   8192    1    2 : tunables    8    4    0 : 
slabdata     87     88      0
size-4096(DMA)         0      0   4096    1    1 : tunables   24   12    0 : 
slabdata      0      0      0
size-4096             42     42   4096    1    1 : tunables   24   12    0 : 
slabdata     42     42      0
size-2048(DMA)         0      0   2048    2    1 : tunables   24   12    0 : 
slabdata      0      0      0
size-2048             20     20   2048    2    1 : tunables   24   12    0 : 
slabdata     10     10      0
size-1024(DMA)         0      0   1024    4    1 : tunables   54   27    0 : 
slabdata      0      0      0
size-1024            156    156   1024    4    1 : tunables   54   27    0 : 
slabdata     39     39      0
size-512(DMA)          0      0    512    8    1 : tunables   54   27    0 : 
slabdata      0      0      0
size-512             282    536    512    8    1 : tunables   54   27    0 : 
slabdata     67     67      0
size-256(DMA)          0      0    256   15    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-256             780    780    256   15    1 : tunables  120   60    0 : 
slabdata     52     52      0
size-128(DMA)          0      0    128   31    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-128            1061   1085    128   31    1 : tunables  120   60    0 : 
slabdata     35     35      0
size-64(DMA)           0      0     64   61    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-64              491    671     64   61    1 : tunables  120   60    0 : 
slabdata     11     11      0
size-32(DMA)           0      0     32  119    1 : tunables  120   60    0 : 
slabdata      0      0      0
size-32            23680  23681     32  119    1 : tunables  120   60    0 : 
slabdata    199    199      0
kmem_cache           124    124    128   31    1 : tunables  120   60    0 : 
slabdata      4      4      0