Tool to measure 32kb read latencies via the kernel
[bluesky.git] / results / 20110317 / CLEANER
1 Proxy run as:
2
3 BLUESKY_CACHE_SIZE=$((8 * 1024 * 1024)) BLUESKY_TARGET=s3:mvrable-bluesky-west BLUESKY_STATS_OUT=/export2/20110317-cleaner.stats /scratch/bluesky.git/nfs3/nfsproxy
4
5 Create 1 GB of files:
6 for i in {0..1023}; do dd if=/dev/zero of=file-$i bs=1M count=1; done
7
8 Thu Mar 17 21:26:36 PDT 2011
9 Log files written: up to log-00000000-00000261
10
11 Thu Mar 17 21:29:00 PDT 2011
12 Dirty 25% of files with cleanbench.py
13 Log files written up to log-00000000-00000329
14
15 Thu Mar 17 21:29:45 PDT 2011
16 Run cleaner, completes around Thu Mar 17 21:32:35 PDT 2011
17 max log segments: log-00000000-00000329, log-00000001-00000030
18
19 ==============================================================================
20
21 Proxy run as:
22
23 BLUESKY_CACHE_SIZE=$((4 * 1024 * 1024)) BLUESKY_TARGET=s3:mvrable-bluesky-west BLUESKY_STATS_OUT=/export2/20110317-cleaner.stats /scratch/bluesky.git/nfs3/nfsproxy
24
25 Create 1 GB of files:
26 for i in {0..1023}; do dd if=/dev/zero of=file-$i bs=1M count=1; done
27 Fri Mar 18 00:44:58 PDT 2011
28
29 Log files written: up to log-00000000-00002066
30
31 Fri Mar 18 00:49:14 PDT 2011
32 Dirty 25% of files with cleanbench.py
33 Log files written up to log-00000000-00002585
34
35 Run cleaner
36 max log segments: log-00000000-00002585, log-00000001-00000235
37 Fri Mar 18 01:15:04 PDT 2011
38
39 ==============================================================================
40
41 Proxy run as:
42
43 BLUESKY_CACHE_SIZE=$((4 * 1024 * 1024)) BLUESKY_TARGET=s3:mvrable-bluesky-west BLUESKY_STATS_OUT=/export2/20110318-cleaner.stats /scratch/bluesky.git/nfs3/nfsproxy
44
45 Create 1 GB of files:
46 for i in {0..8191}; do dd if=/dev/zero of=file-$i bs=1M count=1; done
47 Fri Mar 18 01:47:03 PDT 2011
48
49 Log files written: up to log-00000000-00002067
50
51 Dirty 25% of files with cleanbench.py
52 Log files written up to log-00000000-00002586
53 Fri Mar 18 01:50:25 PDT 2011
54
55 Run cleaner
56 Fri Mar 18 01:51:20 PDT 2011
57 writeout shortly before Fri Mar 18 02:16:55 PDT 2011
58 max log segments: 
59
60 ==============================================================================
61
62 Proxy run as:
63
64 BLUESKY_CACHE_SIZE=$((1024 * 1024)) BLUESKY_TARGET=s3:mvrable-bluesky-west BLUESKY_STATS_OUT=/export2/20110318-cleaner.stats /scratch/bluesky.git/nfs3/nfsproxy
65
66 Create 1 GB of files:
67 for i in {0..1023}; do dd if=/dev/zero of=file-$i bs=1M count=1; done
68 Fri Mar 18 01:47:03 PDT 2011
69
70 Log files up to: log-00000000-00000265 log-00000001-00000002
71
72 Fri Mar 18 09:18:02 PDT 2011
73 Dirty 25% of files with cleanbench.py
74 Fri Mar 18 09:19:30 PDT 2011
75 Log files up to: log-00000000-00000336 log-00000001-00000002
76
77 Run cleaner
78 Fri Mar 18 09:20:22 PDT 2011
79 Fri Mar 18 09:24:23 PDT 2011
80 max log segments: log-00000000-00000337 log-00000001-00000036
81
82 Re-run cleaner (to check for deletable segments):
83 Fri Mar 18 09:25:48 PDT 2011