results/20110305/README

   1 Tests to evaluate the importance of various BlueSky features, so
   2 different features are turned off for the benchmark runs.
   3
   4 20110305-west-fullsegments-4G
   5 Test to S3-US-West, 4 GB disk cache, but all fetches from S3 are full
   6 segments instead of byte ranges, and the complete segments are stored to
   7 the disk cache.  So there are multiple effects: first, for a random
   8 workload there is more garbage data taking up cache space; second,
   9 fetches from S3 take longer which increases read latencies.
  10
  11     --- a/bluesky/log.c
  12     +++ b/bluesky/log.c
  13     @@ -651,7 +651,7 @@
  14          BlueSkyRCStr *str = NULL;
  15          int location = 0;
  16          size_t file_offset = 0, file_size = 0;
  17     -    gboolean range_request = TRUE;
  18     +    gboolean range_request = FALSE;
  19
  20          if (page_size == 0) {
  21              page_size = getpagesize();
  22
  23     Sat Mar 05 17:20:01 PST 2011
  24      Executing run 1 of 25 ...  done
  25     Sat Mar 05 17:32:59 PST 2011
  26      Executing run 2 of 25 ...  done
  27     Sat Mar 05 17:47:27 PST 2011
  28      Executing run 3 of 25 ...  done
  29     Sat Mar 05 18:01:20 PST 2011
  30      Executing run 4 of 25 ...  done
  31     Sat Mar 05 18:14:38 PST 2011
  32      Executing run 5 of 25 ...  done
  33     Sat Mar 05 18:28:56 PST 2011
  34      Executing run 6 of 25 ...  done
  35     Sat Mar 05 18:43:20 PST 2011
  36      Executing run 7 of 25 ...  done
  37     Sat Mar 05 18:56:59 PST 2011
  38      Executing run 8 of 25 ...  done
  39     Sat Mar 05 19:11:18 PST 2011
  40      Executing run 9 of 25 ...  done
  41     Sat Mar 05 19:25:20 PST 2011
  42      Executing run 10 of 25 ...  done
  43     Sat Mar 05 19:39:26 PST 2011
  44      SfsManager shutting down ...
  45
  46     Cloudlog cache: 0 dirty, 0 writeback, 0 journal, 1734715 cloud
  47     All segments have been flushed, journal < 12924 is clean
  48     Ending cache size: 4191588 kB
  49
  50     Proxy statistics:
  51     Store[s3:mvrable-bluesky-west]: GETS: count=21781 sum=88260767105
  52     Store[s3:mvrable-bluesky-west]: PUTS: count=13788 sum=55866496509
  53     NFS RPC Messages In: count=2741556 sum=52779236892
  54     NFS RPC Messages Out: count=2741556 sum=1931572500
  55
  56 20110305-west-nogrouping-4G
  57 All objects written out to separate log segments, to simulate storage
  58 that is not log-structured.
  59
  60   (runs of 10..50/10 ops)
  61     Cloudlog cache: 0 dirty, 0 writeback, 0 journal, 296986 cloud
  62     All segments have been flushed, journal < 2254 is clean
  63     Ending cache size: 4190572 kB
  64
  65     Proxy statistics:
  66     Store[s3:mvrable-bluesky-west]: GETS: count=745 sum=17229569
  67     Store[s3:mvrable-bluesky-west]: PUTS: count=343683 sum=9649158666
  68     NFS RPC Messages In: count=492087 sum=9174696132
  69     NFS RPC Messages Out: count=492087 sum=577322960
  70
  71
  72 Repeat run at 50 ops:
  73     All segments have been flushed, journal < 1430 is clean
  74     Ending cache size: 4190572 kB
  75
  76     Proxy statistics:
  77     Store[s3:mvrable-bluesky-west]: GETS: count=1124 sum=24190660
  78     Store[s3:mvrable-bluesky-west]: PUTS: count=205132 sum=6011691408
  79     NFS RPC Messages In: count=253370 sum=5915763308
  80     NFS RPC Messages Out: count=253370 sum=202442048
  81