Performacevergleich SSD und SAS?

ThomasChr · Jan 15th 2018

Das ist ein RS1000 - kann mich hier nicht beklagen:

Code

test: (g=0): rw=randrw, bs=4K-4K/4K-4K/4K-4K, ioengine=libaio, iodepth=64
fio-2.2.10
Starting 1 process
test: Laying out IO file(s) (1 file(s) / 4096MB)
Jobs: 1 (f=1): [m(1)] [100.0% done] [28876KB/9336KB/0KB /s] [7219/2334/0 iops] [eta 00m:00s]
test: (groupid=0, jobs=1): err= 0: pid=3465: Mon Jan 15 15:33:27 2018
  read : io=3071.7MB, bw=23318KB/s, iops=5829, runt=134889msec
  write: io=1024.4MB, bw=7776.2KB/s, iops=1944, runt=134889msec
  cpu          : usr=2.56%, sys=9.99%, ctx=639883, majf=0, minf=9
  IO depths    : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%
     issued    : total=r=786347/w=262229/d=0, short=r=0/w=0/d=0, drop=r=0/w=0/d=0
     latency   : target=0, window=0, percentile=100.00%, depth=64

Run status group 0 (all jobs):
   READ: io=3071.7MB, aggrb=23318KB/s, minb=23318KB/s, maxb=23318KB/s, mint=134889msec, maxt=134889msec
  WRITE: io=1024.4MB, aggrb=7776KB/s, minb=7776KB/s, maxb=7776KB/s, mint=134889msec, maxt=134889msec

Disk stats (read/write):
  sda: ios=784924/261816, merge=0/26, ticks=6428296/2151776, in_queue=8580328, util=100.00%

Display More

mightyBroccoli · Jan 15th 2018

ThomasChr ist das ein RS 1000 mit SSD?

Ich bin echt total verwirrt, da ich eine kleine private Cloud damit hoste und schon kleine Bilder höheren iowait erzeugen.

ThomasChr · Jan 15th 2018

@Gemüse:

Jep: RS 1000 SSD G7 SE

chrko · Jan 16th 2018

Ein RS 1000 SSD G7SEa3

Code

fio --randrepeat=1 --ioengine=libaio --direct=1 --gtod_reduce=1 --name=test --filename=test --bs=4k --iodepth=64 --size=4G --readwrite=randrw --rwmixread=75
test: (g=0): rw=randrw, bs=4K-4K/4K-4K/4K-4K, ioengine=libaio, iodepth=64
fio-2.16
Starting 1 process
test: Laying out IO file(s) (1 file(s) / 4096MB)
Jobs: 1 (f=1): [m(1)] [100.0% done] [42196KB/14280KB/0KB /s] [10.6K/3570/0 iops] [eta 00m:00s]
test: (groupid=0, jobs=1): err= 0: pid=16265: Tue Jan 16 09:07:07 2018
  read : io=3070.4MB, bw=38158KB/s, iops=9539, runt= 82394msec
  write: io=1025.8MB, bw=12748KB/s, iops=3186, runt= 82394msec
  cpu          : usr=3.65%, sys=21.33%, ctx=532905, majf=0, minf=9
  IO depths    : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%
     issued    : total=r=785996/w=262580/d=0, short=r=0/w=0/d=0, drop=r=0/w=0/d=0
     latency   : target=0, window=0, percentile=100.00%, depth=64
Run status group 0 (all jobs):
   READ: io=3070.4MB, aggrb=38157KB/s, minb=38157KB/s, maxb=38157KB/s, mint=82394msec, maxt=82394msec
  WRITE: io=1025.8MB, aggrb=12747KB/s, minb=12747KB/s, maxb=12747KB/s, mint=82394msec, maxt=82394msec
Disk stats (read/write):
  sda: ios=784192/262149, merge=8/70, ticks=3925852/1271560, in_queue=5198060, util=99.87%

Display More

und ein Root-Server 1000 Xmas16

Code

fio --randrepeat=1 --ioengine=libaio --direct=1 --gtod_reduce=1 --name=test --filename=test --bs=4k --iodepth=64 --size=4G --readwrite=randrw --rwmixread=75
test: (g=0): rw=randrw, bs=4K-4K/4K-4K/4K-4K, ioengine=libaio, iodepth=64
fio-2.16
Starting 1 process
test: Laying out IO file(s) (1 file(s) / 4096MB)
Jobs: 1 (f=1): [m(1)] [100.0% done] [6222KB/1981KB/0KB /s] [1555/495/0 iops] [eta 00m:00s]
test: (groupid=0, jobs=1): err= 0: pid=22432: Tue Jan 16 09:12:40 2018
  read : io=3070.4MB, bw=5455.9KB/s, iops=1363, runt=576340msec
  write: io=1025.8MB, bw=1822.5KB/s, iops=455, runt=576340msec
  cpu          : usr=1.86%, sys=7.90%, ctx=524868, majf=0, minf=7
  IO depths    : 1=0.1%, 2=0.1%, 4=0.1%, 8=0.1%, 16=0.1%, 32=0.1%, >=64=100.0%
     submit    : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.0%, >=64=0.0%
     complete  : 0=0.0%, 4=100.0%, 8=0.0%, 16=0.0%, 32=0.0%, 64=0.1%, >=64=0.0%
     issued    : total=r=785996/w=262580/d=0, short=r=0/w=0/d=0, drop=r=0/w=0/d=0
     latency   : target=0, window=0, percentile=100.00%, depth=64
Run status group 0 (all jobs):
   READ: io=3070.4MB, aggrb=5455KB/s, minb=5455KB/s, maxb=5455KB/s, mint=576340msec, maxt=576340msec
  WRITE: io=1025.8MB, aggrb=1822KB/s, minb=1822KB/s, maxb=1822KB/s, mint=576340msec, maxt=576340msec
Disk stats (read/write):
  sda: ios=786552/264148, merge=856/1550, ticks=32973356/3114092, in_queue=36089540, util=100.00%

Display More

Ich habe leider keine Messwerte von letzten Jahr vor Spectre / Meltdown; der Root 1000 Xmas ist aber schon seit längerem gefühlt so schnarchig…

[netcup] Felix P. · Jan 16th 2018

Guten Morgen,

bei SAS können wir leider keine IOPS garantieren. Uns ist Stand heute auch nicht bekannt, wie sich der Fix gegen Meltdown auswirkt. Laut Intel soll es Einbußen bei den IOPS geben.

Die Server mit SSD-Festplatten haben bei unseren Messungen nur einen minimalen Nachlass im Vergleich vor dem Meltdown-Fix erhalten.

Wer schnelle Festplatten benötigt sollte in jedem Fall einen Server mit SSDs buchen. Größere Daten können hier auf den optional dazu buchbaren Storagespace ausgelagert werden.

Mit freundlichen Grüßen

Felix Preuß

oliver.g · Jan 16th 2018

Die Leistungseinbußen bei SAS kann ich leider beobachten. Unter Proxmox durchgängig bis 10% IO Delay im Normalbetrieb, vor den Updates waren es bis ~4%

[netcup] Felix P. Ist der eingebundene Storagespace eigentlich so schnell wie eine SAS Platte? Oder gibt es da auch Unterschiede in der Geschwindigkeit? SSD für Arbeitsdaten und "quasi SAS"=Storagespace für größere Daten wäre ja ein sinnvolles Konzept.