OVH Community, your new community space.

isgenug 24G ESXi 4.1 virtuelle hd - Datendurchsatz


gnugu13
21.06.11, 16:08
Danke für die Info,
muss mir das näher ansehen.
Zwischenzeitlich habe ich die Suse VM mittels scp einfach kopiert auf einen anderen Server um überhaupt was gesichert zu haben. Darin ist ein ispcp
welches mühervoll von einem VHCS2 upgerated (was für ein Wort) wurde.
Da stecken 2 Manntage mit Fehlersuche drin!

Zitat Zitat von skneo
Der Converter hat eine merkwürdige Zeitberechnung die geht runter selbst wenn ich im LAN nur 5 Minuten brauchen würde steht dort 1 - 2 Stunden Restzeit.

Ich benutzte zum Backup der VM Server wenn es nur mal einer ist die Software http://www.trilead.com/Editions/ und für automatisches Backups benutzte ich http://communities.vmware.com/docs/DOC-8760 und wenn es nur mit vMA geht http://communities.vmware.com/docs/DOC-9843 allerdings auf ein Mounted NFS Share.

skneo
21.06.11, 10:50
Der Converter hat eine merkwürdige Zeitberechnung die geht runter selbst wenn ich im LAN nur 5 Minuten brauchen würde steht dort 1 - 2 Stunden Restzeit.

Ich benutzte zum Backup der VM Server wenn es nur mal einer ist die Software http://www.trilead.com/Editions/ und für automatisches Backups benutzte ich http://communities.vmware.com/docs/DOC-8760 und wenn es nur mit vMA geht http://communities.vmware.com/docs/DOC-9843 allerdings auf ein Mounted NFS Share.

gnugu13
20.06.11, 21:15
An das BIOS kommt nan da nicht ran.
aber ich habe verschiedene tests durchgeführt - die ergebnisse überraschen.
sorry für kleinschreibung - nein nicht die taste klemmt - mein kater liegt auf dem schoss und ich kann jetzt nur mit rechts schreiben/tippen.

also ich paste mal mein log:
angefangen mit dem rescue image
-------------------------SNIP---------------------------------
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.66 seconds = 26.19 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.79 seconds = 25.49 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.93 seconds = 24.77 MB/sec
root@rescue:~#

/dev/sda:
Timing buffered disk reads: 122 MB in 3.25 seconds = 37.58 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.62 seconds = 26.43 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.79 seconds = 25.45 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.77 seconds = 25.58 MB/sec

-------------------------SNIP---------------------------------
VergeleichsPlatten in deiversen anderen physikalischen Maschinen

______________OVH________________________
/dev/sda:
Timing buffered disk reads: 264 MB in 3.01 seconds = 87.80 MB/sec
ns38633:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 266 MB in 3.00 seconds = 88.57 MB/sec
ns38633:~ #
______________OVH2_______________________
ks358901:~ # hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 270 MB in 3.02 seconds = 89.37 MB/sec
ks358901:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 272 MB in 3.02 seconds = 90.09 MB/sec
ks358901:~ #

______________DATENTUX_________________
/dev/sda:
Timing buffered disk reads: 336 MB in 3.02 seconds = 111.27 MB/sec
bastux2:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 378 MB in 3.00 seconds = 125.79 MB/sec
bastux2:~ #

-------------------------SNIP---------------------------------

Technische Daten der Platte
Secification

Specifications 3TB 2TB
Model Number ST33000651AS ST32000641AS
Interface Options SATA 6Gb/s NCQ SATA 6Gb/s NCQ
Performance
Transfer Rate, Max Ext (MB/s) 600 600
Max Sustained Data Rate OD (MB/s) 149 138
Cache (MB) 64 64
Average Latency (ms) 4.16 4.16
Spindle Speed (RPM) 7200 7200
Configuration/Organization
Heads/Disks 10/5 8/4
Bytes per Sector 512 512
Reliability/Data Integrity
Load/Unload Cycles 300K 300K
Nonrecoverable Read Errors
per Bits Read, Max 1 per 10E14 1 per 10E14
Annualized Failure Rate (AFR) 0.34% 0.34%
Mean Time Between Failures (hours) 750,000 750,000
Limited Warranty (years) 5 5
Power Management
Startup Current +12 Peak (A, ±10%) 2.0 2.8
Standby, Average (W) 0.55 0.57
Operating, Average (W) 9.23 9.23
Idle, Average (W) 7.37 6.39
Environmental
Temperature (°C)
Operating 5 to 60
Nonoperating –40 to 70
Shock (Gs)
Operating: 2 ms 63
Nonoperating: 2 ms 300


-------------------------SNIP---------------------------------
Hardware:
Intel Corporation 82801JI (ICH10 Family) 4 port SATA IDE
~ # esxcfg-scsidevs -a
vmhba0 ata_piix link-n/a sata.vmhba0 (0:0:31.2) Intel Corporation ICH10 4 port SATA IDE Controller
vmhba1 ata_piix link-n/a sata.vmhba1 (0:0:31.5) Intel Corporation ICH10 2 port SATA IDE Controller
vmhba32 ata_piix link-n/a sata.vmhba32 (0:0:31.2) Intel Corporation ICH10 4 port SATA IDE Controller
vmhba33 ata_piix link-n/a sata.vmhba33 (0:0:31.5) Intel Corporation ICH10 2 port SATA IDE Controller

~ # esxcfg-scsidevs -l
t10.ATA_____ST32000641AS__________________________ ______________9WM65KDK
Device Type: Direct-Access
Size: 1907729 MB
Display Name: Local ATA Disk (t10.ATA_____ST32000641AS_________________________ _______________9WM65KDK)
Multipath Plugin: NMP
Console Device: /vmfs/devices/disks/t10.ATA_____ST32000641AS__________________________ ______________9WM65KDK
Devfs Path: /vmfs/devices/disks/t10.ATA_____ST32000641AS__________________________ ______________9WM65KDK
Vendor: ATA Model: ST32000641AS Revis: CC13
SCSI Level: 5 Is Pseudo: false Status: on
Is RDM Capable: false Is Removable: false
Is Local: true
Other Names:
vml.010000000020202020202020202020202039574d36354b 444b535433323030
VAAI Status: unknown
----------------------------------------------------------------------------
~ # vmkload_mod -l
Name Used Size (kb)
vmkernel 51 11006
procfs 2 16
vmkapiv1_0_0_0_vmkernel_shim0 32
vmklinux 16 664
random 1 32
usb 4 112
ehci-hcd 0 36
usb-uhci 0 24
hid 0 24
dm 2 12
nmp 22 120
vmw_satp_local 5 8
vmw_satp_default_aa 0 8
vmw_psp_lib 8 12
vmw_psp_fixed 5 12
vmw_psp_rr 0 16
vmw_psp_mru 0 12
vmw_psp_fixed_ap 0 12
vmw_satp_alua 0 20
vmw_satp_cx 0 28
libata 1 92
usb-storage 0 60
vfat 1 36
mask_path_plugin 0 8
vaai_filter 0 16
vmw_vaaip_emc 0 8
vmkapiv1_0_0_0_nmp_shim 0 8
vmci 0 112
iscsi_trans 3 52
hub 1 8
netsched 1 16
e1000e 0 132
iscsi_linux 0 16
ata_piix 4 16
lvmdriver 0 80
deltadisk 0 40
multiextent 0 12
dvsdev 0 12
etherswitch 3 180
shaper 0 28
cdp 5 100
tcpip3 4 816
dvfilter 2 72
vmkapiv1_0_0_0_dvfilter_shim0 8
vmkibft 0 16
vmfs3 0 260
nfsclient 0 96
vmkstatelogger 1 116
migrate 2 252
cbt 0 12
-----------------------------------------------

-------------------------SNIP---------------------------------
Neustart Rescue
Oh Staun
/dev/sda:
Timing buffered disk reads: 388 MB in 3.01 seconds = 128.74 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.01 seconds = 129.57 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.01 seconds = 129.46 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.01 seconds = 129.59 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.01 seconds = 129.58 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.01 seconds = 129.43 MB/sec
-------------------------SNIP---------------------------------
Noch mal gebooted

root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 388 MB in 3.01 seconds = 129.06 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.00 seconds = 129.81 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 390 MB in 3.01 seconds = 129.46 MB/sec
root@rescue:~#


-------------------------SNIP---------------------------------
Boot vKVM mit DSL Linux
als HD Devices /dev/hda

50 MB/s

Boot vKVM SuSE rescue
(Tastatur belegung ist kryptisch)
als HD Device /dev/sda

82 MB/s


-------------------------SNIP---------------------------------
und nun nach dem Neustart Werte die erwartet werden
Nichts geändert!
Unerklärlich?????????

ispcp:~ # hdparm -tT /dev/sda

/dev/sda:
Timing cached reads: 17280 MB in 2.00 seconds = 8647.60 MB/sec
Timing buffered disk reads: 1018 MB in 3.00 seconds = 339.22 MB/sec
ispcp:~ # hdparm -tT /dev/sda

/dev/sda:
Timing cached reads: 17254 MB in 2.00 seconds = 8634.42 MB/sec
Timing buffered disk reads: 1022 MB in 3.01 seconds = 339.50 MB/sec
ispcp:~ # hdparm -tT /dev/sda

/dev/sda:
Timing cached reads: 17196 MB in 2.00 seconds = 8606.12 MB/sec
Timing buffered disk reads: 1012 MB in 3.04 seconds = 333.05 MB/sec
ispcp:~ #
-------------------------SNIP---------------------------------


was soll ich sagen,
mir kommt das so vor, wie ein neues auto (früher) wo der motor noch eingefahren werden musste um die leistung zu erbringen
mich lässt es insofer stutzen, dass ich keinerlei Änderungen am system durchgeführt hatte , abgesehen von den neustarts.
sollte hier ein board / chipset problem vorliegen?
nun sind die werte so, wie sie sein sollen und die virtuellen maschinen rennen.
wow.
was für ne oddysee.
der einzige nachteil noch.
wenn ich versuche die virtuellen maschinen mit vmware vcenter converter herunterzuladen, ist der der meinung er bräuchte für die suse (ca 60gb)
ca 5 tage ?????????
was is denn das?
wie bekomme ich die denn dann gesichert?
eure meinung interessiert mich !!
sorry nochmal wegen kleinschreibung - der kater zuckt sich aber auch nicht

gnugu13
20.06.11, 17:47
Habe das nur mit aktiverter SuSE VM getestet.
Habe extra eine andere Appliance (Linux) installiert. da war die Platte an einem IDE Interface eingebunden - ähnlich katastrophale Ergebnisse.
Habe mir nun das Rescue System geladen und getestet - physikalisch alles ganz - aber die Platte (physikalisch) unterdurchschnittlicher Durchsatz.
Beim Rescue sieht man nicht, welcher Treiber zum EInsatz kommt, da keine Modulare Struktur.
dmesg:
-------------------------SNIP---------------------------------

...
Uniform Multi-Platform E-IDE driver
ide_generic: please use "probe_mask=0x3f" module parameter for probing all legacy ISA IDE ports
Probing IDE interface ide0...
ide0 at 0x1f0-0x1f7,0x3f6 on irq 14
Probing IDE interface ide1...
ide1 at 0x170-0x177,0x376 on irq 15
ide-gd driver 1.18
...
ata_piix 0000:00:1f.2: version 2.13
ata_piix 0000:00:1f.2: PCI INT B -> GSI 19 (level, low) -> IRQ 19
ata_piix 0000:00:1f.2: MAP [ P0 P2 P1 P3 ]
ata_piix 0000:00:1f.2: setting latency timer to 64
scsi0 : ata_piix
scsi1 : ata_piix
ata1: SATA max UDMA/133 cmd 0xc000 ctl 0xbc00 bmdma 0xb480 irq 19
ata2: SATA max UDMA/133 cmd 0xb880 ctl 0xb800 bmdma 0xb488 irq 19
ata_piix 0000:00:1f.5: PCI INT B -> GSI 19 (level, low) -> IRQ 19
ata_piix 0000:00:1f.5: MAP [ P0 -- P1 -- ]
ata_piix 0000:00:1f.5: setting latency timer to 64
scsi2 : ata_piix
scsi3 : ata_piix
ata3: SATA max UDMA/133 cmd 0xb000 ctl 0xac00 bmdma 0xa480 irq 19
ata4: SATA max UDMA/133 cmd 0xa880 ctl 0xa800 bmdma 0xa488 irq 19
....
ata2.00: SATA link down (SStatus 0 SControl 300)
ata2.01: SATA link down (SStatus 0 SControl 300)
ata1.00: SATA link up 3.0 Gbps (SStatus 123 SControl 300)
ata1.01: SATA link down (SStatus 0 SControl 300)
ata1.00: ATA-8: ST32000641AS, CC13, max UDMA/133
ata1.00: 3907029168 sectors, multi 16: LBA48 NCQ (depth 0/32)
ata1.00: configured for UDMA/133
scsi 0:0:0:0: Direct-Access ATA ST32000641AS CC13 PQ: 0 ANSI: 5
sd 0:0:0:0: [sda] 3907029168 512-byte logical blocks: (2.00 TB/1.81 TiB)
sd 0:0:0:0: [sda] Write Protect is off
sd 0:0:0:0: [sda] Mode Sense: 00 3a 00 00
sd 0:0:0:0: [sda] Write cache: enabled, read cache: enabled, doesn't support DPO or FUA
...
sda: sda1 < sda5 sda6 sda7 sda8 > sda2 sda3 sda4
sd 0:0:0:0: [sda] Attached SCSI disk
-------------------------SNIP---------------------------------
Soweit ich das sehe ist im ResqueSystem die platte per SATA mit 3 Mbit/s angehangen (kann aber SATA 6!)
Dafür ist der Durchsatz aber viel zu gering:

-------------------------SNIP---------------------------------
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.66 seconds = 26.19 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.79 seconds = 25.49 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.93 seconds = 24.77 MB/sec
root@rescue:~#

/dev/sda:
Timing buffered disk reads: 122 MB in 3.25 seconds = 37.58 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.62 seconds = 26.43 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.79 seconds = 25.45 MB/sec
root@rescue:~# hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 122 MB in 4.77 seconds = 25.58 MB/sec

-------------------------SNIP---------------------------------
VergeleichsPlatten in deiversen anderen physikalischen Maschinen

______________OVH________________________
/dev/sda:
Timing buffered disk reads: 264 MB in 3.01 seconds = 87.80 MB/sec
ns38633:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 266 MB in 3.00 seconds = 88.57 MB/sec
ns38633:~ #
______________OVH2_______________________
ks358901:~ # hdparm -t /dev/sda

/dev/sda:
Timing buffered disk reads: 270 MB in 3.02 seconds = 89.37 MB/sec
ks358901:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 272 MB in 3.02 seconds = 90.09 MB/sec
ks358901:~ #

______________DATENTUX_________________
/dev/sda:
Timing buffered disk reads: 336 MB in 3.02 seconds = 111.27 MB/sec
bastux2:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 378 MB in 3.00 seconds = 125.79 MB/sec
bastux2:~ #

-------------------------SNIP---------------------------------

Technische Daten der Platte
Secification

Specifications 3TB 2TB
Model Number ST33000651AS ST32000641AS
Interface Options SATA 6Gb/s NCQ SATA 6Gb/s NCQ
Performance
Transfer Rate, Max Ext (MB/s) 600 600
Max Sustained Data Rate OD (MB/s) 149 138
Cache (MB) 64 64
Average Latency (ms) 4.16 4.16
Spindle Speed (RPM) 7200 7200
Configuration/Organization
Heads/Disks 10/5 8/4
Bytes per Sector 512 512
Reliability/Data Integrity
Load/Unload Cycles 300K 300K
Nonrecoverable Read Errors
per Bits Read, Max 1 per 10E14 1 per 10E14
Annualized Failure Rate (AFR) 0.34% 0.34%
Mean Time Between Failures (hours) 750,000 750,000
Limited Warranty (years) 5 5
Power Management
Startup Current +12 Peak (A, ±10%) 2.0 2.8
Standby, Average (W) 0.55 0.57
Operating, Average (W) 9.23 9.23
Idle, Average (W) 7.37 6.39
Environmental
Temperature (°C)
Operating 5 to 60
Nonoperating –40 to 70
Shock (Gs)
Operating: 2 ms 63
Nonoperating: 2 ms 300
-------------------------SNIP---------------------------------

Ich werde mal mittels vKVM im BIOS nachsehen.
Bis denne

RockyBaby
20.06.11, 15:49
Habe das gerade mal getestet lokal auf meiner ESXi Maschine.

gleiche Partitionen nur habe ich ubuntu verwendet da ich Suse leider nicht hier habe

komme bei jedem Test auf ~130 MB/s

Eventuell die VM nochmal neu erstellen?

PS: Hast du schnelle Bereitstellung gewählt beim erstellen der HDD?

RockyBaby
19.06.11, 20:39
passiert das auch wenn die anderen VM's aus sind?

Edith: Wenn morgen meine 2 TB HDD kommt werde ich das @home mal testen...

gnugu13
19.06.11, 18:01
Hallo,
ich bin nun Betreiber eines isgenug 24G mit ESXI 4.1 als Grundsystem.
Ich habe in der Virtalisierung drei verschiedene Systeme am laufen.
Bei dem SuSE 11.4 Server habe ich einen sehr schlechten Datendurchsatz.
~1,5 MB/sec

die Parameter des Gastes:
VM-Version : 7
BS: SUSE 11.4
Version Kernel : Linux ispcp 2.6.37.6-0.5-desktop #1 SMP PREEMPT 2011-04-25 21:48:33 +0200 x86_64 x86_64 x86_64 GNU/Linux


SCSI-Controller : LSI Logic Parallel
HDD1 : /dev/sda - 8GB --> /
HDD2 : /dev/sdb - 8GB --> /usr
HDD3 : /dev/sdc - 50GB --> /srv

RAM : 2048MB
CPU's : 2
Netzwerkadapter: 1 - hängt an virtuellem (NAT) Switch

Software : zum Betrieb eines LAMP mit Verwaltung ispCP 1.0.7 OMEGA

Das System scheint immer auf irgend etwas zu warten, bevor ein Task quasi
startet und abgearbeitet wird.
Bei der Untersuchung stellte sich ein extrem langsamer I/O Durchsatz des HDD-Interfaces heraus:
-------------------------SNIP---------------------------------
ispcp:~ # hdparm -tT /dev/sda

/dev/sda:
Timing cached reads: 15158 MB in 2.00 seconds = 7584.73 MB/sec
Timing buffered disk reads: 8 MB in 3.42 seconds = 2.34 MB/sec

/dev/sdb:
Timing cached reads: 3874 MB in 2.00 seconds = 1937.26 MB/sec
Timing buffered disk reads: 4 MB in 10.49 seconds = 390.44 kB/sec

/dev/sdc:
Timing buffered disk reads: 8 MB in 4.02 seconds = 1.99 MB/sec
-------------------------SNIP---------------------------------
Die Werte sind schwankend :
Bsp:
/dev/sdb:
Timing buffered disk reads: 4 MB in 15.62 seconds = 262.18 kB/sec
ispcp:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 4 MB in 8.72 seconds = 469.80 kB/sec
ispcp:~ # hdparm -t /dev/sdb

/dev/sdb:
Timing buffered disk reads: 6 MB in 9.80 seconds = 627.22 kB/sec

Wo könnte ich was ändern , damit der Datendurchsatz besser wird?

Vergleichbar bei mir zu Hause eine Linux Distri:
auf Virtueller Umgebung (VirtualBox)

/dev/sda:
Timing cached reads: 2150 MB in 2.00 seconds = 1076.88 MB/sec
Timing buffered disk reads: 168 MB in 3.01 seconds = 55.82 MB/sec

Hat jemand diese Umgebungskonstellation (isgenug 24G und ESXi 4.1) in Betrieb??

Kann er mir mal vergleichbare Daten nennen?

Den isgenug gibt es leider nicht mit Hardware raid :-( (und die anderen sind mir zu teuer, für das was ich hier vorhabe).

Anmerkung: die physikalische Platte ist eine :
Seagate Barracuda XT ST32000641AS
die schafft lt Angabe: maximaler Durchsatz von 139 MB/s
Quelle:
http://www.tomshardware.de/Hitachi-S...-240481-4.html