[Gelöst]Daten Durchsatz Dell H310 und Xeon 3450

Status
Not open for further replies.

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Hi,

Nachdem ich endlich den Controller in den IT mode habe wollte ich die 8 HDD's in RAIDz2 betreiben. Also alles eingerichtet und mal 40GB auf das NAS kopiert. Die Geschwindigkeit Liegt bei ca. 11mb/s...

Mir kommt das was wenig vor?

Neben den Xeon 3450 sind auch noch 16GB ECC Ram drin.

Was sagt ihr dazu? Oder muss ich da noch was einstellen oder so?

Wäre super wenn ihr mal eure Erfahungen dazu schreiben könnt :)
Im www habe ich leider nichts zielführendes dazu gefunden...
Grüße
Tobias
 
Last edited:

warri

Guru
Joined
Jun 6, 2011
Messages
1,193
Übers Netzwerk kopiert? Wenn ja, welches Protokoll? Dann würde ich als erstes mal einen iperf Test laufen lassen um zu sehen ob der Engpass am Netzwerk liegt.

Welche Hardware läuft noch in dem Server?
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Hi,
ja übers Netzwerk Kopiert. Hängt an der FritzBox 6490 Cabel und im haus ist GBit Lan.

Die Hartware ist folgende:
Intel Xeon X3420P
Intel Serverboard S3420GP
16GB ECC RAM
Dell Pec H310 (IT Mode)
8* Seagate Constellation SE 500GB
Supermicro SC743 T-665B

In der Netzwerzusammenfassung steht das IPv4 benutzt wird mit dem Adapter em0 und der Adresse xxx.xxx.xxx.56/24


Wie mache ich unter Freenas ein iperf Test? Ich bin in dem Thema NAS und co sehr neu :oops:
 

MrToddsFriends

Documentation Browser
Joined
Jan 12, 2015
Messages
1,338
Die Geschwindigkeit Liegt bei ca. 11mb/s...

Mir kommt das was wenig vor?

11 MByte/s Datendurchsatz beim Kopieren großer Dateien klingt verdächtig nach einer Netzwerkverbindung mit 100 MBit/s. Diesen Verdacht kann man mit ifconfig an einer Shell schneller erhärten als mit iperf.

Code:
% ifconfig
igb0: flags=8943<UP,BROADCAST,RUNNING,PROMISC,SIMPLEX,MULTICAST> metric 0 mtu 1500
  options=2400b9<RXCSUM,VLAN_MTU,VLAN_HWTAGGING,JUMBO_MTU,VLAN_HWCSUM,VLAN_HWTSO,RXCSUM_IPV6>
  ether 0c:c4:7a:31:7e:3c
  inet 192.168.178.80 netmask 0xffffff00 broadcast 192.168.178.255
  nd6 options=9<PERFORMNUD,IFDISABLED>
  media: Ethernet autoselect (1000baseT <full-duplex>)
  status: active
lo0: flags=8049<UP,LOOPBACK,RUNNING,MULTICAST> metric 0 mtu 16384
  options=600003<RXCSUM,TXCSUM,RXCSUM_IPV6,TXCSUM_IPV6>
  inet6 ::1 prefixlen 128
  inet6 fe80::1%lo0 prefixlen 64 scopeid 0x5
  inet 127.0.0.1 netmask 0xff000000
  nd6 options=21<PERFORMNUD,AUTO_LINKLOCAL>


Wie sieht der Output bei Dir im Vergleich aus, insbesondere die Zeile des benutzten Interfaces, die mit media beginnt? Evtl. gibt auch die Farbe der Leuchtdioden an den Ports (Mainboard/Switch) über 100 MBit/1000 MBit Aufschluss.
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
11 MByte/s Datendurchsatz beim Kopieren großer Dateien klingt verdächtig nach einer Netzwerkverbindung mit 100 MBit/s.

Wie sieht der Output bei Dir im Vergleich aus, insbesondere die Zeile des benutzten Interfaces, die mit media beginnt? Evtl. gibt auch die Farbe der Leuchtdioden an den Ports (Mainboard/Switch) über 100 MBit/1000 MBit Aufschluss.

Also, laut Mainboard ist die Anbindung bei 1000Mbit/s. Die LED ist Gelb.

Was müsste ich genau eingeben im Sehll bei Freenas, damit ihr damit was anfangen könnt?
 

MrToddsFriends

Documentation Browser
Joined
Jan 12, 2015
Messages
1,338
Also, laut Mainboard ist die Anbindung bei 1000Mbit/s. Die LED ist Gelb.

Wenn Du das der Doku zum Board zweifelsfrei entnehmen kannst, dass gelb für 1000 MBit/s steht.

Was müsste ich genau eingeben im Sehll bei Freenas, damit ihr damit was anfangen könnt?

Einfach nur ifconfig wie im Beispiel gezeigt.
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Wenn Du das der Doku zum Board zweifelsfrei entnehmen kannst, dass gelb für 1000 MBit/s steht.

Ja das kann man im Dokument auf Seite 24/25 nachlesen "Yellow, On, 1000Mbit/sec data rate is selected"
http://www.intel.com/content/dam/su...ards/server/s3420gp/sb/s3420gp_userguide1.pdf

Einfach nur ifconfig wie im Beispiel gezeigt.

Guten morgen, ich habe Ipconfig
eingegeben, Sorry

Bei ifconfig kommt das raus:

Code:
[root@Frings ~]# ifconfig                                                    
em0: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500    
        options=4219b<RXCSUM,TXCSUM,VLAN_MTU,VLAN_HWTAGGING,VLAN_HWCSUM,TSO4,WOL
_MAGIC,VLAN_HWTSO>                                                          
        ether 00:15:17:f9:28:05                                              
        inet 192.168.178.56 netmask 0xffffff00 broadcast 192.168.178.255    
        nd6 options=9<PERFORMNUD,IFDISABLED>                                
        media: Ethernet autoselect (1000baseT <full-duplex>)                
        status: active                                                      
em1: flags=8843<UP,BROADCAST,RUNNING,SIMPLEX,MULTICAST> metric 0 mtu 1500    
        options=4219b<RXCSUM,TXCSUM,VLAN_MTU,VLAN_HWTAGGING,VLAN_HWCSUM,TSO4,WOL
_MAGIC,VLAN_HWTSO>                                                          
        ether 00:15:17:f9:28:04                                              
        nd6 options=9<PERFORMNUD,IFDISABLED>                                
        media: Ethernet autoselect                                          
        status: no carrier                                                  
lo0: flags=8049<UP,LOOPBACK,RUNNING,MULTICAST> metric 0 mtu 16384            
        options=600003<RXCSUM,TXCSUM,RXCSUM_IPV6,TXCSUM_IPV6>                
        inet6 ::1 prefixlen 128                                              
        inet6 fe80::1%lo0 prefixlen 64 scopeid 0x3                          
        inet 127.0.0.1 netmask 0xff000000                                    
        nd6 options=21<PERFORMNUD,AUTO_LINKLOCAL>                                                                                       
[root@Frings ~]# 


Die Leitungen sind auch alle samt CAT.6E Inklusiver Dose. Das habe ich selber gelegt und gemessen. Daran sollte es nicht liegen.
 

MrToddsFriends

Documentation Browser
Joined
Jan 12, 2015
Messages
1,338
Hmmm, damit ist die am einfachsten zu identifizierende Fehlerquelle ausgeschlossen. Erst mal gute Nacht ...
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93

MrToddsFriends

Documentation Browser
Joined
Jan 12, 2015
Messages
1,338
Dann weiter mit iperf, also Messung des Netzwerkdurchsatzes. SMB kann bei der Performance u. U. eine Rolle spielen, bei den genannten Randbedingungen (GBit-Netzwerk und kopieren großer Dateien) allerdings meiner Erfahrung nach nicht.

Für eine iperf-Messung braucht man zwei Rechner, auf denen iperf läuft: Auf dem einem im Client-Modus und auf dem anderen im Server-Modus. Bei FreeNAS ist iperf in einer 2.x-Version im Lieferumfang dabei, für diverse Betriebssysteme (auch Windows) kann man sich iperf z.B. hier herunterladen (ich verwende bevorzugt ebenfalls eine 2.x-Version):
https://iperf.fr/iperf-download.php

Auf dem Rechner, der den iperf-Server spielen soll (kann das NAS oder ein Client-PC sein) startet man iperf z.B. so:
iperf -s -w 256K
Und auf dem Rechner, der den iperf-Client spielen soll so:
iperf -c <hostname> -w 256K -t 10 -i 1

Beispiel mit iperf-Server auf dem NAS (blunzn) und iperf-Cient auf Client-PC unter Windows 10 (scr11):

Code:
D:\Temp\iperf\iperf-2.0.9-win64>iperf --version
iperf version 2.0.9 (1 June 2016) pthreads

D:\Temp\iperf\iperf-2.0.9-win64>iperf -c blunzn -w 256K -t 10 -i 1
------------------------------------------------------------
Client connecting to blunzn, TCP port 5001
TCP window size:  256 KByte
------------------------------------------------------------
[  3] local 192.168.178.35 port 51887 connected with 192.168.178.80 port 5001
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0- 1.0 sec   113 MBytes   950 Mbits/sec
[  3]  1.0- 2.0 sec   113 MBytes   949 Mbits/sec
[  3]  2.0- 3.0 sec   113 MBytes   949 Mbits/sec
[  3]  3.0- 4.0 sec   113 MBytes   949 Mbits/sec
[  3]  4.0- 5.0 sec   113 MBytes   948 Mbits/sec
[  3]  5.0- 6.0 sec   113 MBytes   949 Mbits/sec
[  3]  6.0- 7.0 sec   113 MBytes   949 Mbits/sec
[  3]  7.0- 8.0 sec   113 MBytes   949 Mbits/sec
[  3]  8.0- 9.0 sec   113 MBytes   948 Mbits/sec
[  3]  0.0-10.0 sec  1.10 GBytes   949 Mbits/sec


Beispiel mit iperf-Server auf Client-PC unter Windows 10 (scr11) und iperf-Client auf dem NAS (blunzn):

Code:
scr@blunzn:~ % iperf --version
iperf version 2.0.5 (08 Jul 2010) pthreads
scr@blunzn:~ % iperf -c scr11 -w 256K -t 10 -i 1
------------------------------------------------------------
Client connecting to scr11, TCP port 5001
TCP window size:  257 KByte (WARNING: requested  256 KByte)
------------------------------------------------------------
[  3] local 192.168.178.80 port 15919 connected with 192.168.178.35 port 5001
[ ID] Interval       Transfer     Bandwidth
[  3]  0.0- 1.0 sec   112 MBytes   942 Mbits/sec
[  3]  1.0- 2.0 sec   112 MBytes   941 Mbits/sec
[  3]  2.0- 3.0 sec   112 MBytes   942 Mbits/sec
[  3]  3.0- 4.0 sec   112 MBytes   942 Mbits/sec
[  3]  4.0- 5.0 sec   112 MBytes   942 Mbits/sec
[  3]  5.0- 6.0 sec   112 MBytes   942 Mbits/sec
[  3]  6.0- 7.0 sec   112 MBytes   942 Mbits/sec
[  3]  7.0- 8.0 sec   112 MBytes   942 Mbits/sec
[  3]  8.0- 9.0 sec   112 MBytes   941 Mbits/sec
[  3]  9.0-10.0 sec   112 MBytes   942 Mbits/sec
[  3]  0.0-10.0 sec  1.10 GBytes   942 Mbits/sec
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Also, da bekomme ich bei Freenas:
Code:
[root@Frings ~]# iperf -s -w 256k                                               
------------------------------------------------------------                   
Server listening on TCP port 5001                                               
TCP window size:  256 KByte                                                     
------------------------------------------------------------                   
[  7] local 192.168.178.56 port 5001 connected with 192.168.178.34 port 53226   
[  8] local 192.168.178.56 port 5001 connected with 192.168.178.34 port 53225   
[ ID] Interval       Transfer     Bandwidth                                     
[  7]  0.0-10.3 sec  10.0 MBytes  8.16 Mbits/sec                               
[  8]  0.0-10.3 sec  10.0 MBytes  8.16 Mbits/sec                               
[SUM]  0.0-10.3 sec  20.0 MBytes  16.3 Mbits/sec                               
^C[root@Frings ~]#                                    



Und unter Windows:
Code:
------------------------------------------------------------
Windows QoS iperf build, licensed to Trial User trial.user@10Mbps.max   

Client connecting to 192.168.178.56, TCP port 5001 DSCP 0
TCP window size: 0.01 MByte
------------------------------------------------------------
[284] local 192.168.178.34 port 53197 connected with 192.168.178.56 port 5001
[272] local 192.168.178.34 port 53196 connected with 192.168.178.56 port 5001
[ ID] Interval       Transfer     Bandwidth
[272]  0.0- 2.0 sec  1.91 MBytes  8.03 Mbits/sec
[284]  0.0- 2.0 sec  1.91 MBytes  8.03 Mbits/sec
[SUM]  0.0- 2.0 sec  3.83 MBytes  16.1 Mbits/sec
[284]  2.0- 4.0 sec  1.91 MBytes  8.00 Mbits/sec
[272]  2.0- 4.0 sec  1.91 MBytes  8.00 Mbits/sec
[SUM]  2.0- 4.0 sec  3.81 MBytes  16.0 Mbits/sec
[284]  4.0- 6.0 sec  1.91 MBytes  8.03 Mbits/sec
[272]  4.0- 6.0 sec  1.91 MBytes  8.03 Mbits/sec
[SUM]  4.0- 6.0 sec  3.83 MBytes  16.1 Mbits/sec
[272]  6.0- 8.0 sec  1.91 MBytes  8.00 Mbits/sec
[284]  6.0- 8.0 sec  1.91 MBytes  8.00 Mbits/sec
[SUM]  6.0- 8.0 sec  3.81 MBytes  16.0 Mbits/sec
[284]  8.0-10.0 sec  1.91 MBytes  8.00 Mbits/sec
[272]  8.0-10.0 sec  1.91 MBytes  8.00 Mbits/sec
[SUM]  8.0-10.0 sec  3.81 MBytes  16.0 Mbits/sec
[272]  0.0-10.0 sec  9.55 MBytes  8.01 Mbits/sec
[284]  0.0-10.0 sec  9.56 MBytes  8.00 Mbits/sec
[SUM]  0.0-10.0 sec  19.1 MBytes  16.0 Mbits/sec
------------------------------------------------------------
Windows QoS iperf build, licensed to Trial User trial.user@10Mbps.max   

Client connecting to 192.168.178.56, TCP port 5001 DSCP 0
TCP window size: 0.25 MByte
------------------------------------------------------------
[272] local 192.168.178.34 port 53225 connected with 192.168.178.56 port 5001
[284] local 192.168.178.34 port 53226 connected with 192.168.178.56 port 5001
[ ID] Interval       Transfer     Bandwidth
[284]  0.0- 2.0 sec  2.00 MBytes  8.39 Mbits/sec
[272]  0.0- 2.0 sec  2.00 MBytes  8.39 Mbits/sec
[SUM]  0.0- 2.0 sec  4.00 MBytes  16.8 Mbits/sec
[272]  2.0- 4.0 sec  2.00 MBytes  8.39 Mbits/sec
[284]  2.0- 4.0 sec  2.00 MBytes  8.39 Mbits/sec
[SUM]  2.0- 4.0 sec  4.00 MBytes  16.8 Mbits/sec
[272]  4.0- 6.0 sec  1.75 MBytes  7.34 Mbits/sec
[284]  4.0- 6.0 sec  1.75 MBytes  7.34 Mbits/sec
[SUM]  4.0- 6.0 sec  3.50 MBytes  14.7 Mbits/sec
[272]  6.0- 8.0 sec  2.00 MBytes  8.39 Mbits/sec
[284]  6.0- 8.0 sec  2.00 MBytes  8.39 Mbits/sec
[SUM]  6.0- 8.0 sec  4.00 MBytes  16.8 Mbits/sec
[272]  8.0-10.0 sec  2.00 MBytes  8.39 Mbits/sec
[272]  0.0-10.2 sec  10.0 MBytes  8.20 Mbits/sec
[284]  8.0-10.0 sec  2.00 MBytes  8.39 Mbits/sec
[SUM]  8.0-10.0 sec  4.00 MBytes  16.8 Mbits/sec
[284]  0.0-10.2 sec  10.0 MBytes  8.20 Mbits/sec
[SUM]  0.0-10.2 sec  20.0 MBytes  16.4 Mbits/sec

 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Das Problem ist gelöst und selten dämlich wie ich finde...

Nachdem ich mal in die Fritzbox hereingesehen haben, habe ich festgestellt, dass mein pc Auf "green-Mode" stand. D.h. ich bin nur mit 100Mbits angebunden. Nach dem Umstelle konnte ich mit 108MBit/s auf das Freenas schreiben. Das sollten ja realistisch sein :)

Jetzt bleibt nur noch die Frage, 2x Raidz2 mit je 4HDD´s oder einmal RaidZ2 mit 8 HDD´s
 
Last edited:

MrToddsFriends

Documentation Browser
Joined
Jan 12, 2015
Messages
1,338
Nach dem Umstelle konnte ich mit 108MBit/s auf das Freenas schreiben. Das sollten ja realistisch sein :)

Doch eher 100 MByte/s? Dann würde es passen.

Jetzt bleibt nur noch die Frage, 2x Raidz2 mit je 4HDD´s oder einmal RaidZ2 mit 8 HDD´s

Ein einzelnes RaidZ2 vdev mit 8 Platten ist zwar wirtschaftlicher, die Hauptfrage dabei dürfte aber sein, wie Du zukünftige Erweiterungen der Kapazität handhaben willst.
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Doch eher 100 MByte/s? Dann würde es passen.
Natürlich MByte/s. Sorry war da im flaschen Film...

Ein einzelnes RaidZ2 vdev mit 8 Platten ist zwar wirtschaftlicher, die Hauptfrage dabei dürfte aber sein, wie Du zukünftige Erweiterungen der Kapazität handhaben willst.

Ich habe mich jetzt zu 2x ein Raidz2 vdev entscheiden. Grund war, dass ich so beim ausfrüssten ohne den pool zu verlieren, nur 4 platten kaufen muss. Da man ja bei Raidz2 mit 4 HDDs auch 2 Platten hat, die mir hops gehen können, sollte ich auch eine entsprechend "sichere" Redundanz haben...
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Ein Backup solltest du dennoch haben


Gesendet von iPhone mit Tapatalk
Das steht ja außer Frage. Nur soll ja im besten Fall das NAS reichen als Backup auch wenn mal eine Platte hops geht
 

snaptec

Guru
Joined
Nov 30, 2015
Messages
502
HDD Defekt ist nur ein Faktor. Hier geht es dann eher um Ausfallzeit die minimiert wird.
Du brauchst auch Lösungen gegen andere Hardware Defekte und äußere Einflüsse wie Brand, Diebstahl, Blitz. Je nachdem was dir deine Daten Wert sind.
2 4xraidz2 ist da Overkill, aber ja, du bist flexibler im erweitern. Wenngleich viel mehr für Parity drauf geht.
Kannst überlegen direkt Mirrors zu machen. Selbe Nutzkapazität, bei etwas weniger Redundanz und erheblich mehr Performance. Als Plus kannst du immer 2 HDDs erweitern.
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Kannst überlegen direkt Mirrors zu machen. Selbe Nutzkapazität, bei etwas weniger Redundanz und erheblich mehr Performance. Als Plus kannst du immer 2 HDDs erweitern.

Was würde den etwas weniger Redundanz bedeuten? Das Problem ist das das Gehäuse voll ist. Könnte ich den bei Mirros auch 2 platten z.b. tauschen die gegenüber liegen? Wahrscheinlich nicht alleine oder?
 

snaptec

Guru
Joined
Nov 30, 2015
Messages
502
Bin mir gerade nicht sicher ob ich dich richtig verstehe.


Was würde den etwas weniger Redundanz bedeuten?

Bei einem 4x raidz2 können irgendwelche 2 HDDs verrecken.
Bei 4 HDDs in 2 mirrors kann pro Vdev eine HDD sterben. Also grundsätzlich auch 2, nur eben nicht 2 in einem Vdev.

Was meinst du mit gegenüber?
Du kannst eine HDD mit einer größeren ersetzen. Danach die 2te und hast dann ein größeres Vdev.
 

stobei

Explorer
Joined
Jan 25, 2017
Messages
93
Achso und im raidz2 können 2 beliebige platten verrecken oder?

Ja mirros sond doch immer 2 platten und diese 2 gruppen werden dann zusammen addiert. Kann ich den auch eine 2er gruppe alleone tauschen? Also aus 2x500+2x500 z.b. 2x1Tb +2x500Gb machen?
 
Status
Not open for further replies.
Top