Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data...

7
Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden wollen, brauchen hohe Leistung und zuverlässige und skalierbare Infrastrukturen. Die Suche nach der besten Architektur und dem fähigsten Lösungsanbieter kann langwierig sein und benötigt viele Ressourcen. Apache Hadoop ist ein Framework, das die verteilte Bearbeitung großer Datenmengen auf Computerclustern durch die Verwendung einfacher Programmiermodelle ermöglicht. Es wurde dazu entwickelt, von einem einzelnen bis hin zu Tausenden von Systemen skalierbar zu sein. Statt sich auf die Zuverlässigkeit der Hardware zu verlassen, verfolgt Hadoop den Ansatz, das es selbst Fehlfunktionen auf der Anwendungsebene entdeckt und behebt und somit einen Hochverfügbarkeitsdienst auf der obersten Ebene des Clusters bietet. Die Hauptmerkmale von Hadoop sind: Zuverlässigkeit Verfügbarkeit Skalierbarkeit Verteilbarkeit Flexibilität

Transcript of Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data...

Page 1: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

Supermicro Hadoop Lösungen

Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie.

Unternehmen, die Hadoop Lösungen anwenden wollen, brauchen hohe Leistung und zuverlässige und skalierbare Infrastrukturen.

Die Suche nach der besten Architektur und dem fähigsten Lösungsanbieter kann langwierig sein und benötigt viele Ressourcen.

Apache Hadoop ist ein Framework, das die verteilte Bearbeitung großer Datenmengen auf Computerclustern durch die Verwendung einfacher Programmiermodelle

ermöglicht.

Es wurde dazu entwickelt, von einem einzelnen bis hin zu Tausenden von Systemen skalierbar zu sein.

Statt sich auf die Zuverlässigkeit der Hardware zu verlassen, verfolgt Hadoop den Ansatz, das es selbst Fehlfunktionen auf der Anwendungsebene entdeckt und behebt und

somit einen Hochverfügbarkeitsdienst auf der obersten Ebene des Clusters bietet.

Die Hauptmerkmale von Hadoop sind:

• Zuverlässigkeit

• Verfügbarkeit

• Skalierbarkeit

• Verteilbarkeit

• Flexibilität

Page 2: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

Supermicro Hadoop Lösungen

Die Supermicro Hadoop Lösungen sind zertifizierte Server, Storage, Netzwerkkomponenten, Software und Dienstleistungen, die alle Probleme bei der Entwicklung und

Anwendung einer tatsächlich skalierbaren Big Data Infrastruktur lösen.

Die Lösungen umfassen die komplette Clusteranpassung, Hardwaretests, Updates von BIOS und Firmware, Netzwerkkonfiguration und Vorinstallation der gewünschten

Hadoop Distribution wie Cloudera und Hortonworks.

Page 3: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

Supermicro Hadoop Cluster Lösung

(bis zu 1,72PB Storage und 9,2TB Arbeitsspeicher)

Hauptvorteile

• von Grund auf entwickelt für die optimale Server- und

Clusterkonfiguration

• bestes Preis-Leistungs- und Preis-Kapazitätsverhältnis

mit marktführenden Server- und Storageplattformen

• fortschrittliche Architektur basierend auf den neuesten

Technologien wie z.B. Xeon E5-2600V4, SAS3, NVMe

Clusterbaukasten

Data Fabric

Supermicro 10GbE Switch (1-2)

48 Ports 10G SFP+/10GBase-T

Management Netzwerk

Supermicro 1GbE Switch (1)

Management Node

Supermicro Intelligent Management

Supermicro Superserver 1U single Xeon

Hadoop Name Nodes

Supermicro Superserver oder UltraServer (3)

1U dual Xeon E5-2600V4, Hardware Raid,

redundante Netzteile

Hadoop Data Nodes

Supermicro TwinPro, FatTwin, UltraServer

oder SSG (34) 2U-4U dual Xeon E5-2600V4,

dual 10GbE

Supermicro SuperRack

42U Rack mit Metered PDUs

Page 4: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

Supermicro Hadoop Clusterkonfigurationen

Es gibt 7 unterschiedlich angepasste Clusterkonfigurationen,

um bei jeder Big Data Lösung die optimale Leistung zu liefern:

• PoC Cluster

• Cluster mit grossem Speicher und Storage

• Cluster mit hoher Kapazität

• ausgewogene Cluster

• IO optimierte Cluster

• Cluster mit grossem Speicher

• Compute Cluster mit hoher Dichte

technische

Spezifikationen der

Hadoop Cluster

PoC ClusterCluster mit hoher

Kapazität IO optimierte Cluster

Compute Cluster mit

hoher Dichte

Cluster mit grossem

Speicher und Storage

ausgewogene

Cluster

Cluster mit grossem

Speicher / Dual 10G

Modellnummer SRS-14TP08-HADP-01 SRS-42SG18-HADP-01 SRS-42SG18-HADP-02 SRS-42FT36-HADP-01 SRS-42FT36-HADP-02 SRS-42TP36-HADP-01 SRS-42TP34-HADP-02

Daten Nodes 8 18 18 36 36 36 34

Formfaktor 2U TwinPro 2U SSG 4U FatTwin 2U TwinPro

CPU 2x E5-2630V4 2x E5-2630V4 2x E5-2650V4 2x E5-2680V4 2x E5-2650V4 2x E5-2630V4 2x E5-2650V4

RAM 128GB 128GB 128GB 128GB 256GB 128GB 128GB

Drive Bays 6x 3,5" 16x 3,5" 24x 2,5" 8x 3,5" 8x 3,5" 6x 3,5" 12 x 2,5"

Gesamtzahl

Laufwerke48 288 432 288 288 216 408

Gesamtzahl Kerne 160 360 432 1008 864 720 816

Gesamtzahl RAM 1TB 2,3TB 2,3TB 4,6TB 9,2TB 4,6TB 8,7TB

Gesamtzahl

Kapazität (Kapazität

pro Laufwerk)

192TB (4TB) 1,72PB (6TB) 864TB (2TB) 1,15PB (4TB) 1,72PB (6TB) 864TB (4TB) 816TB (2TB)

Name Node 2x 1U 3x 1U 3x 1U 3x 1U 3x 1U 3x 1U 3x 1U

Management Node 1x 1U 1x 1U 1x 1U 1x 1U 1x 1U 1x 1U 1x 1U

Switches 1x 24 Port GbE1x 48 Port GbE 1x 48 Port GbE 1x 48 Port GbE

1x 48 Port 10GBase-T 1x 48 Port 10G SFP+ 2x 48 Port 10G SFP+

Rack 14U 42U

PDU 1x 2U 30A 2x 50A 208V dreiphasig Metered

Page 5: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

System SYS-F628R3-RTB+ SYS-6028TP-DNCR SYS-2028TP-DC1R SYS-2028BT-HNC0R+ SYS-6028U-E1CNR4T+ SYS-6028U-E1CNRT+

Einsatzbereiche /

Beschreibung

Daten Node / 4x hot-pluggable

Nodes in 4U

Daten Node / 2x hot-pluggable

Nodes in 2U

Daten Node / 2x hot-pluggable

Nodes in 2U Daten Node, Storage Node Daten Node, Storage Node Daten Node, Storage Node

Prozessor-

unterstützung

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s pro Node

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s pro Node

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s pro Node

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

RAM 16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

Drive Bays8x hot-swap 3,5“ Bays pro

Node

6x SAS3 oder 4x NVMe + 2x

SAS3 hot-swap 3,5" Drive Bays

pro Node

8x hot-swap 2,5" SAS3 + 4x

hot-swap 2,5” SATA3 Drive

Bays pro Node

12x hot-swap 3,5” SAS3 + 4x

hot-swap 3,5” SAS3 (optional

NVMe) Drive Bays

8x hot-swap 3,5" + 4x hot-swap

3,5” NVMe Drive Bays

8x hot-swap 3,5" + 4x hot-swap

3,5” NVMe Drive Bays

Steckplätze1x PCI-E 3.0 x16 LP, 1x PCI-E 3.0

x8 µLP pro Node

1x PCI-E 3.0 x16, 1x PCI-E 3.0 x8

pro Node

2x PCI-E 3.0 x16 (1x GPU

optional), 1x PCI-E 3.0 x8 pro

Node

1x PCI-E 3.0 x16, 6x PCI-E 3.0 x86x PCI-E 3.0 x8 (4x FH, 1x LP, 1x

LP intern)

7x PCI-E 3.0 x8 (5x FH, 1x LP, 1x

LP intern)

Netzteil1280W Redundant Platinum

Level (95%)

1600W Redundant Titanium

Level (96%)

1280W Redundant Platinum

Level (94%)

1000W Redundant Titanium

Level (96%)

1000W Redundant Titanium

Level (96%)

1000W Redundant Titanium

Level (96%)

Schnittstellen2x GbE, 1x Video, 2x USB3.0

pro Node

Broadcom HW SAS3 Raid

Controller, 2x GbE, 1x Video,

1x COM, 2x USB3.0

pro Node

Broadcom HW SAS3 Raid

Controller, 2x GbE, 1x Video,

1x COM, 2x USB3.0

pro Node

Broadcom HW SAS3 Raid

Controller, 2x 10GBase-T, 1x

Video, 1x COM, 3x USB3.0 (2x

hinten, 1x Type A), 2x USB2.0

4x 10GBase-T, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10GBase-T, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

System-

management

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

pro Node

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

pro Node

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

pro Node

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

technische

Spezifikationen

der Server

Page 6: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

System SSG-6028R-E1CR12L SSG-2028R-E1CR24L SYS-1028R-WC1R SYS-1018R-WC0R SYS-1028U-TRT+ SYS-1028U-TNRTP+

Einsatzbereiche /

BeschreibungDaten Node, Storage Node Daten Node, Storage Node Name Node Management Node Ultra Name Node Ultra Name Node

Prozessor-

unterstützung

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Single Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

RAM 16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

16 DIMM Slots, bis zu 2TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

8 DIMM Slots, bis zu 1TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

Drive Bays

8x hot-swap 3,5“ SAS3 + 4x

hot-swap 3,5” NVMe Drive

Bays, optional 2x hot-swap

2,5” hinten

24x hot-swap 2,5" Drive Bays,

optional 2x hot-swap 2,5“

hinten

8x hot-swap 2,5" SAS3 + 2x

hot-swap 2,5” SATA3 Drive

Bays

10x hot-swap 2,5" Drive Bays 10x hot-swap 2,5" Drive Bays8x hot-swap 2,5" + 2x hot-swap

2,5” NVMe Drive Bays

Steckplätze 1x PCI-E 3.0 x16, 6x PCI-E 3.0 x8 1x PCI-E 3.0 x16, 6x PCI-E 3.0 x8 2x PCI-E 3.0 x16 FHHL 2x PCI-E 3.0 x16, 1x PCI-E 3.0 x8 2x PCI-E 3.0 x16, 2x PCI-E 3.0 x8 2x PCI-E 3.0 x16, 2x PCI-E 3.0 x8

Netzteil920W Redundant Platinum

Level (94%)

920W Redundant Titanium

Level (94%)

700W Redundant Platinum

Level (94%)

750W Redundant Platinum

Level (94%)

750W Redundant Platinum

Level (94%)

750W Redundant Platinum

Level (94%)

Schnittstellen

Broadcom HW SAS3 Raid

Controller, 2x 10GBase-T, 1x

Video, 1x COM, 5x USB3.0 (2x

hinten, 2x Header, 1x Type A)

Broadcom SAS3 IT Mode

Controller, 2x 10GBase-T, 1x

Video, 1x COM, 2x USB3.0, 2x

USB2.0, 1x Type A

Broadcom HW SAS3 Raid

Controller, 2x GbE, 1x Video, 6x

USB3.0 (4x hinten, 2x Header)

2x GbE, 1x Video, 1x COM, 4x

USB3.0 , 2x USB2.0

2x 10GBase-T, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10G SFP+, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

System-

management

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

technische

Spezifikationen

der Server

Page 7: Supermicro Hadoop Lösungen - sysob · Supermicro Hadoop Lösungen Die Frage ist nicht, ob Big Data Analytik angewendet wird, sondern wie. Unternehmen, die Hadoop Lösungen anwenden

System SYS-6018U-TRT+ SYS-6018U-TRTP+ SYS-2028U-TRT+ SYS-2028U-TRTP+ SYS-6028U-TRT+ SYS-6028U-TRTP+

Einsatzbereiche /

BeschreibungUltra Name Node Ultra Name Node Ultra Daten Node Ultra Daten Node Ultra Daten Node Ultra Daten Node

Prozessor-

unterstützung

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

Dual Socket R3 (LGA 2011),

Intel® Xeon® Prozessor

E5-2600 v4/v3 Familie, QPI

bis zu 9,6GT/s

RAM 24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

24 DIMM Slots, bis zu 3TB ECC

3DS LRDIMM oder RDIMM

DDR4-2400MHz pro Node

Drive Bays 4x hot-swap 3,5“ Drive Bays 4x hot-swap 3,5“ Drive Bays 24x hot-swap 2,5“ Drive Bays 24x hot-swap 2,5“ Drive Bays 12x hot-swap 3,5" Drive Bays 12x hot-swap 3,5" Drive Bays

Steckplätze 2x PCI-E 3.0 x16, 2x PCI-E 3.0 x8 2x PCI-E 3.0 x16, 2x PCI-E 3.0 x8 1x PCI-E 3.0 x16, 7x PCI-E 3.0 x8 1x PCI-E 3.0 x16, 7x PCI-E 3.0 x8 1x PCI-E 3.0 x16, 7x PCI-E 3.0 x8 1x PCI-E 3.0 x16, 7x PCI-E 3.0 x8

Netzteil750W Redundant Platinum

Level (94%)

750W Redundant Platinum

Level (94%)

1000W Redundant Titanium

Level (96%)

1000W Redundant Titanium

Level (96%)

1000W Redundant Titanium

Level (96%)

1000W Redundant Titanium

Level (96%)

Schnittstellen2x 10GBase-T, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10G SFP+, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10GBase-T, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10G SFP+, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10GBase-T, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

2x 10G SFP+, 1x Video, 5x

USB3.0 (2x hinten, 2x Header,

1x Type A)

System-

management

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

integriertes Server

Management Tool

(IPMI 2.0, KVM/media over

LAN) mit dediziertem LAN Port

technische

Spezifikationen

der Server