Intel optimiert Hadoop für Xeon-Prozessoren

Die Intel Distribution for Apache Hadoop ist insbesondere für die eigenen Prozessoren optimiert und soll “das Beste aus Intel-Hardware und -Software für höhere Leistung und Sicherheit” bieten. Intel folgt damit EMC, das kurz zuvor mit Pivotal HD gegen den etablierten Hadoop-Distributor Cloudera antrat.

Intel beschreibt seine Distribution als optimiert für die aktuellen Xeon-Chips. Ihre Netzwerk- und IO-Technologien sollen die Analyse großer Datenmengen erheblich beschleunigen. Sie unterstützen das Hadoop Distributed File System und sollen eine sichere Analyse ohne Leistungsverluste erlauben, indem sie eine komplette chipbasierte Verschlüsselung mit Intels AES-NI (AES New Instructions) ermöglichen. Laut Intel verkürzt sich durch diese Kombination von Hard- und Software die Analyse von einem Terabyte Daten, die zuvor über vier Stunden beanspruchte, auf nur noch sieben Minuten.

Quelle: Intel.

Seine Verbesserungen will der Chiphersteller der Apache-Community als Open Source zur Verfügung stellen, sie können daher auch in andere Distributionen Eingang finden. Als Zusatztool verspricht der Intel Manager for Apapache Hadoop eine einfachere Bereitstellung, Konfiguration und Überwachung des Clusters. Der Active Tuner for Hadoop soll automatisch die optimale Leistung abrufen.

Wie zuvor EMC nannte auch Intel fast zwei Dutzend Partner, die seine Distribution integrieren und den Einsatz in Public und Private Cloud-Umgebungen ermöglichen wollen. Zu ihnen gehören Amazon, Cisco, Cray, Dell, Infosys, Red Hat und SAP. Auf der Ebene der Anwendungslösungen gebe es “andere, die das weit besser können als wir”, erklärte Boyd Davis, Vice President von Intels Architecture Group.

[mit Material von Rachel King, ZDNet.com]

Tipp: Wie gut kennen Sie sich mit Prozessoren aus? Überprüfen Sie Ihr Wissen – mit dem Quiz auf silicon.de.

Redaktion

Recent Posts

Bau-Spezialist Schöck: Migration von SAP ECC ERP auf S/4HANA

Bau- und Fertigungsspezialist investiert in die S/4HANA-Migration und geht mit RISE WITH SAP in die…

2 Tagen ago

Pure Storage: Cloud, KI und Energieeffizienz

Trends 2025: Rasante Entwicklungen bei Automatisierung, KI und in vielen anderen Bereichen lassen Unternehmen nicht…

3 Tagen ago

GenKI verbessert Datenmanagement und Angebotsgenauigkeit

DHL Supply Chain nutzt generative KI-Anwendungen für Datenbereinigung und präzisere Beantwortung von Angebotsanforderungen (RFQ).

4 Tagen ago

Rolls-Royce Power Systems nutzt industrielle KI aus der IFS Cloud​

Marke mtu will globale Serviceabläufe optimieren und strategische Ziele hinsichtlich Effizienz, Nachhaltigkeit und Wachstum unterstützen.

4 Tagen ago

Thomas-Krenn.AG: viele Pflichten, knappe Ressourcen, mehr freie IT-Welt

IT-Infrastruktur-Trends 2025: Open-Source-Projekte sowie aufwändige regulatorische und Pflichtaufgaben werden das Jahr prägen.

4 Tagen ago

Stadt Kempen nutzt Onsite Colocation-Lösung

IT-Systeme werden vor Ort in einem hochsicheren IT-Safe betrieben, ohne auf bauliche Maßnahmen wie die…

5 Tagen ago