Die Intel Distribution for Apache Hadoop ist insbesondere für die eigenen Prozessoren optimiert und soll “das Beste aus Intel-Hardware und -Software für höhere Leistung und Sicherheit” bieten. Intel folgt damit EMC, das kurz zuvor mit Pivotal HD gegen den etablierten Hadoop-Distributor Cloudera antrat.
Intel beschreibt seine Distribution als optimiert für die aktuellen Xeon-Chips. Ihre Netzwerk- und IO-Technologien sollen die Analyse großer Datenmengen erheblich beschleunigen. Sie unterstützen das Hadoop Distributed File System und sollen eine sichere Analyse ohne Leistungsverluste erlauben, indem sie eine komplette chipbasierte Verschlüsselung mit Intels AES-NI (AES New Instructions) ermöglichen. Laut Intel verkürzt sich durch diese Kombination von Hard- und Software die Analyse von einem Terabyte Daten, die zuvor über vier Stunden beanspruchte, auf nur noch sieben Minuten.
Seine Verbesserungen will der Chiphersteller der Apache-Community als Open Source zur Verfügung stellen, sie können daher auch in andere Distributionen Eingang finden. Als Zusatztool verspricht der Intel Manager for Apapache Hadoop eine einfachere Bereitstellung, Konfiguration und Überwachung des Clusters. Der Active Tuner for Hadoop soll automatisch die optimale Leistung abrufen.
Wie zuvor EMC nannte auch Intel fast zwei Dutzend Partner, die seine Distribution integrieren und den Einsatz in Public und Private Cloud-Umgebungen ermöglichen wollen. Zu ihnen gehören Amazon, Cisco, Cray, Dell, Infosys, Red Hat und SAP. Auf der Ebene der Anwendungslösungen gebe es “andere, die das weit besser können als wir”, erklärte Boyd Davis, Vice President von Intels Architecture Group.
[mit Material von Rachel King, ZDNet.com]
Tipp: Wie gut kennen Sie sich mit Prozessoren aus? Überprüfen Sie Ihr Wissen – mit dem Quiz auf silicon.de.
Fraunhofer-Forschende arbeiten an einer Webplattform, die die Lebensqualität von Menschen mit Parkinson verbessern soll.
Mit gemeinsamen Angeboten in den Bereichen Vermarktung, KI, Content und Cloud will man "unabhängigen Journalismus…
Bereits seit einigen Jahren führt die RGF Staffing Germany Schulungen durch, um die eigenen Mitarbeiter…
Das Europäische Forschungsprojekt XMANAI hat den Blick in die KI geöffnet und macht ihre Entscheidungsprozesse…
Hacker nutzen LLM weniger als visionäre Alleskönner-Technologien, sondern als effiziente Werkzeuge zum Verbessern von Standardangriffen,…
Der "ARIS AI Companion" soll alle Mitarbeitenden darin befähigen, Prozesse zu analysieren und Ineffizienzen aufzudecken.