MarkLogic Deployment Accelerator für Hadoop

Mit dem MarkLogic Deployment Accelerator für Hadoop schaffen Sie den erreichen Sie den Einstieg in Projekte, die auf der MarkLogic Enterprise NoSQL-Datenbank und Hadoop aufbauen. Wir beraten Sie in Bezug auf die technische Projektleitung, stellen Architektur- und Design-Unterlagen bereit und bieten Unterstützung bei der Implementierung, damit Sie innerhalb kürzester Zeit einen ersten Prototyp entwickeln können.

Ganz gleich, ob Sie Hadoop mit MarkLogic für den Echtzeit-Zugriff auf Daten und Analysen oder Ihre bestehende MarkLogic Implementierung mit Hadoop um kosteneffektiven Speicher erweitern möchten – MarkLogic macht es möglich.

PDF herunterladen


Überblick

MarkLogic Consulting entwickelt seit über einem Jahrzehnt umfangreiche Echtzeit-Systeme für unstrukturierte und heterogene Daten. Wir verfügen über langjährige Erfahrung in der Bereitstellung von Mehrwert für unsere Anwender; wir wenden bewährte Best Practices an und wissen genau, worauf es ankommt. All diese Erfahrung fließt in den Accelerator für Hadoop ein und macht ihn zur ersten Wahl für kombinierte Hadoop und MarkLogic Implementierungen.

MarkLogic lässt sich wie Pig, Hive, HBase oder andere Technologien in das Hadoop Ökosystem integrieren. Mit MarkLogic kann MapReduce direkt auf Daten in MarkLogic angewendet werden, und MarkLogic Forests können direkt in HDFS gespeichert werden. Die MarkLogic Content Pump verschiebt die Daten unter Verwendung von massiv-parallelen Prozessen zwischen den verschiedenen Speicherebenen in MarkLogic oder Hadoop. Auf diese Weise erhalten Sie die Geschwindigkeit und horizontale Skalierbarkeit, die für große Implementierungen erforderlich sind.

Im Rahmen des Deployment Accelerator-Service analysieren MarkLogic Berater die verschiedenen Datenformate und -typen, wie sie verwendet werden und mit welchen Komponenten sie am besten verarbeitet werden können. Wir stellen die Design-Unterlagen bereit, konfigurieren die MarkLogic Tools und Technologien und entwickeln funktionsfähige Prototypen, um Ihnen den Einstieg zu erleichtern.


Details

Der MarkLogic Deployment Accelerator-Service für Hadoop richtet sich nach Ihren individuellen Anforderungen und danach, wie Sie MarkLogic und Hadoop kombinieren möchten.

Erweiterung eines bestehenden Hadoop Ökosystems durch MarkLogic

Wenn Sie Hadoop verwenden, möchten Sie nun vermutlich dafür sorgen, dass alle Ihre Daten verwertbar und nutzbar werden. Sowohl Hadoop als auch MarkLogic können Daten in jedem beliebigen Format verarbeiten. Dies ist natürlich ein großer Vorteil, doch gleichzeitig bringen die Vielfalt und Struktur der Daten zahlreiche Herausforderungen mit sich. Das Zusammenführen aller Daten an einem zentralen Ort allein reicht nicht, um die mit heterogenen oder unstrukturierten Daten einhergehenden Probleme zu bewältigen oder die Daten in Echtzeit oder dynamisch verfügbar zu machen.

MarkLogic Consulting-Services verfügt über mehr als ein Jahrzehnt Erfahrung darin, vielfältige, unstrukturierte Daten umgehend verwertbar zu machen. Sie profitieren dabei von derselben Flexibilität wie beim Hinzufügen neuer Daten in Hadoop/HDFS. MarkLogic Server kann Daten direkt aus HDFS extrahieren, in HDFS speichern und Hadoop MapReduce auf MarkLogic Partitionen in oder außerhalb von HDFS anwenden. Der Hadoop Accelerator sorgt dank all dieser und weiterer Funktionen dafür, dass Sie die spezifischen Probleme Ihres Unternehmens im Zusammenhang mit Big Data lösen können.

Erweiterung einer bestehenden MarkLogic Implementierung durch Hadoop

Wenn Sie bereits einen MarkLogic Cluster einsetzen, zeigen wir Ihnen, wie Sie mit Hadoop die Funktionalität von MarkLogic optimieren oder kostengünstiger nutzen können. MarkLogic Implementierungen sind in der Regel auf Echtzeit-Datenzugriff und -Analysen fokussiert, anstatt auf Staging-, ETL- und Batch-Prozesse. Durch den gezielten Einsatz von Hadoop können Sie MarkLogic um diese Prozesse erweitern und dadurch die Betriebskosten senken.

  • Daten in MarkLogic Implementierungen können in Hadoop HDFS gespeichert werden. Dadurch lassen sich im Vergleich zu SAN Kosteneinsparungen erzielen.
  • Hadoop MapReduce-Prozesse können direkt auf MarkLogic Daten angewendet werden. Dafür werden massiv-parallele Prozesse verwendet, die nur geringfügige Programmierung erfordern.
  • Ältere und weniger häufig gebrauchte Daten können für die langsamere Batch-Verarbeitung von MarkLogic in einen separaten Hadoop Cluster verschoben werden, während Ihre wichtigsten Daten mit der vollen Leistung von MarkLogic verarbeitet werden.

Der MarkLogic Deployment Accelerator für Hadoop umfasst Empfehlungen zu diesen und weiteren technologischen Entscheidungen und ermöglicht es Ihnen so, Daten im richtigen Format an den richtigen Ort zu verschieben und die geeigneten Tools einzusetzen.


MarkLogic Implementierung

Design und Architektur

Der Deployment Accelerator-Service umfasst die Bereitstellung von Design- und Architektur-Informationen über den Datenfluss, Transformation und den Verarbeitungsmodellen. Das Team von MarkLogic analysiert die verfügbaren Daten, ermittelt ihren Ursprung und bestimmt, wie sie verwendet werden. Anhand dieser Informationen entwickeln wir ein Design, das speziell auf Ihr Unternehmen zugeschnitten ist.

Einrichtung und Konfiguration

Nach der Genehmigung des Designs ermitteln die MarkLogic Berater die wichtigsten Aufgaben für die Einrichtung und Konfiguration. Dazu zählen möglicherweise das Einrichten von MarkLogic Server, das Konfigurieren des Systems für die Kommunikation mit Hadoop oder das Speichern von Daten in HDFS sowie das Implementieren von MarkLogic Content Pump zum Verschieben von Daten.

Implementierung

Damit Sie Ihre Implementierung von Hadoop und MarkLogic möglichst schnell einsetzen können, arbeiten wir gemeinsam mit Ihren Entwicklern an Datenflüssen und Prozessen und an der Kategorisierung von Daten als Services oder Anwendungen für den Informationszugriff. Durch diese enge Zusammenarbeit gewinnen Ihre Entwickler zusätzlich an Erfahrung und profitieren von funktionsfähigem Code, den sie für zukünftige Projekte nutzen können. Während in der Design- und Architekturphase Empfehlungen für die gesamte Hadoop Infrastruktur bereitgestellt werden, fokussieren wir uns in der Implementierungsphase auf die Technologien von MarkLogic.


Kontakt

To get started with MarkLogic Consulting Services or to get more information, you can contact your account representative, give us a call at 1-877-992-8885, or email us at sales@marklogic.com.