Zuhause Persönliche Finanzen Regionen in HBase - Dummies

Regionen in HBase - Dummies

Video: HDInsight: Fast Interactive Queries with Hive on LLAP | Azure Friday 2025

Video: HDInsight: Fast Interactive Queries with Hive on LLAP | Azure Friday 2025
Anonim

RegionServers sind eine Sache, aber Sie müssen auch einen Blick darauf werfen, wie einzelne Regionen funktionieren. In HBase ist eine Tabelle sowohl auf eine Anzahl von RegionServern verteilt als auch aus einzelnen Regionen zusammengesetzt. Wenn Tabellen aufgeteilt werden, werden die Teilungen zu Regionen. Regionen speichern eine Reihe von Schlüssel-Wert-Paaren und jeder RegionServer verwaltet eine konfigurierbare Anzahl von Regionen.

Wie aber sehen die einzelnen Regionen aus? HBase ist ein spaltenfamilienorientierter Datenspeicher, also wie speichern die einzelnen Regionen Schlüssel-Wert-Paare basierend auf den Spaltenfamilien, zu denen sie gehören? Die folgende Abbildung fängt an, diese Fragen zu beantworten und hilft Ihnen, wichtige Informationen über die Architektur von HBase zu verdauen.

HBase ist in Java geschrieben - wie die große Mehrheit der Hadoop-Technologien. Java ist eine objektorientierte Programmiersprache und eine elegante Technologie für verteiltes Rechnen. Wenn Sie also weiterhin mehr über HBase erfahren, denken Sie daran, dass alle Komponenten in der Architektur letztendlich Java-Objekte sind.

Zunächst einmal gibt die obige Abbildung eine ziemlich gute Vorstellung davon, wie die Objekte im Allgemeinen aussehen. Es wird auch deutlich, dass Regionen Daten in Spaltenfamilien trennen und die Daten mithilfe von HFile-Objekten im HDFS speichern.

Wenn Clients Schlüsselwertpaare in das System eingeben, werden die Schlüssel so verarbeitet, dass die Daten auf der Grundlage der Spaltenfamilie gespeichert werden, zu der das Paar gehört. Wie in der Abbildung gezeigt, hat jedes Spaltenfamilienspeicherobjekt einen Lesecache, der als BlockCache bezeichnet wird, und einen Schreibcache, der als MemStore bezeichnet wird. Der BlockCache hilft bei der zufälligen Leseleistung.

Daten werden in Blöcken aus dem HDFS gelesen und im BlockCache gespeichert. Nachfolgende Lesevorgänge für die Daten - oder Daten, die in unmittelbarer Nähe gespeichert sind - werden anstelle der Festplatte aus dem RAM gelesen, wodurch die Gesamtleistung verbessert wird. Das Write Ahead Log (kurz WAL) stellt sicher, dass Ihre HBase-Schreibvorgänge zuverlässig sind. Es gibt eine WAL pro RegionServer.

Beachten Sie immer das eiserne Gesetz des verteilten Rechnens: Ein Fehler ist nicht die Ausnahme - er ist die Regel, besonders wenn Hunderte oder sogar Tausende von Servern geclustert werden. Google folgte dem Eisernen Gesetz bei der Entwicklung von BigTable und HBase folgten.

Wenn Sie Daten in HBase schreiben oder ändern, werden die Daten zuerst in der WAL gespeichert, die im HDFS gespeichert ist. Anschließend werden die Daten in den MemStore-Cache geschrieben. In konfigurierbaren Intervallen werden im MemStore gespeicherte Schlüssel / Wert-Paare in HFiles im HDFS geschrieben und anschließend werden WAL-Einträge gelöscht.

Wenn ein Fehler auftritt, nachdem der anfängliche WAL-Schreibvorgang aber vor der endgültige MemStore-Schreibzugriff erfolgt ist, kann die WAL erneut abgespielt werden, um Datenverlust zu vermeiden.

Drei HFile-Objekte befinden sich in einer Spaltenfamilie und zwei in der anderen Spalte. Das Design von HBase besteht darin, Spaltenfamiliendaten, die im MemStore gespeichert sind, zu einem HFile pro Flush zu löschen. In konfigurierbaren Intervallen werden dann HFiles zu größeren HFiles zusammengefasst. Diese Strategie reiht die kritische Verdichtungsoperation in HBase in eine Warteschlange ein.

Regionen in HBase - Dummies

Die Wahl des Herausgebers

Auflistung Vereinbarungen über die Immobilienlizenz Prüfung - Dummies

Auflistung Vereinbarungen über die Immobilienlizenz Prüfung - Dummies

Listing-Vereinbarungen werden auf der Immobilien abgedeckt werden Lizenzprüfung. Eine Listungsvereinbarung stellt eine Agenturbeziehung zwischen einem Agenten und einem Grundstücksverkäufer her. Der Vertreter verpflichtet sich, den Verkäufer bei der Vermarktung der Immobilie zu vertreten. Hier sind die Namen und Beschreibungen der vier Arten von Listing-Vereinbarungen in der Reihenfolge, in der sie sind ...

Immobilien-Lizenz-Prüfung: 7 Verwirrende Wortpaare - Dummies

Immobilien-Lizenz-Prüfung: 7 Verwirrende Wortpaare - Dummies

Bevor Sie Ihre Immobilienlizenz nehmen Es ist wichtig, dass Sie den Unterschied zwischen ähnlich klingenden Begriffen verstehen. Die folgenden Immobilienbegriffe sind am häufigsten verwirrt; Holen Sie sich diese auswendig und Sie sind auf dem Weg zu mehr richtigen Antworten. Eigentumswohnung / Genossenschaft: Ein Eigentümer einer Eigentumswohnung besitzt tatsächlich Immobilien. Dieser Besitz ist in der Regel der Luftraum ...

Hypothek Akzeptanz Überlegungen zur Immobilienlizenz Prüfung - Dummies

Hypothek Akzeptanz Überlegungen zur Immobilienlizenz Prüfung - Dummies

Die Immobilienlizenz Prüfung wird Fragen zu Hypotheken und Kreditgebern. Ein primärer Kreditgeber hat zwei Überlegungen, wenn er einen Kredit für den Kauf oder die Refinanzierung von Immobilien vergibt: den Wert der Immobilie und die Fähigkeit des Kreditnehmers, die Schulden zu tilgen. Bei der Überprüfung des Wertes der Immobilie, ...

Die Wahl des Herausgebers

GED Fragen der wissenschaftlichen Praxis: Arbeit, Bewegung und Kraft - Dummies

GED Fragen der wissenschaftlichen Praxis: Arbeit, Bewegung und Kraft - Dummies

Die Gesetze von Physik beeinflusst alle Arten von alltäglichen Aktivitäten, vom Autofahren bis zum Baseballspiel. Es überrascht daher nicht, dass sich einige Fragen zum GED Science-Test mit Konzepten wie Arbeit, Bewegung und Kraft befassen. In den folgenden Übungsfragen müssen Sie sowohl Theorie als auch gesunden Menschenverstand anwenden, um ...

GED Beispielfragen: Argumentieren durch Sprachkunst Lesen von technischen Informationen - Dummies

GED Beispielfragen: Argumentieren durch Sprachkunst Lesen von technischen Informationen - Dummies

Zu den Begründungen Durch die Sprachabteilung der GED können Sie gebeten werden, Fragen zu einer technischen Passage zu beantworten. Dies könnte Anweisungen zur Fertigstellung enthalten, wie die folgenden. Die Fragen in diesem Artikel beziehen sich auf den folgenden Auszug aus Russell Harts Fotografie für Dummies, 2. Auflage (Wiley). Was ist das Geheimnis für ...?

GED Beispielfragen: Kurze wissenschaftliche Antwortfragen - Dummys

GED Beispielfragen: Kurze wissenschaftliche Antwortfragen - Dummys

Irgendwann während des Science-Teils der GEE-Test, werden Sie gebeten, eine kurze Antwort zu verfassen. Sie werden eine Passage erhalten und eine Frage stellen, auf die Sie antworten müssen. Machen Sie Ihre Antwort klar und prägnant. Kurzer Antwortdurchgang Jeder kennt Cheddar-Käse. Leute setzen ...

Die Wahl des Herausgebers

Stärkung des Selbstwertgefühls für Dummies Cheat Sheet (UK Edition) - Dummies

Stärkung des Selbstwertgefühls für Dummies Cheat Sheet (UK Edition) - Dummies

Selbstzweifel und schlechte Selbstwertschätzung scheinen Hand in Hand mit dem Menschsein zu gehen. Selbst wenn Sie im Allgemeinen gesund und ein gutes Selbstwertgefühl haben, haben Sie wahrscheinlich Zeiten in Ihrem Leben, an denen Sie sich unwohl fühlen und Gedanken und Gedanken über sich selbst verunglimpfen. Um zu helfen, halten Sie diesen Spickzettel, damit Sie ein paar Tipps und Hinweise haben ...

Antipsychotika und die Behandlung der bipolaren Störung - Dummies

Antipsychotika und die Behandlung der bipolaren Störung - Dummies

Atypische Antipsychotika (atypische Neuroleptika oder Antipsychotika der zweiten Generation) ursprünglich formuliert, um Psychose bei Schizophrenie zu behandeln, aber diese Klasse von Medikamenten hat sich auch als wirksam bei der Verringerung der Manie und Augmentierung Antidepressiva Behandlung erwiesen. Die atypische oder zweite Generation stammt aus der Tatsache, dass diese neuere Art von Antipsychotika anders funktioniert als der ältere Standard oder Neuroleptika der ersten Generation, ...

Verwaltung von Angst mit Achtsamkeit für Dummies Cheat Sheet - Dummies

Verwaltung von Angst mit Achtsamkeit für Dummies Cheat Sheet - Dummies

Sie möchten mehr darüber erfahren, wie Sie Ihre Angst mit Achtsamkeit? Sieh dir den Spickzettel an und entdecke die häufigsten Ursachen von Angstzuständen. Versuchen Sie eine kurze Achtsamkeitsübung, die Ihrer Angst helfen kann. Erkunde Wege, wie du deine ängstlichen Gedanken achtsam handhaben kannst. Finden Sie einfache Möglichkeiten heraus, jeden Tag aufmerksam zu sein. Dieser Spickzettel ...