Zuhause Persönliche Finanzen So ​​generieren Sie abgeleitete Daten und reduzieren ihre Dimensionalität für Predictive Analytics - Dummies

So ​​generieren Sie abgeleitete Daten und reduzieren ihre Dimensionalität für Predictive Analytics - Dummies

Inhaltsverzeichnis:

Video: Marketing Intelligence - ohne Abhängigkeit zu IT oder BI Teams (2019 WEBINAR AUFZEICHNUNG) 2025

Video: Marketing Intelligence - ohne Abhängigkeit zu IT oder BI Teams (2019 WEBINAR AUFZEICHNUNG) 2025
Anonim

In dieser Erkundungsphase der Vorhersageanalyse erlangen Sie genaue Kenntnisse über Ihre Daten - was wiederum hilft, die relevanten Variablen für die Analyse auszuwählen. Dieses Verständnis hilft Ihnen auch, die Ergebnisse Ihres Modells zu bewerten. Aber zuerst müssen Sie die Daten für die Analyse identifizieren und bereinigen.

So erstellen Sie abgeleitete Daten

Abgeleitete Attribute sind völlig neue Datensätze, die aus einem oder mehreren vorhandenen Attributen erstellt wurden. Ein Beispiel wäre die Erstellung von Aufzeichnungen über Bücher, die auf Buchmessen Bestseller sind. Rohdaten erfassen solche Datensätze möglicherweise nicht - für Modellierungszwecke können diese abgeleiteten Datensätze jedoch wichtig sein. Das Preis-pro-Gewinn-Verhältnis und der gleitende 200-Tage-Durchschnitt sind zwei Beispiele für abgeleitete Daten, die in Finanzanwendungen stark genutzt werden.

Abgeleitete Attribute können aus einfachen Berechnungen wie dem Ableiten des Alters ab dem Geburtsdatum gewonnen werden. Abgeleitete Attribute können auch durch Zusammenfassen von Informationen aus mehreren Datensätzen berechnet werden.

Wenn Sie zum Beispiel eine Tabelle mit Kunden und ihren gekauften Büchern in eine Tabelle umwandeln, können Sie die Anzahl der verkauften Bücher über ein Empfehlungssystem, durch gezieltes Marketing und auf einer Buchmesse verfolgen und die demografischen Daten der Kunden identifizieren. kaufte diese Bücher.

Die Generierung solcher zusätzlicher Attribute bringt zusätzliche Vorhersagekraft in die Analyse ein. In der Tat werden viele solcher Attribute erzeugt, um ihre potentielle Vorhersagekraft zu untersuchen. Einige Vorhersagemodelle verwenden möglicherweise mehr abgeleitete Attribute als die Attribute in ihrem Rohzustand. Wenn sich einige abgeleitete Attribute als besonders prädiktiv erweisen und ihre Leistung sich als relevant erweist, ist es sinnvoll, den Prozess zu automatisieren, der sie generiert.

Abgeleitete Datensätze sind neue Datensätze, die neue Informationen einbringen und neue Möglichkeiten zur Darstellung von Rohdaten bieten. Sie können für die Vorhersagemodellierung von enormem Wert sein.

So reduzieren Sie die Dimensionalität Ihrer Daten

Die in Vorhersagemodellen verwendeten Daten werden normalerweise aus mehreren Quellen zusammengestellt. Ihre Analyse kann aus Daten bestehen, die über mehrere Datenformate, Dateien und Datenbanken oder mehrere Tabellen innerhalb derselben Datenbank verstreut sind. Es ist wichtig, die Daten zusammenzuführen und in ein integriertes Format für die Datenmodellierer zu kombinieren.

Wenn Ihre Daten einen hierarchischen Inhalt enthalten, muss möglicherweise abgeflacht werden. Einige Daten weisen einige hierarchische Merkmale auf, z. B. Eltern-Kind-Beziehungen oder einen Datensatz, der aus anderen Datensätzen besteht.Zum Beispiel kann ein Produkt wie ein Auto mehrere Hersteller haben; Daten zu glätten bedeutet in diesem Fall, dass jeder Hersteller als zusätzliches Merkmal des zu analysierenden Datensatzes enthalten ist.

Das Reduzieren von Daten ist wichtig, wenn es aus mehreren verknüpften Datensätzen zusammengefügt wird, um ein besseres Bild zu erhalten.

Zum Beispiel kann es für die Analyse von unerwünschten Ereignissen bei mehreren Arzneimitteln mehrerer Unternehmen erforderlich sein, dass die Daten auf der Ebene der Stoffe abgeflacht werden. Auf diese Weise entfernen Sie schließlich die Eins-zu-Viele-Beziehungen (in diesem Fall viele Hersteller und viele Substanzen für ein Produkt), die zu viele Datenkopien verursachen können, indem Produkt- und Herstellerinformationen bei jedem Eintrag.

Die Reduzierung reduziert die Dimensionalität der Daten, die durch die Anzahl der Merkmale eines Datensatzes oder einer Beobachtung dargestellt wird.

Ein Kunde kann beispielsweise die folgenden Funktionen haben: Name, Alter, Adresse, gekaufte Artikel. Wenn Sie mit der Analyse beginnen, werden Sie möglicherweise Datensätze mit vielen Funktionen auswerten, von denen nur einige für die Analyse wichtig sind. Daher sollten Sie alle außer den wenigen Features eliminieren, die die größte Aussagekraft für Ihr spezifisches Projekt haben.

Das Reduzieren der Dimensionalität der Daten kann erreicht werden, indem alle Daten in eine einzige Tabelle gestellt werden, die mehrere Spalten verwendet, um interessierende Attribute darzustellen. Zu Beginn der Analyse muss die Analyse natürlich eine große Anzahl von Spalten auswerten - aber diese Zahl kann mit fortschreitender Analyse eingegrenzt werden.

Dieser Prozess kann unterstützt werden, indem die Felder wiederhergestellt werden - z. B. durch Gruppieren der Daten in Kategorien mit ähnlichen Eigenschaften.

Der resultierende Datensatz - der gereinigte Datensatz - wird normalerweise in eine separate Datenbank für die zu verwendenden Analysten gestellt. Während des Modellierungsprozesses sollten diese Daten leicht zugänglich sein, verwaltet und auf dem neuesten Stand gehalten werden.

So ​​generieren Sie abgeleitete Daten und reduzieren ihre Dimensionalität für Predictive Analytics - Dummies

Die Wahl des Herausgebers

Wie man die Socialcast Mobile App benutzt - dummies

Wie man die Socialcast Mobile App benutzt - dummies

Sogar die stoischste Anwendung wie Microsoft Excel hat ein begleitendes Smartphone-App, natürlich hat Socialcast auch eine. Wenn es so wäre, wäre es nicht wirklich eine Ausrede zu sagen, dass Socialcast nicht sehr sozial wäre, wenn du es nicht mit in die große Welt außerhalb deiner Zelle mitnehmen könntest. Die mobile App ...

Wie man das App Verzeichnis von Yammer benutzt - dummies

Wie man das App Verzeichnis von Yammer benutzt - dummies

Sie haben vielleicht gehört: "Es gibt eine App dafür. "Nun, das ist der Fall bei Yammer, der als einzige Ressource für die Vernetzung am Arbeitsplatz funktioniert. Aber Yammer bietet Ihnen auch eine Menge Apps, mit denen Sie Ihr Arbeitsleben noch einfacher gestalten können. Es gibt zwei Möglichkeiten, auf das App-Verzeichnis zuzugreifen: Option ...

So ​​verwenden Sie die Yammer-Analysetools - Dummies

So ​​verwenden Sie die Yammer-Analysetools - Dummies

Yammer rühmt sich damit als "führendes soziales Unternehmensnetzwerk für Unternehmen" um die Arbeit intelligenter und schneller zu erledigen. "Woher weißt du, ob das wahr ist? Ein guter Weg, um zu sehen, wie es für Sie funktioniert, ist die Analyse von Yammer. Wie greifen Sie auf diese großartigen Tools zu? Es ist einfach. Log ...

Die Wahl des Herausgebers

Die Evolution von Distributed Computing für Big Data - Dummies

Die Evolution von Distributed Computing für Big Data - Dummies

Hinter allen wichtigen Trends des letzten Jahrzehnts, einschließlich Serviceorientierung, Cloud Computing, Virtualisierung und Big Data, ist eine grundlegende Technologie namens Distributed Computing. Einfach gesagt, ohne die Verteilung von Datenverarbeitung wäre keiner dieser Fortschritte möglich. Distributed Computing ist eine Technik, mit der einzelne Computer über geografische Gebiete hinweg miteinander vernetzt werden können, so als ob ...

Drei Anbieter mit Data Mining-Produkten - Dummies

Drei Anbieter mit Data Mining-Produkten - Dummies

Es gibt mehrere Anbieter, die Data-Mining-Produkte verkaufen, die Sie vielleicht in Betracht ziehen möchten. Verwenden Sie mit Ihrem Data Warehouse. Hier sind drei, die eine Überlegung wert sind. Microsoft Microsoft hat das serverseitige Data Mining mit Microsoft SQL Server 2005 eingeführt. Obwohl es nicht so ausgereift und ausgeklügelt wie SAS und SPSS ist, hat Microsoft im Laufe der Zeit seine Fähigkeit bewiesen ...

Grundlagen der Big-Data-Integration - Dummies

Grundlagen der Big-Data-Integration - Dummies

Die fundamentalen Elemente der Big-Data-Plattform verwalten Daten auf neue Weise verglichen mit der traditionellen relationalen Datenbank. Dies liegt daran, dass Skalierbarkeit und hohe Leistung erforderlich sind, um sowohl strukturierte als auch unstrukturierte Daten zu verwalten. Komponenten des Big-Data-Ökosystems von Hadoop bis NoSQL DB, MongoDB, Cassandra, ...

Die Wahl des Herausgebers

So ​​stellen Sie eine Verbindung zu Spotify Mobile her - Dummies

So ​​stellen Sie eine Verbindung zu Spotify Mobile her - Dummies

Die meisten modernen Smartphones sind Wi-Fi-fähig. In ein lokales Netzwerk können Sie Spotify-Tracks mithilfe von Wi-Fi auf Ihr Telefon streamen. Sie können Spotify Mobile zu Hause und über Wi-Fi-Netzwerke in Hotels und Cafés problemlos nutzen - Sie müssen nur sicherstellen, dass Sie angemeldet und verbunden sind. ...

Wie Spotify funktioniert - Dummies

Wie Spotify funktioniert - Dummies

Wie Spotify funktioniert, kann Auswirkungen auf den Festplattenspeicher Ihres Computers haben. Internetverbindung. Spotify funktioniert anders als viele andere Online-Musikdienste, weil es auf mehrere Arten angewiesen ist, um Ihnen reibungslos Musik ohne Verzögerungen zu liefern. In Computing-Sprechen, das Maß der Verzögerung zwischen Anfordern eines Songs und Hören es ...

So ​​erreichen Sie Spotify Support - Dummies

So ​​erreichen Sie Spotify Support - Dummies

Es kann vorkommen, dass Sie eine kleine Hilfe beim Navigieren und Verwenden von Spotify benötigen von deinen Spotify Freunden. Sie können jederzeit Support @ spotify per E-Mail senden. com mit Ihrer Frage oder melden Sie sich bei Twitter an und senden Sie einen Tweet an @spotify. Stellen Sie sicher, dass Sie alle Informationen einschließen, die dem Support-Team helfen könnten, einschließlich Ihres Benutzernamens, damit sie ...