Einen Process in DQE One Standalone erstellen und starten

Support DQE
Support DQE
  • Aktualisiert

Ein Process ist die Art und Weise, wie Sie eine Datenqualitäts- oder Dedublierungsaufgabe in DQE One Standalone ausführen. Jeder Process wird im selben Assistenten mit 4 Tabs erstellt: Data Source, Input Mapping, Data Filter und Results.

Einen neuen Process starten

Öffnen Sie den Bildschirm "Choose a process kind" entweder über das +-Symbol neben Processes in der linken Navigation, oder über die Startseite ("Start now and select the process you want to run"). Es gibt 8 Process-Arten, auf beiden Bildschirmen gleich gruppiert:

GruppeProcess-ArtBeschreibung auf der Karte
Data PreparationFind & ReplaceFind a word or a pattern and replace it by another one
FormatFormat your fields by using a regex formula
Data Quality CheckCheck EmailCheck the format and/or the existence of your email addresses
Check Postal AddressCheck the format and/or the existence of your postal addresses
Check B2BCheck the format and/or the existence of your B2B account
Check PhoneCheck the format and/or the existence of your phone numbers
DeduplicateUnify ProcessFind duplicate in your database and merge them if needed
Index RecordsIndex records from your database to enable the real time duplicate check APIs

Die Auswahl einer Karte führt Sie direkt in den Assistenten für diese Art. Ein Process führt immer genau eine Art aus — um z. B. sowohl E-Mail als auch Telefon zu prüfen, erstellen Sie zwei Processe (Sie können sie verketten, siehe Advanced Options unten).

1. Data Source

Verbinden oder verwenden Sie eine Datenquelle, und wählen Sie dann das Objekt/die Tabelle oder laden Sie eine Datei hoch. Siehe den separaten Artikel Connect a data source in DQE One Standalone — dieser Schritt ist unabhängig von der Process-Art identisch.

2. Input Mapping

Was Sie hier sehen, hängt vollständig von der Process-Art ab.

Find & Replace und Format

Beide Arten teilen sich denselben Bildschirm. Fügen Sie eine oder mehrere Zeilen hinzu, jede mit:

  • Field to process
  • Value to find (Find & Replace) oder Format to find (Format) — mit einem Kontrollkästchen: "Check the box if the value/format to find is a regex formula."
  • Value to replace by / Format to replace by

Klicken Sie, um weitere Zeilen für zusätzliche Felder hinzuzufügen.

Check Email

Wählen Sie das zu prüfende Email field.

Check Phone

Wählen Sie das Phone field und das Country field, und legen Sie dann fest:

  • Separator — Space, Point oder Dash.
  • Phone output format (erforderlich) — wählen Sie aus: National format without spaces; National format with country-specific digit grouping; International format with country-specific digit grouping; International format with space between country code and subscriber number; International format with trunk prefix and compact subscriber number; International format without spaces; International format with trunk prefix and country-specific digit grouping; International format without spaces and without leading plus sign.

Check Postal Address

Wählen Sie die Felder Street, Additional Address 1, Additional Address 2, City, State, Postal Code und Country, ein Field Tag (z. B. "CustomAddress") und einen Default country value. Unter dem Mapping wählen Sie im Mehrfachauswahlfeld RNVP Output Mapping aus, welche Ergebnisfelder Sie erhalten möchten (eine "Alle auswählen"-Option ist verfügbar).

Check B2B

Wählen Sie SIRET Field und Company Name Field, sowie dieselben Felder Street/City/State/Postal Code/ Country/Field Tag/Default country wie bei Check Postal Address. Wählen Sie die Ergebnisfelder im Mehrfachauswahlfeld B2B Output Mapping.

Unify Process (Duplikaterkennung)

Wählen Sie ein Primary key field und hängen Sie dann ein Rules Set an — siehe "Ein RuleSet anhängen" unten. Wenn Ihre Quelle ein Live-Connector ist (Salesforce, Dynamics, Postgres, BigQuery oder Snowflake), lässt Sie ein weiterer Schritt "Select Objects to reparent" auswählen, welche Felder des übergeordneten Objekts aktualisiert werden, wenn ein Duplikat damit zusammengeführt wird (nicht angezeigt bei CSV-/SFTP-Quellen oder bei Find & Replace/ Format/Index Records).

Index Records

Wählen Sie ein Primary key field und optional ein Parent Id field, und hängen Sie dann ein Rules Set an (nur Matching-Regeln — Merge-/Reparenting-Regeln gelten hier nicht).

Ein RuleSet anhängen

Sowohl Unify Process als auch Index Records benötigen ein Rules Set: Wählen Sie eines aus der Liste aus (angeboten werden nur bereits veröffentlichte RuleSets, die zum Objekt Ihrer Quelle passen — oder bei CSV/SFTP, die exakt zu den Spaltenüberschriften passen). Nach der Auswahl sehen Sie schreibgeschützte Vorschauen seiner Matching-Regeln, Parent-record-Regeln und Merging-Regeln (Merging/Parent nur bei Unify Process).

Ein RuleSet muss bereits existieren und veröffentlicht sein, um hier zu erscheinen — Sie können Matching-/Merge-Regeln nicht direkt hier konfigurieren. Falls Sie ein neues benötigen, klicken Sie auf Create new set: Dies öffnet den RuleSet-Editor in einem neuen, bereits mit diesem Process verknüpften Kontext, sodass Sie zurückkehren können, sobald es veröffentlicht ist. Siehe Create and configure a RuleSet in DQE One Standalone.

3. Output Source (optional)

Wird für alle Arten außer Find & Replace, Format und Index Records angezeigt. Sie können Ergebnisse optional an ein anderes Ziel senden als das, von dem die Daten stammen — klicken Sie auf Connect to Salesforce, Connect to Dynamics, Connect to Postgres, Connect to SFTP, Connect to BigQuery oder Connect to Snowflake (derselbe Verbindungsablauf wie im Schritt Data Source), wählen Sie dann das Zielobjekt/-warehouse, ein Feld Match Records On, um Quell- und Zieldatensätze abzugleichen, und ordnen Sie zu, welches Quellfeld welches Zielfeld speist. Bei einer SFTP-Ausgabe wählen Sie stattdessen ein Output directory.

4. Data Filter und Advanced Options

Der Abschnitt Advanced Options ("Additional options to be set up if needed") enthält die meisten Verhaltenseinstellungen. Welche Sie sehen, hängt von der Process-Art und der Quelle ab:

OptionWas sie bewirktAngezeigt für
Set a data limit for each typeBegrenzt die Anzahl der verarbeiteten ZeilenAlle Arten
Auto-start the next step after completionVerkettet einen weiteren Ihrer Processe, der direkt nach Abschluss dieses Processes startet (setzt dessen "next process")Alle Arten
Authorized Empty File"If checked, the process will finished even if the file is empty. Else it will failed."Nicht-CSV-Quellen
Delete Input File"Delete input file after Process is Done."Nur SFTP
Synchronized results"Synchronize result to {source}" — schreibt Ergebnisse zurück in die Quelle (oder konfigurierte Ausgabe)Nicht-CSV-/SFTP-Quellen, oder wenn ein Output Source konfiguriert wurde
Duplicate CertaintyNumerischer Schwellenwert (0–100) für die automatische ZusammenführungNur Unify Process
RNVP Merge Quality CodeLegt fest, welche Adress-Qualitätscodes einen Datensatz für die automatische Zusammenführung qualifizierenNur Check Postal Address
B2B Merge Status CodeLegt fest, welche B2B-Statuscodes (A+/A/B+/B/C+/C) einen Datensatz für die automatische Zusammenführung qualifizierenNur Check B2B
Merge results"Merge result using the Merging Rules defined in the selected Rules set."Unify Process, Check Postal Address, Check B2B — Nicht-CSV-/SFTP-Quellen
Update Childs to Inactive"Update all the Childs that have been merge, to Inactive. It will prevent them to be reparent again." (angezeigt, sobald Merge results aktiviert ist)Nur Unify Process
Generate relations backup file"Generate backup for reparenting rollback." (angezeigt, sobald Merge results aktiviert ist)Nur Unify Process bei Salesforce/Dynamics

5. Bestätigen und starten

Unten im Tab Data Filter gibt es zwei unterschiedliche Schaltflächen — sie bedeuten nicht dasselbe:

  • Finish speichert Ihre Konfiguration, ohne sie auszuführen, und bringt Sie zurück zur Process-Liste. Verwenden Sie dies, wenn Sie einen Process jetzt einrichten und später ausführen möchten.
  • Start process (beim ersten Mal angezeigt) oder Results (sobald der Process bereits mindestens einmal gelaufen ist) startet ihn sofort. Ein Bestätigungsdialog erscheint ("Start process — You are about to start the process. Do you want to continue?") — bestätigen Sie, um zu starten.

Was nach dem Start passiert

Sie gelangen auf den Tab Results, wo der Lauf sofort den Status Started anzeigt. Von dort durchläuft er Reading → In Progress → Writing → Finished (oder Failed). Siehe Monitor and manage a run in DQE One Standalone für die nächsten Schritte — Fortschritt verfolgen, synchronisieren, zusammenführen, Ergebnisse herunterladen oder einen laufenden Run stoppen.

Verknüpfung mit

War dieser Beitrag hilfreich?

0 von 0 fanden dies hilfreich