Please use this identifier to cite or link to this item: https://hdl.handle.net/10419/284654 
Authors: 
Year of Publication: 
2024
Citation: 
[Journal:] WISTA – Wirtschaft und Statistik [ISSN:] 1619-2907 [Volume:] 76 [Issue:] 1 [Year:] 2024 [Pages:] 54-65
Publisher: 
Statistisches Bundesamt (Destatis), Wiesbaden
Abstract: 
In foreign trade statistics, the Federal Statistical Office compiles data on Germany's trade in goods with other countries from the export and import declarations submitted by businesses that are required to report data. Complex edit checks are employed to detect and correct erroneous data to the greatest possible extent. An important part of this data editing process involves checking for unusually high or low values, known as outliers. This article describes the evaluation of various non-parametric clustering models to detect outliers, and assesses their effectiveness using different quality criDer Warenverkehr Deutschlands mit dem Ausland ist Gegenstand der vom Statistischen Bundesamt durchgeführten Außenhandelsstatistik, für die die auskunftspflichtigen Unternehmen ihre Exporte und Importe melden. Mithilfe aufwendiger Prüfschritte werden fehlerhafte Angaben weitestgehend identifiziert und bereinigt. Ein wichtiger Teil dieses Plausibilisierungsprozesses besteht darin, ungewöhnlich hohe oder niedrige Werte zu kontrollieren. Der Beitrag beschreibt die Erprobung verschiedener nichtparametrischer Clustering-Modelle, um auffällige Werte aufzudecken und nach verschiedenen Gütekriterien deren Wirkung zu bewerten. Als geeignet erweisen sich die Modelle Isolation Forest und Kerneldichteschätzung.
Abstract (Translated): 
In foreign trade statistics, the Federal Statistical Office compiles data on Germany's trade in goods with other countries from the export and import declarations submitted by businesses that are required to report data. Complex edit checks are employed to detect and correct erroneous data to the greatest possible extent. An important part of this data editing process involves checking for unusually high or low values, known as outliers. This article describes the evaluation of various non-parametric clustering models to detect outliers, and assesses their effectiveness using different quality criteria. Isolation Forest and kernel density estimation are found to be suitable models.
Subjects: 
Ausreißeranalyse
Clustering
Isolation Forest
DBSCAN
Local Outlier Factor
Kerneldichteschätzung
outlier detection
kernel density estimation
Document Type: 
Article

Files in This Item:
File
Size
363.89 kB





Items in EconStor are protected by copyright, with all rights reserved, unless otherwise indicated.