Journal article | Zeitschriftenartikel

Three Methods for Occupation Coding Based on Statistical Learning

Occupation coding, an important task in official statistics, refers to coding a respondent's text answer into one of many hundreds of occupation codes. To date, occupation coding is still at least partially conducted manually, at great expense. We propose three methods for automatic coding: combining separate models for the detailed occupation codes and for aggregate occupation codes, a hybrid method that combines a duplicate-based approach with a statistical learning algorithm, and a modified nearest neighbor approach. Using data from the German General Social Survey (ALLBUS), we show that the proposed methods improve on both the coding accuracy of the underlying statistical learning algorithm and the coding accuracy of duplicates where duplicates exist. Further, we find defining duplicates based on ngram variables (a concept from text mining) is preferable to one based on exact string matches.

Three Methods for Occupation Coding Based on Statistical Learning

Urheber*in: Gweon, Hyukjun; Schonlau, Matthias; Kaczmirek, Lars; Blohm, Michael; Steiner, Stefan

Namensnennung - Nicht kommerziell - Keine Bearbeitungen 4.0 International

0
/
0

ISSN
2001-7367
Umfang
Seite(n): 101-122
Sprache
Englisch
Anmerkungen
Status: Veröffentlichungsversion; begutachtet (peer reviewed)

Erschienen in
Journal of Official Statistics, 33(1)

Thema
Sozialwissenschaften, Soziologie
Erhebungstechniken und Analysetechniken der Sozialwissenschaften
Codierung
Beruf
Algorithmus
ALLBUS
amtliche Statistik
Methode

Ereignis
Geistige Schöpfung
(wer)
Gweon, Hyukjun
Schonlau, Matthias
Kaczmirek, Lars
Blohm, Michael
Steiner, Stefan
Ereignis
Veröffentlichung
(wo)
Deutschland
(wann)
2017

DOI
Rechteinformation
GESIS - Leibniz-Institut für Sozialwissenschaften. Bibliothek Köln
Letzte Aktualisierung
21.06.2024, 16:27 MESZ

Datenpartner

Dieses Objekt wird bereitgestellt von:
GESIS - Leibniz-Institut für Sozialwissenschaften. Bibliothek Köln. Bei Fragen zum Objekt wenden Sie sich bitte an den Datenpartner.

Objekttyp

  • Zeitschriftenartikel

Beteiligte

  • Gweon, Hyukjun
  • Schonlau, Matthias
  • Kaczmirek, Lars
  • Blohm, Michael
  • Steiner, Stefan

Entstanden

  • 2017

Ähnliche Objekte (12)