Repozytorium na potrzeby zajęć z przedmitu "Analiza danych niekompletnych"

Podstawowe informacje

• Slajdy

Organizacja kodów

Wszystkie materiały kodowe znajdują się w folderze codes/ i są podzielone na dwa podfoldery:

• codes/qmd/ -- notatniki Quarto (.qmd) oraz wyrenderowane wersje HTML (.html)
• codes/R/ -- skrypty .R wygenerowane z notatników

Wszystkie kody są napisane w języku R.

Materiały na zajęcia

1. Problematyka braków danych

• przydatne procedury R: rnorm, plogis, density, ...
• kody do generowania braków danych

2. Kodowanie braków danych w pakietach statystycznych

• R: NA, NA_integer_, NA_character_, is.na, Inf, NaN
• Notatnik: qmd -- R
• Zbiory danych na potrzeby zajęć:
  • csv
  • sav -- Bilans Kapitału Ludzkiego -- zbiór, kwestionariusz

3. Metody wizualizacji braków danych

• narzędzia R: VIM, naniar, panelView
• Zbiory danych na zajęcia: dane przekrojowe, dane panelowe (long), dane panelowe (wide)
• Zbiór danych na ćwiczenia data2-zajecia-przyklad1.csv
• Notatnik: qmd -- R -- HTML

4. Imputacja danych

• Imputacja dedukcyjna:

  • R: zoo::na.locf, tidyr::fill, data.table::nafill, deductive, validate
  • Zbiór danych na ćwiczenia data3-zajecia-przyklad1.csv
  • Notatnik: qmd -- R -- HTML

• Imputacja metodą najbliższego sąsiada:

  • R: simputation, VIM
  • Zbiór danych na ćwiczenia data4-czytelnictwo.csv
  • Notatnik: qmd -- R -- HTML

• Imputacja metodą predykcyjnego dopasowania średnich (ang. predictive mean matching)

  • R: simputation, FNN
  • Zbiór danych na ćwiczenia data4-czytelnictwo.csv
  • Notatnik: qmd -- R -- HTML

• Imputacja wielokrotna

  • R: mice, rMIDAS
  • Notatnik: qmd -- R

• Imputacja regresyjna

  • R: simputation, naniar
  • Notatnik: qmd -- R

5. Case study

• Opis i kod: qmd -- R
• zbior

6. Kalibracja

• Wstęp do kalibracji

  • R: survey, sampling, laeken
  • Notatnik: qmd -- R -- HTML
  • Dane na zajęcia data5-kalibracja.csv

• Kalibracja (bardziej zaawansowana)

  • R: survey
  • Notatnik: qmd -- R
  • Dane na zajęcia gospodarstwa-zajecia.xlsx

7. Ważenie przez odwrotność prawdopodobieństwa odpowiedzi

• PSW
  • R: stats, glmnet
  • Notatnik: qmd -- R
  • Dane na zajęcia gospodarstwa-zajecia.xlsx

8. Estymacja wariancji

• R: boot
• Dane na zajęcia gospodarstwa-zajecia.xlsx

9. Case study

• dane z Badania Kapitału Ludzkiego
• Notatnik: qmd -- R
• zadania do wykonania: slajdy do zajęć na Overleaf.