Kierunki rozwoju systemu monitorowania jakości danych w UFG

Kierunki rozwoju systemu monitorowania jakości danych w UFG Wojciech Bijak Krzysztof Hrycko Stanisław Garstka Ubezpieczeniowy Fundusz Gwarancyjny Ośrodek Informacji, Biuro UFG Ubezpieczeniowy Fundusz Gwarancyjny 1

Kierunki rozwoju systemu monitorowania jakości danych w UFG Plan prezentacji Funkcja UFG jako ośrodka informacji dla rynku ubezpieczeniowego UFG jako ośrodek informacji Elementy systemu jakości danych System raportów związanych z monitorowaniem jakości danych Projekt Delta Przykłady raportów przewidzianych do udostępnienia zakładom ubezpieczeń Terminowość przekazywania danych Uzysk danych Stan dowiązań CEP Główne błędy w danych (drill down) Dowiązania CEP (drill down) Struktura zdarzeń i wypłat Czyszczenie danych Ubezpieczeniowy Fundusz Gwarancyjny 2

Kierunki rozwoju systemu monitorowania jakości danych w UFG Funkcja UFG jako ośrodka informacji dla rynku ubezpieczeniowego Przykłady raportów przewidzianych do udostępnienia zakładom ubezpieczeń Czyszczenie danych Ubezpieczeniowy Fundusz Gwarancyjny 3

UFG jako ośrodek informacji Podstawowe funkcje UFG jako ośrodka informacji Gromadzenie danych z zakładów ubezpieczeń Udostępnianie danych ściśle określonym podmiotom Podstawowe funkcje UFG jako administratora danych Zagwarantowanie bezpieczeństwa danych Dbanie o kompletność danych Dbanie o jakość danych Ubezpieczeniowy Fundusz Gwarancyjny 4

UFG jako ośrodek informacji Dane gromadzone w bazie Ośrodka Informacji - Biura UFG Informacje o zawartych umowach ubezpieczenia: OC posiadaczy pojazdów mechanicznych; casco pojazdów lądowych z wyjątkiem pojazdów szynowych. Informacje dotyczące zdarzeń powodujących odpowiedzialność z ww. umów ubezpieczenia, w tym: dane dotyczące uczestników zdarzenia, rodzaju szkody, zgłoszenia roszczenia oraz wypłaty odszkodowania lub świadczenia itd. Informacje dotyczące reprezentantów ds. roszczeń każdego zakładu ubezpieczeń działających na terenie Polski Informacje dotyczące organów odszkodowawczych ustanowionych w każdym państwie członkowskim UE Ubezpieczeniowy Fundusz Gwarancyjny 5

UFG jako ośrodek informacji Udostępnianie danych przez OI UFG Fundusz może udostępniać zgromadzone dane następującym podmiotom (art. 104 ustawy): poszkodowanym lub uprawnionym albo innym podmiotom, jeżeli mają oni interes prawny w uzyskaniu danych, którymi dysponuje OI UFG, w związku z zaistniałą szkodą, w zakresie dotyczącym ubezpieczenia OC posiadaczy pojazdów posiadaczom pojazdów mechanicznych, którzy zawarli umowę ubezpieczenia OC posiadaczy pojazdów mechanicznych Rzecznikowi Praw Obywatelskich organowi nadzoru zakładom ubezpieczeń PBUK w zakresie dotyczącym ubezpieczenia OC posiadaczy pojazdów Rzecznikowi Ubezpieczonych Polskiej Izbie Ubezpieczeń organowi prowadzącemu centralną ewidencję pojazdów (CEP), w zakresie dotyczącym ubezpieczenia OC posiadaczy pojazdów Sądom lub prokuraturom, o ile dane, którymi dysponuje OI UFG, są niezbędne w toczącym się postępowaniu. Ubezpieczeniowy Fundusz Gwarancyjny 6

UFG jako ośrodek informacji Liczba aktywnych rekordów w CBD OI UFG Zakres danych OC-K OC-G ZK 1 2 3 4 5 6 7 8 Umowy ubezpieczenia Zdarzenia Wypłaty Stan na koniec: OC (ogółem) (4 + 5) OC Razem 2009Q2 89 886 798 85 814 482 1 131 012 2 941 304 15 090 859 104 977 657 2009Q3 95 153 928 90 927 982 1 142 064 3 083 882 16 319 556 111 473 484 2009Q4 99 490 107 95 043 756 1 162 224 3 284 127 17 374 652 116 864 759 2010Q1 105 918 408 101 175 569 1 309 323 3 433 516 18 510 733 124 429 141 2010Q2 110 917 961 106 026 894 1 317 943 3 573 124 19 664 712 130 582 673 2010-09-30 117 197 877 111 918 042 1 464 520 3 815 315 21 113 625 138 311 502 2009Q2 1 244 364 1 010 067 2 254 431 2009Q3 1 379 020 1 152 480 2 531 500 2009Q4 1 501 816 1 317 685 2 819 501 2010Q1 1 719 499 1 553 176 3 272 675 2010Q2 1 887 408 1 745 709 3 633 117 2010-09-30 2 049 374 1 933 146 3 982 520 2009Q2 717 261 626 110 1 343 371 2009Q3 801 213 751 762 1 552 975 2009Q4 1 051 119 1 092 226 2 143 345 2010Q1 1 338 526 1 378 224 2 716 750 2010Q2 1 548 707 1 603 066 3 151 773 2010-09-30 1 712 028 1 786 108 3 498 136 Ubezpieczeniowy Fundusz Gwarancyjny 7 AC

Elementy systemu jakości danych Podstawowe elementy systemu jakości danych OI UFG Cykliczne spotkania robocze z zakładami ubezpieczeń w sprawie Zasilania OI UFG danymi Problemów zakładu z jakością danych Kompletności danych Prac rozwojowych systemu OI Raporty dla Komisji Nadzoru Finansowego Analizy wewnętrzne Ol UFG Raporty dla zakładów ubezpieczeń Mechanizmy projakościowe w systemie zasilania danymi (w przygotowaniu) Mechanizmy wyjaśniania niezgodności (w przygotowaniu) Ubezpieczeniowy Fundusz Gwarancyjny 8

System raportów związanych z monitorowaniem jakości danych Rodzaje raportów dla zakładów ubezpieczeń Komunikaty zwrotne z walidacji danych przesłanych do OI UFG Raporty dotyczące procesu zasilania danymi OI UFG (techniczne) Raporty umożliwiające ocenę stanu nasycenia danymi bazy OI UFG ogólne (statystyczne) Raporty umożliwiające ocenę stanu nasycenia danymi bazy OI UFG przekrojowe (zaawansowane analityczne) Raporty zarządcze (kokpity) Raporty służące nadzorowaniu procesu udostępniania danych Podstawowe elementy raportów Wymiary (organizacyjny, czasowy, marka pojazdu, ) Miary (bezwzględne, względne, statystyczne, ) Miary tła (tło zależne od rodzaju raportu) Ubezpieczeniowy Fundusz Gwarancyjny 9

System raportów związanych z monitorowaniem jakości danych Podstawowe raporty opracowane w OI UFG w narzędziach SAS: Terminowość umów, zdarzeń, odszkodowań Liczba rekordów z dynamiką zapisu Liczba umów aktywnych Raport uzysku danych Poprawność danych Zgodność z CEP- rozkład w czasie Zgodność z CEP- stan dowiązań Rozkład liczby zdarzeń ze względu na wartość wypłat Liczebność umów ze względu na liczbę zdarzeń Wartość i struktura wypłat w okresie Liczba i struktura wypłat w okresie Kokpit zarządczy Uzysk- UFG Ubezpieczeniowy Fundusz Gwarancyjny 10

System raportów związanych z monitorowaniem jakości danych Podstawowe raporty opracowane w OI UFG w narzędziach SAS (c.d.) Ocena stanu bazy OI UFG na podstawie danych KNF i pozyskanych na podstawie ankiety Transmisja pakietów Raporty umożliwiające nadzorowanie korzystania z ZPP1 i ZPP3 Ubezpieczeniowy Fundusz Gwarancyjny 11

Projekt Delta Projekt Delta jest to projekt inwentaryzacji danych przesłanych do OI UFG przez zakład ubezpieczeń i zapisanych do bazy Cel: umożliwienie zakładowi zidentyfikowanie brakujących rekordów w bazie OI UFG Schemat przebiegu procesu po stronie UFG kończącego się wygenerowaniem pliku z danymi zakładu ubezpieczeń: Ubezpieczeniowy Fundusz Gwarancyjny 12

Kierunki rozwoju systemu monitorowania jakości danych w UFG Funkcja UFG jako ośrodka informacji dla rynku ubezpieczeniowego Przykłady raportów przewidzianych do udostępnienia zakładom ubezpieczeń Czyszczenie danych Ubezpieczeniowy Fundusz Gwarancyjny 13

Terminowość przekazywania danych Ubezpieczeniowy Fundusz Gwarancyjny 14

2006.01.01 2006.03.10 2006.05.17 2006.07.24 2006.09.30 2006.12.07 2007.02.13 2007.04.22 2007.06.29 2007.09.05 2007.11.12 2008.01.19 2008.03.27 2008.06.03 2008.08.10 2008.10.17 2008.12.24 2009.03.02 2009.05.09 2009.07.16 2009.09.22 2009.11.29 2010.02.05 2010.04.14 2010.06.21 2010.08.28 Stopień dowiązań do CEP 100% % D o w i ą z a n i a 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% PRZYKŁADOWY ZAKŁAD RYNEK Czas Ubezpieczeniowy Fundusz Gwarancyjny 15

2006.01 2006.02 2006.03 2006.04 2006.05 2006.06 2006.07 2006.08 2006.09 2006.10 2006.11 2006.12 2007.01 2007.02 2007.03 2007.04 2007.05 2007.06 2007.07 2007.08 2007.09 2007.10 2007.11 2007.12 2008.01 2008.02 2008.03 2008.04 2008.05 2008.06 2008.07 2008.08 2008.09 2008.10 2008.11 2008.12 2009.01 2009.02 2009.03 2009.04 2009.05 2009.06 2009.07 2009.08 2009.09 2009.10 2009.11 2009.12 2010.01 2010.02 2010.03 2010.04 2010.05 2010.06 2010.07 2010.08 2010.09 2010.10 Uzysk danych 100% 90% 80% 70% 60% 50% 40% 30% 20% 10% 0% Obiekty Razem - Polisy Obiekty Razem - Zdarzenia Obiekty Razem - Odszkodowania Ubezpieczeniowy Fundusz Gwarancyjny 16

Uzysk danych dla przykładowego zakładu Ubezpieczeniowy Fundusz Gwarancyjny 17

Główne błędy w danych- Polisy Nr błędu Polisy Udział Przyrost UFG-00029 1 666 674 56,6% 57% UFG-00030 424 869 14,4% 71% UFG-00079 353 476 12,0% 83% UFG-00101 141 910 4,8% 88% UFG-00096 92 612 3,1% 91% UFG-00043 66 144 2,2% 93% 1. UFG-00029 W systemie istnieje już polisa o identyfikatorze <#1#> 2. UFG-00030 W systemie nie istnieje polisa o identyfikatorze <#1#> 3. UFG-00079 Dla polisy przesłanej w trybie <#1#> nie podano daty zmiany danych pojazdu, ani też daty zmiany danych podmiotów ubezpieczonych Ubezpieczeniowy Fundusz Gwarancyjny 18

Główne błędy w danych- Zdarzenia Nr błędu Zdarzenia Udział Przyrost UFG-00031 564 016 44% 44% UFG-00086 266 723 21% 65% UFG-00032 168 763 13% 79% UFG-00077 165 919 13% 92% UFG-00102 85 661 7% 98% 1. UFG-00031 W systemie istnieje już zdarzenie o identyfikatorze <#1#> 2. UFG-00086 W systemie nie udało się odnaleźć polisy Auto Casco obowiązującej w dacie zdarzenia dla pojazdu poszkodowanego 3. UFG-00077 W systemie nie udało się odnaleźć polisy obowiązującej w dacie zdarzenia dla pojazdu sprawcy 4. UFG-00032 W systemie nie istnieje zdarzenie o identyfikatorze <#1#> Ubezpieczeniowy Fundusz Gwarancyjny 19

Główne błędy w danych- Odszkodowania Nr błędu Odszkodowania Udział Przyrost UFG-00091 2 927 614 82% 82% UFG-00093 601 265 17% 99% 1. UFG-00091 W systemie nie istnieje zdarzenie związane z odszkodowaniem o identyfikatorze <#1#> 2. UFG-00093 W systemie istnieje już odszkodowanie o identyfikatorze <#1#> Ubezpieczeniowy Fundusz Gwarancyjny 20

Główne błędy w danych- Odszkodowania Ubezpieczeniowy Fundusz Gwarancyjny 21

Kierunki rozwoju systemu monitorowania jakości danych w UFG Funkcja UFG jako ośrodka informacji dla rynku ubezpieczeniowego Przykłady raportów przewidzianych do udostępnienia zakładom ubezpieczeń Czyszczenie danych Ubezpieczeniowy Fundusz Gwarancyjny 22

Czyszczenie danych Techniki, narzędzie czyszczenia danych Słowniki (ITS) Dane referencyjne (CEP) Wyrażenia regularne Miary odległości (Levenshtein distance) Wiedza ekspercka (nr VIN) Ubezpieczeniowy Fundusz Gwarancyjny 23

Czyszczenie danych???? 1177039 FIAT 126P 126P 126P 492034 FIAT 126P BD SAMOCHÓD OSOBOWY 428659 OPEL ASTRA BD SAMOCHÓD OSOBOWY 215540 VOLKSWAGEN GOLF BD SAMOCHÓD OSOBOWY 204456 FIAT SEICENTO BD SAMOCHÓD OSOBOWY 177186 SAM BD BD BD 170203 FIAT 126P BRAK 126P 148739 FIAT SEICENTO SEICENTO SEICENTO 148662 FIAT 126 126 126 146125 BD BD BD BD 146027 OPEL ASTRA ASTRA ASTRA 144138 FSM FIAT 126P BD SAMOCHÓD OSOBOWY 142860 VOLKSWAGEN INNY INNY OSOBOWY 142373 FIAT CINQUECENTO BD SAMOCHÓD OSOBOWY 142161 BRAK DANYCH BRAK DANYCH BRAK DANYCH INNE 138314 OPEL CORSA BD SAMOCHÓD OSOBOWY 136975 OPEL INNY INNY OSOBOWY 129542 FIAT UNO BD SAMOCHÓD OSOBOWY 126556 OPEL ASTRA --- SAMOCHÓD OSOBOWY 124515 Ubezpieczeniowy Fundusz Gwarancyjny 24

Czyszczenie danych _C_GHN_K_NR CGYN_M_TU HGEC WA KLAJF W_TB TMBEFF VX VF_BZ_H VFAB AK VF SA_A WF_MBA_AE VFNS ELL_L C_GHN_K_MR C_GYN_M_TU HGEC HA KLAJF TB TMBEFF VT VF_B H VF_B AK VF A_A VF_MBA_AE VFN ELL_L Ubezpieczeniowy Fundusz Gwarancyjny 25

Dziękujemy za uwagę Ubezpieczeniowy Fundusz Gwarancyjny 26