Publikacja w repozytorium i przetwarzanie w systemach DSpace i NextCloud

Transkrypt

1 Publikacja w repozytorium i przetwarzanie w systemach DSpace i NextCloud Michał Marcińczuk michal.marcinczuk@pwr.edu.pl Marcin Oleksy Jan Wieczorek Jan Kocoń marcin.oleksy@pwr.edu.pl jan.wieczorek@pwr.edu.pl jan.kocon@pwr.edu.pl Politechnika Wrocławska Katedra Inteligencji Obliczeniowej Grupa Technologii Językowych G4.19

2 DSpace/NextCloud/Inforex

3 DSpace/NextCloud/Inforex powiązania Dane Deponowanie danych w DSpace/NextCloud 2. Eksport danych z NextCloud do DSpace/Inforex 3. Eksport danych z DSpace do Inforex 4. Upublicznienie danych w NextCloud/Inforex

4 DSpace/NextCloud/Inforex powiązania Przestrzeń prywatna Dane Deponowanie danych w DSpace/NextCloud 2. Eksport danych z NextCloud do DSpace/Inforex 3. Eksport danych z DSpace do Inforex 4. Upublicznienie danych w NextCloud/Inforex

5 DSpace/NextCloud/Inforex powiązania Dane Deponowanie danych w DSpace/NextCloud 2. Eksport danych z NextCloud do DSpace/Inforex 3. Eksport danych z DSpace do Inforex 4. Upublicznienie danych w NextCloud/Inforex Przestrzeń publiczna

6 DSpace/NextCloud/Inforex powiązania Przestrzeń prywatna Dane Deponowanie danych w DSpace/NextCloud 2. Eksport danych z NextCloud do DSpace/Inforex 3. Eksport danych z DSpace do Inforex 4. Upublicznienie danych w NextCloud/Inforex Przestrzeń publiczna

7 DSpace Lokalizacja clarin-pl.eu/dspace clarin-pl.eu» Repository

8 DSpace Zastosowanie repozytorium do długoterminowego przechowywania zasobów elementy zasobu: metadane ustrukturalizowany sposób opisu danych (standard CMDI rozwijany przez CLARIN) dane (opcjonalne) dowolne formaty plików: tekstowe, graficzne, wideo, binarne, archiwa, itd. zasoby zdeponowane w repozytorium dostają unikalny i trwały identyfikator, (Handle.net), autoryzowany dostęp, a w przyszłości logowanie federacyjne przy użyciu prywatnych kont z instytucji, które dołączą do federacji, wyszukiwanie fasetowe filtrowanie po metadanych, jest częścią infrastruktury CLARIN integracja metadanych z różnych repozytoriów z możliwością wyszukiwania przez

9 Przetwarzanie dokumentów w DSpace i NextCloud Konwersja ekstrakcja treści tekstowych z dokumentów doc, docx, odt, rtf txt Adam Mickiewicz urodził się 24 grudnia W latach uczęszczał do dominikańskiej szkoły powiatowej w Nowogródku. Tokenizacja podział tekstu na zdania i tokeny (słowa) [1] [Adam] [Mickiewicz] [urodził] [się] [24] [grudnia] [1798] [w] [Zaosiu][.] [2] [W] [latach] [1807][ ][1815] [uczęszczał] [do] [dominikańskiej] [szkoły] [powiatowej] [w] [Nowogródku][.] Analiza morfologiczna określenie formy bazowej i analizy morfologicznej dla każdego tokenu [1] [Adam] [Mickiewicz] [urodzić] [się] [24] [grudzień] [1798] [w] [Zaosiu][.] [2] [W] [rok] [1807][ ][1815] [uczęszczać] [do] [dominikański] [szkoła] [powiatowy] [w] [Nowogródek][.] praet:sg:m1:imperf subst:sg:gen:f

10 Przetwarzanie dokumentów w DSpace i NextCloud Rozpoznanie nazw własnych i wyrażeń temporalnych [1] [Adam] [Mickiewicz] [urodzić] [się] [24] [grudzień] [1798] [w] [Zaosiu][.] [2] [W] [rok] [1807][ ][1815] [uczęszczać] [do] [dominikański] [szkoła] [powiatowy] [w] [Nowogródek][.] Nazwy własne: Named Entities (nam) granice nazw własnych, Named Entities (top9) dziewięć głównych kategorii nazw własnych, Named Entities (n82) 82 szczegółowe kategorie nazw własnych. Wyrażenia temporalne: Temporal Expressions (1class) granice wyrażeń temporalnych, Temporal Expressions (4classes) cztery kategorie: DATE, TIME, DURATION i SET. Ustalenie znaczeń słów (w odniesieniu do Słowosieci) [2] [W] [rok] [1807][ ][1815] [uczęszczać] [do] [dominikański] [szkoła] [powiatowy] [w]... rok 1 okres obiegu planety dookoła słońca, prawdopodobnie w innych ukł. planetarnych - wokół centralnej gwiazdy (np. rok marsjański) rok 2 jednostka rachuby czasu zależna najczęściej od cyklu przemian związanych z obiegiem Ziemi wokół Słońca rok 3 grupa ludzi, którzy studiują razem kolejne lata na uczelni szkoła 1 budynek, siedziba szkoły jako instytucaji szkoła 2 instytucja zajmująca się kształceniem dzieci i młodzieży szkoła 3 uczniowie i pracownicy instytucji szkoła 10 wykształcenie, wiadomości i umiejętności zdobyte w szkole lub na szkoleniu u mistrza

11 Próbki danych

12 Rejestracja clarin-pl.eu/dspace

13 Rejestracja Register

14 Rejestracja Register

15 Rejestracja Register

16 Rejestracja Register

17 Rejestracja Register

18 Logowanie Login

19 Logowanie Login

20 Logowanie Login

21 Logowanie Login

22 Logowanie Login

23 Logowanie Login

24 Deponowanie zasobów clarin-pl.eu/dspace

25 Zgłoszenia Submissions

26 Nowe zgłoszenie Start a new submission

27 Krok 1: Podstawowe informacje Basic info

28 Krok 1: Podstawowe informacje Basic info

29 Krok 2: Osoby zaangażowane Who s involved Pole z możliwością wprowadzenia wielu wartości. Każda wartość musi być potwierdzone przez kliknięcie Add.

30 Krok 2: Osoby zaangażowane Who s involved

31 Krok 2: Osoby zaangażowane Who s involved Pole z możliwością wprowadzenia wielu wartości. Każda wartość musi być potwierdzone przez kliknięcie Add.

32 Krok 2: Osoby zaangażowane Who s involved

33 Krok 3: Opis zasobu Describe

34 Krok 3: Opis zasobu Describe

35 Krok 4: Wgrywanie danych Upload

36 Krok 4: Wgrywanie danych Upload

37 Krok 4: Wgrywanie danych Upload

38 Krok 4: Wgrywanie danych Upload

39 Krok 5: Dodatkowe metadane Additional CMDI

40 Krok 6: Licencja License

41 Krok 7: Przegląd Review

42 Krok 8: Zakończenie zgłoszenia Complete submission

43 Zakończenie zgłoszenia Complete submission

44 Archiwalne zgłoszenia Archived Submissions

45 Przegląd zgłoszenia View Item Process files to CCL

46 Przegląd zgłoszenia View Item Export to Inforex

47 Wyskakujące okienka Pop-ups

48 Przegląd zgłoszenia Inforex Tasks

49 inforex.clarin-pl.eu

50 Instrukcja Pełna instrukcja systemu znajduje się na stronie internetowej projektu CLARIN-PL:

51 Deponowanie zasobów nextcloud.clarin-pl.eu

52 Logowanie Login

53 NextCloud Lokalizacja nextcloud.clarin-pl.eu

54 NextCloud udostępnianie

55 NextCloud udostępnianie

56 NextCloud eksport do DSpace (01)

57 NextCloud eksport do DSpace (02)

58 NextCloud eksport do DSpace (03)

59 NextCloud eksport do DSpace (04)

60 NextCloud przetwarzanie (01)

61 NextCloud przetwarzanie (02)

62 NextCloud przetwarzanie (03)

63 NextCloud eksport do Inforexa (01)

64 NextCloud eksport do Inforexa (02)

65 NextCloud eksport do Inforexa (03)

66 NextCloud eksport do Inforexa (04)

67 koniec części 1