Kurs języka Python Wykład 6. Pliki tekstowe Pliki rekordów Pliki CSV Strumienie

Transkrypt

1 Kurs języka Python Wykład 6. Pliki tekstowe Pliki rekordów Pliki CSV Strumienie

2 Operacje na plikach Otwarcie i zamknięcie pliku: fh = open('plik', 'r') Atrybuty: 'r' odczyt 'w' zapis 'a' dopisanie 'r+' - odczyt i zapis 'rb', 'wb', 'ab' odczyt i zapis binarny (tylko Windows i Macintosh)

3 fh.close() Zamknięcie pliku

4 Odczyt pliku fh.read() - odczyt całego pliku fh.read(size) - odczyt tylko size znaków, gdy koniec pliku zwracane jest fh.readline() - zwraca wiersz, razem z '\n' fh.readlines() - zwraca listę wierszy

5 Odczyt z pliku przykład fh = open('test.py', 'r') while True: wiersz = fh.readline() if len(wiersz) == 0: break print wiersz, fh.close()

6 Odczyt z pliku przykład poprawiony fh = open('test.py', 'r') for wiersz in fh: print wiersz,

7 Zapis do pliku fh.write('dane zapisywane do pliku\n') fh.writelines(['to\n', 'są\n', 'kolejne\n', 'wiersze\n'])

8 Rodzaje danych w plikach Pliki tekstowe Pliki z rekordami Pliki CVS Pliki *.ini XML...

9 Przetwarzanie rekordów PLIK Rekord 0 Rekord 1 Rekord 2 Rekord 3 REKORD int char[16] char[40] bool float data

10 Konwersja string <-- rekord import struct numrec, lenheader = struct.unpack('<xxxxlh22x', f.read(32)) name, typ, size, deci = struct.unpack('<11sc4xbb14x', rec)

11 Konwersja string --> rekord hdr = struct.pack('<bbbblhh20x', ver, yr, mon, day, numrec, lenheader, lenrecord)

12 Pack i unpack: formatowanie <liczba> - powtórzenie 'x' nieistotny bajt, np. '4x' == 'xxxx' 'c' znak 'i' int 's', 'p' stringi Dodatkowe znaki: '<' - little endian '>' - big endian

13 Pakiet dbf Zastosowanie

14 Przechowywanie obiektów w pliku import pickle fh = open('plik.obj', 'w') pickle.dump(obj, fh) fh.close()

15 Odczyt obiektu z pliku import pickle fh = open('plik.obj', 'r') obj = pickle.load(fh) fh.close()

16 Odczyt ze standardowego wejścia x = raw_input('podaj jakiekolwiek dane: ') Wczytanie i obliczenie x = input('podaj wyrażenie') print x

17 Bardziej zaawansowana interakcja Pakiet readline: Odczyt i zapis historii Uzupełnianie

18 Pliki *.ini Plik.gnome2/gedit-2: [window] height=487 width=601 state=0 [time_plugin] prompt_type=1

19 Odczyt pliku ini import ConfigParser ini = ConfigParser.ConfigParser() print ini.sections() print ini.getint('window', 'height') print ini.items('window')

20 Zmiany Modyfikacja parametrów: ini.set('window', 'height', 100) Usuwanie: ini.remove_option('window', 'height') ini.remove_section('window')

21 Zapis konfiguracji fh = open('konfig.ini', 'w') ini.write(fh) fh.close()

22 Pliki CSV CSV Comma Separated Values Dane imie1, nazwisko1, , 3 imie2, nazw3, , 2 Notowania giełdowe ; ;183.29;102.14; ; ;183.43;102.31;

23 Parametry formatu delimiter separator, np. ',' ';' ':' lineterminator koniec wiersza quotechar znak cudzysłowu quoting kiedy ujmować pola w cudzysłów, QUOTE_ALL, QUOTE_NONNUMERIC, QUOTE_NONE

24 CSV - dialekty Dialekt: domyślne parametry, np. dialekt excel Możliwość dodania własnego dialektu

25 Odczyt CSV -przykład import csv reader = csv.reader( open('/etc/passwd', 'r'), delimiter=':', quoting=csv.quote_none) for row in reader: print row

26 Zapis w formacie CSV przykład import csv data = [ [1, 'Oskar'], [2, 'Mis'] ] writer = csv.writer( open('out', "w"), dialect=csv.excel) writer.writerows(data)

27 CSV - słowniki Data;FS;FO;FOE;FSW;FZ;FPA;FRP;FANE; ; ;183.01;101.80;123.63; ; ;183.11;101.95;123.48; ; ;183.06;101.93;123.43;

28 CSV słowniki - przykład fh = open('notowania.csv', "r") reader = csv.dictreader(fh, delimiter=';') for row in reader: for k in row.keys(): print k, row[k]

29 CSV - słowniki Własne klucze: fh = open('notowania.csv', "r") klucze = ['lp', 'name'] reader = csv.dictreader(fh, fieldnames= klucze) for row in reader: print row['lp'], row['name']

30 Strumienie - motywacje def przegladaj_notowania(zrodlo): reader = csv.dictreader(zrodlo, delimiter=';') for row in reader: for k in row.keys(): print k, row[k]

31 Strumienie - motywacje przegladaj_notowania('dane.csv') url = ' przegladaj_notowania(url)

32 Strumienie danych Plik dyskowy Sieć Zmienna typu string...

33 Implementacja metod: read() read(size) Własności strumieni

34 Przykład def przegladaj_notowania(zrodlo): reader = csv.dictreader(zrodlo, delimiter=';') for row in reader: for k in row.keys(): print k, row[k]

35 Plik dyskowy jako strumień in_stream = open('dane.csv', 'r') przegladaj_notowania(in_stream) in_stream.close()

36 Strumień danych - URL import urllib url = ' in_stream = urllib.urlopen(url) przegladaj_notowania(in_stream) in_stream.close()

37 String jako strumień Str = ' ;12.45;45.78' import StringIO in_stream = StringIO.StringIO(str) przegladaj_notowania(in_stream) in_stream.close()

38 Na koniec