Wybrane aspekty teorii grafiki komputerowej - dążenie do wizualnego realizmu. Mirosław Głowacki

Transkrypt

1 Wybrane aspekty teorii grafiki komputerowej - dążenie do wizualnego realizmu Mirosław Głowacki

2 Zagadnienia Jak rozumiemy fotorealizm w grafice komputerowej Historyczny rozwój kart graficznych Przekształcenia geometryczne Przetwarzanie Rendering Rasteryzacja

3 Obraz realistyczny Pojęcie obrazu realistycznego jest rozumiane w różny sposób Nie zawsze obraz realistyczny jest najbardziej pożądany Często idealizuje się obraz w celu zawarcia w nim większej porcji informacji

4 Złudzenia optyczne Mogą być i na ogół są wykorzystywane w tworzeniu realizmu wirtualnego, ale czasami powodują artefakty Na poniższym rysunku linie poziome są równoległe

5 Symulowany przelot koło Urana widoczne pierścienie i orbita sondy Dodatkowe światło po zaciemnione j stronie planety (w rzeczywistoś ci jest całkowicie czarna) oraz dodatkowe elementy (orbity)

6 Wytworzony komputerowo obraz fotorealistyczny

7 Obraz realistyczny Często stosuje się realistyczne obrazy nie istniejących obiektów, np. statków kosmicznych, prototypów samochodów, itp. Czasem obraz realistyczny istniejących obiektów tworzony jest przy pomocy wyidealizowanych elementów składowych Przykładem może tu być modelowanie molekulane. Atomy są idealizowane w postaci nierzeczywiście barwnych kul, widoczne są wiązania i drgania atomów (animacja) itp.

8 Teksturowany statek kosmiczny 450 tys. wielokątów

9 Fotomontaż wykonany w programie GIMP

10 Para stereo cząsteczki wirusa Polio model składający się z kul o promieniu 5 nm

11 Podział kart graficznych Na przestrzeni ostatnich lat powstawał cały szereg coraz to bardziej doskonałych kart graficznych. W zależności od stopnia zaawansowania technicznego można je podzielić na: bufory ramki akceleratory grafiki płaskiej akceleratory grafiki trójwymiarowej procesory graficzne

12 Bufory ramki Są to najprostsze karty graficzne służące jedynie do wyświetlania obrazu na ekranie monitora.

13 Akceleratory grafiki płaskiej Są to urządzenia wspomagające procesor przy operacjach typu: wyświetlanie wielokątów i linii prostych Wypełnianiu (rasteryzacja) wielokątów przesuwaniu i skalowaniu okien itp.

14 Akceleratory grafiki trójwymiarowej Są to urządzenia odciążające jednostkę centralną w końcowym procesie obliczeń W przypadku tych urządzeń w dalszym ciągu wstępne przygotowanie sceny 3D spoczywa na procesorze, a szybkość realizacji tego zadania zależy od algorytmów zastosowanych przez programistę.

15 Procesory graficzne Urządzenia te posiadają układy wspomagające operacje geometryczne działają przy minimalnym zaangażowaniu jednostki centralnej komputera w proces tworzenia grafiki określa się je również mianem akceleratorów geometrii.

16 Grafika trójwymiarowa Niezależnie od konstrukcji karty graficznej najważniejszym zadaniem, jakie musi wykonać komputer przy tworzeniu trójwymiarowej grafiki jest przedstawienie jej na płaskim ekranie monitora. Cały proces tworzenia obrazu od chwili otrzymania danych z programu do momentu wyświetlenia grafiki na ekranie monitora nazywany jest często przetwarzaniem strumienia grafiki trójwymiarowej.

17 Strumień grafiki trójwymiarowej W strumieniu tym wyróżnić można dwa zasadnicze etapy obliczeń: przekształcenia geometryczne rendering oraz rasteryazacja sceny

18 Pojęcie syntetycznej kamery Pojęcie to jest użyteczną metaforą do tworzenia grafiki 3D Obiekt rzeczywisty umiejscowiony jest w tzw. współrzędnych świata x, y i z. Wyobraźmy sobie kamerę, którą można przenieść w dowolne miejsce zorientować ją w dowolny sposób otwierać migawkę tworząc płaski obraz rzeczywistości 3D

19 Rzutowanie w przestrzeni 3D Syntetyczna kamera fotografująca obiekt 3D

20 Pojęcie syntetycznej kamery Kamerze można nadać ruch, co umożliwi tworzenie animowanych sekwencji obiektów z różnych punktów obserwacji pod różnymi kątami przy różnych powiększeniach Z kamerą związany jest układ współrzędnych u, v i n, przy czym ostatnia współrzędna jest prostopadła do matrycy kamery (rzutni). Kamera jest po prostu programem komputerowym, który symuluje kamerę rzeczywistą, a obiekty są zbiorami punków, odcinków i powierzchni

21 Tworzenie obrazu szkieletowego Składa się z kilku kroków określenie rodzaju rzutu określenie parametrów rzutowania powierzchni, na której rzut zostanie wyświetlony układ współrzędnych sceny układ współrzędnych oka (rzutowania) rzutowanie i wyświetlanie zawartość tzw. bryły widzenia jest rzutowana na płaszczyznę (powierzchnię) rzutowania i obcinana do obszaru pewnego okna

22 Rodzaje rzutów w grafice komputerowej W zdecydowanej większości są to planarne (płaskie) rzuty geometryczne planarne rzutnia jest powierzchnią płaską geometryczne promienie rzutujące są prostoliniowe największe znaczenie mają rzut perspektywiczny i równoległy prostokątny

23 Rzutowanie w przestrzeni 3D Klasyfikacja płaskich rzutów geometrycznych

24 Pokój z kamerą filmową rzuty prostokątne: górny (a), przedni (b), boczny (c)

25 Pokój z kamerą po ustawieniach geometrii rzut perspektywiczny

26 Planarne rzuty geometryczne równoległe prostokątne kierunek rzutowania jest normalny do rzutni z góry z przodu z boku aksonometryczne pod pewnymi kątami do wszystkich osi izomeryczne pod równymi kątami do wszystkich osi inne ukośne różne: kierunek rzutowania i normalna do rzutni wojskowe kawaleryjskie inne

27 Planarne rzuty geometryczne perspektywiczne pęki prostych wzajemnie równoległych zbiegają się w punkcie (punktach) zbieżności o ile nie są równoległe do rzutni jednopunktowe rzutnia jest prostopadła do jednej z osi istnieje jeden osiowy punkty zbieżności dwupunktowe (najczęściej używane) jedna z osi jest równoległa do rzutni istnieją dwa osiowe punkty zbieżności trzypunktowe żadna z osi nie jest równoległa do rzutni istnieją trzy osiowe punkty zbieżności

28 Ustawianie geometrii obrazu Program generujący obraz 3D poprzez odpowiedni interfejs OpenGL czy Direct3D wysyła współrzędne wszystkich wierzchołków sceny do tzw. układu ustawiania trójkątów Jest to specjalna jednostka, będąca częścią chipu graficznego. Grupuje ona wszystkie trójki wierzchołków w trójkąty

29 Triangularyzacja

30 Ustawianie geometrii Każda trójka współrzędnych punktów powinna być zapamiętana w oddzielnym wektorze. Jako że praktycznie każdy wierzchołek należy nie do jednego, a do dwóch lub nawet więcej trójkątów stosuje się więc pewne techniki, które mają zmniejszyć rozmiar macierzy opisujących współrzędne wierzchołków opierają się one na tworzeniu tzw. pasów (strips) i wachlarzy (fans)

31 Pasy i wachlarze Świat tworzony przez wszystkie akceleratory 3D składa się z trójkątów. Trójkąt ma trzy wierzchołki. Każdy z nich ma trzy współrzędne - x, y i z. Jeśli zechcemy stworzyć prostokąt, będziemy musieli wykorzystać w tym celu dwa trójkąty. Zatem prostokąt, który normalnie ma cztery wierzchołki, akcelerator 3D jest zmuszony opisać sześcioma wierzchołkami.

32 Pasy i wachlarze W celu zmniejszenia ilości przetwarzanych danych, a co za tym idzie - zwiększenia szybkości animacji stosuje się różne techniki wykorzystywania wspólnych wierzchołków zwane pasami i wachlarzami

33 Pasy i wachlarze

34 Tworzenie pasów Pasy pozwalają na tworzenie długich ścian Do podstawowego trójkąta dokładany jest nowy wierzchołek i z wykorzystaniem dwóch wybranych, istniejących uprzednio wierzchołków tego trójkąta tworzony jest nowy trójkąt Następnie dodawany jest kolejny wierzchołek pozwalający zdefiniować nowy trójkąt Przy udziale nowopowstałego trójkąta tworzony jest kolejny

35 Wachlarze Wachlarze polegają na tworzeniu nowych trójkątów ciągle z wykorzystaniem jednego z wierzchołków trójkąta bazowego

36 Ustawianie geometrii bryły widzenia Rozpoczynając generowanie trójwymiarowej sceny niezbędne jest utworzenie mapy opisującej położenie wszystkich występujących na niej obiektów Wszystkie obecne na ekranie bryły należy poddać trzem operacjom transformacji geometrycznych: skalowaniu translacji rotacji ustawia to obiekty w odpowiednim położeniu oraz we właściwej skali.

37 Ustawianie geometrii bryły widzenia

38 Ustawianie geometrii bryły widzenia Operacje ustawiania geometrii wymagają skomplikowanych rachunków zmiennoprzecinkowych Należy do tego celu zaangażować dużą moc obliczeniową Najnowsze układy graficzne wyposażone są w specjalizowane procesory i wykonują tego typu obliczenia znacznie szybciej niż byłyby to w stanie zrobić procesory komputerów.

39 Wycinanie i zakrywanie linii niewidocznych Obiekty mogą być modelowane jedynie jako zbiory powierzchni lub bryły, gdyż tylko tak sprecyzowane mogą w sposób jednoznaczny zasłaniać inne obiekty. Rzuty z liniami zasłoniętymi niosą mniej informacji niż rzuty złożeniowe i przekroje Dlatego czasami pozostawia się niektóre linie niewidoczne jako mniej intensywne, przerywane lub w innych kolorach

40 Pokój z kamerą kolorowe linie widoczne

41 Przetwarzanie obraz dynamiczny Czasami obraz nie jest obrazem statycznym. W przypadku animacji w celu skrócenia czasu obliczeń kolejnej klatki, wszystkie opisywane wcześniej przekształcenia wykonywane są tylko raz w trakcie tzw. preprocesingu

42 Przetwarzanie Dzięki temu kolejne rachunki, jeżeli tylko trójwymiarowy obraz nie zmienił się w znaczący sposób, sprowadzają się do: zmiany punktu widzenia obserwatora zmiany położenia niektórych obiektów ponownych kalkulacji oświetlenia ewentualnych przesunięć kadrowania oraz powtórzenia renderingu

43 Rendering Na przygotowane w fazie operacji geometrycznych złożone z trójkątów szkieletowe bryły akcelerator nakłada wypełnienie pustych przestrzeni wewnątrz wielokątów oraz symuluje światła padające na wielokąty Ten kolejny ciąg operacji w strumieniu graficznym 3D nosi nazwę renderingu

44 Rendering Rendering można podzielić na trzy główne procesy: teksturowanie oświetlanie i cieniowanie dodawanie efektów specjalnych

45 Teksturowanie Najważniejszym i najbardziej skomplikowanym etapem renderingu jest teksturowanie Zabieg ten polega na nakładaniu na trójwymiarowy szkielet płaskich obrazków nazywanych teksturami mających imitować spotykane w realnym świecie powierzchnie

46 Mapowanie tekstur Cały proces mapowania (nakładania) tekstur sprowadza się do odpowiedniego owijania brył teksturami. Problem polega na tym, iż wszystkie elementy trójwymiarowej sceny składają się z trójkątów o różnych rozmiarach. Tekstury należy więc dopasować do wielkości odpowiadającej poszczególnych trójkątów. Proces ten nazywa się wycinaniem (ang. clipping)

47 Wycinanie (clipping) Polega on na wyodrębnieniu trójkąta o żądanej wielkości z kwadratowej zazwyczaj tekstury W tym celu określane są współrzędne trzech punktów na teksturze, a następnie przyporządkowuje się je stosownym wierzchołkom teksturowanego trójkąta

48 Wycinanie (clipping)

49 Teksturowanie MIP mapping Próbkowanie punktowe Filtrowanie Korekcja perspektywy Mapowanie wybojów Alpha-blending

50 Teksturowanie - MIP mapping Ponieważ z pierwotnych tekstur, które mają ściśle określony rozmiar, np. 8 8 lub piksele, prawie nigdy nie da się wyciąć odpowiedniego pod względem rozmiarów trójkąta do mapowanej przestrzeni Mając to na uwadze oraz aby zapobiec ciągłemu przeskalowywaniu tekstur opracowano mechanizm MIP mappingu (Multum in Parvo - wiele w niewielu)

51 MIP mapping Przed renderowaniem sceny z każdej tekstury tworzonych jest kilka (zazwyczaj osiem) tzw. map MIP. Mapy MIP to nic innego jak zmniejszone bitmapy utworzone na podstawie tekstury wzorcowej. Każda kolejna mapa MIP jest czterokrotnie mniejsza od poprzedniej.

52 MIP mapping

53 MIP Mapping Jeśli pierwsza miała rozmiar pikseli, to następna będzie miała wielkość punktów, kolejna itd. Przy nakładaniu na trójkąt tekstury do wycinania wybierana jest jedna lub dwie sąsiednie ze zbioru map MIP. Do poteksturowania obiektu trójwymiarowego używa się tej tekstury, której rozdzielczość jest wystarczająca do reprezentowania obiektu obserwowanego z pewnej odległości. Właśnie od odległości zależy, która mipmapa zostanie wybrana. Im obiekt znajduje się dalej od obserwatora, tym mniejszą zajmuje powierzchnię i tym mniejsza tekstura jest potrzebna.

54 MIP Mapping Przykładowo: Jeśli obiekt ma wymiary ok. 10x13 pikseli, to do jego poteksturowania wystarczy tekstura 16x16, Jeśli obiekt ma ok. 54x40 to wystarcza tekstura 64x64 itd. W obu przykładach nie ma sensu odwoływać się do tekstury o najwyższej rozdzielczości (powiedzmy 256x256) bo i tak duża część pikseli nigdy nie będzie widoczna. W praktyce najczęściej nie jest wybierana jedna mipmapa, ale brane są dwie najbliższe i dokonywana jest ich interpolacja.

55 Przykładowe MIP mapy

56 MIP mapping Tekstura nałożona: bez MIP mappingu (z lewej) i z MIP mappingiem (z prawej)

57 MIP Mapping Zalety mipmappingu: Wstępne usuwanie zakłóceń skalowanych tekstur, co ma istotne znaczenie w grafice czasu rzeczywistego (gry komputerowe, symulatory lotu). Zwiększenie prędkości teksturowania, ponieważ przetwarzana jest o wiele mniejsza liczba pikseli tekstury. Wady: Zwiększenie wymagań pamięciowych o 1/3. Mipmapping jest implementowany sprzętowo w kartach grafiki.

58 Teksturowanie - próbkowanie punktowe Zastosowanie MIP mappingu nie rozwiązuje w pełni problemu dokładnego dopasowania tekstur do wielkości trójkątów. Dlatego bardzo często przy teksturowaniu, pojedyncze teksele, czyli najmniejsze elementy (punkty) tekstury, powielane są w różnych miejscach wielokąta. Technika przyporządkowania każdemu punktowi trójkąta tylko jednego teksela tekstury i w razie potrzeby kilkukrotnego powielenia punktów nosi nazwę próbkowania punktowego (ang. point sampling texturing)

59 Próbkowanie punktowe Wadą tego sposobu jest to, że powielenie jednego punktu do kilku objawia się efektem potocznie nazywanym pikselozą widoczne stają się kolorowe piksele Jest to szczególnie wyraźne wtedy, gdy tekstura musi pokryć obszar znacząco większy niż ona sama Aby uniknąć powyższego efektu korzysta się z tzw. filtrowania tekstur

60 Teksturowanie - filtrowanie Filtrowanie tekstur można dokonać na różne sposoby. Do najważniejszych należą: filtrowanie dwuliniowe filtrowanie trójliniowe filtrowanie anizotropowe

61 Filtrowanie dwuliniowe (ang. bilinear filtering) Polega na przyporządkowaniu każdemu punktowi teksturowanego trójkąta nie jednego koloru teksela, ale barwy otrzymanej w wyniku interpolacji czterech sąsiednich tekseli tekstury

62 Filtrowanie trójliniowe Bardziej zaawansowaną metodą jest filtrowanie trójliniowe (ang. Trilinear filtering) polegające na tym, że do ujednolicania barwy zamiast sąsiednich tekseli stosuje się dwie kolejne mapy MIP Najpierw poddaje się interpolacji dwuliniowej mapę pierwszą, bezpośrednio mniejszą - później drugą, bezpośrednio większą np. jeśli trójkąt wymaga wycinania z mapy o rozdzielczości 100 tekseli, to brane są pod uwagę mapy 64x64 i 128x128 Dopiero uśredniony wynik obu tych operacji (w sumie interpolujemy wartość ośmiu tekseli) nakłada się na mapowany trójkąt

63 Filtrowanie anizotropowe Filtrowanie to (ang. anisotropic filtering) jest najbardziej zaawansowaną metoda filtrowania wymagająca największej mocy obliczeniowej. Bierze ona dodatkowo pod uwagę orientację przestrzenną tekseli względem obserwatora, dzięki czemu obszary, z których interpolowane są brakujące wartości, układają się w kształt elipsy, prostokąta lub rombu (długa oś wyznacza kierunek)

64 Filtrowanie anizotropowe Filtrowanie anizotropowe umożliwia zatem zachowanie oryginalnego kształtu tekstur również na obiektach znajdujących się pod pewnym kątem w stosunku do obserwatora

65 Teksturowanie - korekcja perspektywy Podczas odwzorowania dużych trójkątów z nałożonymi teksturami (np. ściany, sufity lub podłogi) znajdujących się niemal prostopadle do płaszczyzny ekranu często występują problemy z zachowaniem odpowiedniej perspektywy Elementy sceny rozjeżdżają się, dając dziwne powykrzywiane wzory spowodowane załamywaniem się tekstur lub ich znikaniem (np. w scenach z długim tunelem). Błąd ten wynika ze złej metody uwzględnienia położenia wielokąta w przestrzeni.

66 Teksturowanie - korekcja perspektywy W celu wyeliminowania tych niepożądanych efektów stosuje się algorytmy korekcji perspektywy (ang. perspective correction) Metoda ta polega na stworzeniu wirtualnego punktu w nieskończoności. Teraz każda linia poprowadzona z dowolnego miejsca obrazu musi zbiec się w owym punkcie. Dopiero wówczas akcelerator, zgodnie z zasadą rzutu perspektywicznego, nakłada tekstury już bez tych nie chcianych deformacji.

67 Teksturowanie - korekcja perspektywy brak perspektywy po korekcji perspektywy po filtrowaniu dwuliniowym

68 Mapowanie wybojów Mapowanie wybojów powoduje złudzenie, że obiekt nie jest gładki, a chropowaty. Gdy na niego patrzymy zdaje nam się, że widzimy wyboje, rysy czy rowki Z jednej strony wybój (wypukłość) będzie jasny, z drugiej ciemny. Należy pamiętać, że mapowanie wybojów to efekt manipulujący wyłącznie grą światła a nie wielokątami

69 Mapowanie wybojów Proces ten można podzielić na: Mapowanie wypukłości (bump mapping) Tłoczenie wybojów (emboss bump mapping) Środowiskowe mapowanie wybojów (Environment- Mapped Bump Mapping, EMBM) DOT 3 mapping Mapowanie środowiska Multiteksturowanie Mapowanie trójwymiarowe

70 Mapowanie wypukłości W metodzie tej dla każdej tekstury tworzone są tzw. mapy wybojów (ang. bump maps). Są one płaskimi bitmapami, podobnie jak zwykłe tekstury, jednak jasność poszczególnych pikseli określa położenie (wysokość) tekseli nad płaszczyzną tekstury Następnie mapa wybojów jest nakładana na pierwotną teksturę, dzięki czemu otrzymujemy dodatkową informację o usytuowaniu każdego teksela względem płaszczyzny tekstury.

71 Mapowanie wypukłości Najprostszym rodzajem mapowania wypukłości jest tzw. pre-calculated bump mapping, sprowadzającym się do obliczenia mapy oświetlenia. W miejscach, gdzie występuje zagłębienie, teksel jest przyciemniany, a w miejscach wypukłości rozjaśniany Technika ta pozwala dość dobrze (i przede wszystkim niewielkim nakładem obliczeniowym) odwzorować nieruchome, prostopadłe lub znajdujące się nawet pod dość znacznym kątem względem obserwatora obiekty.

72 Tłoczenie wybojów Sprawdza się ono dobrze wtedy, gdy na tekstury spoglądamy pod niewielkim kątem lub są one nakładane na poruszające się obiekty. Tłoczenie realizowane jest w trzech etapach W pierwszym z nich z mapy opisującej wygląd wypukłości (mapy wybojów) tworzone są dwa monochromatyczne obrazy. Jeden zostanie wykorzystany do przedstawienia obszarów jaśniejszych, a drugi będzie odpowiadał za fragmenty zacienione W kolejnej fazie obie bitmapy przesuwane są o kilka pikseli względem siebie (jedna do tyłu, druga do przodu) wzdłuż kierunku padającego światła Ostatni z etapów polega na zlaniu rozsuniętych bitmap (przy wykorzystaniu omawianego w dalszej części prezentacji alpha-blendingu) z właściwą teksturą obiektu

73 Tłoczenie wybojów Od lewej: obiekt 3D obłożony zwykłą teksturą, obiekt 3D obłożony mapą wybojów, obiekt 3D obłożony mapą wybojów i teksturą

74 Torus z wgłębieniami funkcja wgłębień określona ręcznie

75 Truskawka z wgłębieniami funkcja wgłębień określona ręcznie

76 Środowiskowe mapowane wybojów W bardziej zawansowanych metodach bumpmappingu dodatkowo wykorzystuje się tzw. mapy środowiska (ang. environment maps). Mapowanie środowiskowe w połączeniu z bump-mappingiem pozwala otrzymać zaawansowane efekty, takie jak falująca powierzchnia wody, w której odbijają się nadbrzeżne drzewa.

77 Środowiskowe mapowane wybojów Uzyskanie takich rezultatów możliwe jest dzięki nałożeniu w jednym przebiegu trzech bitmap: podstawowej tekstury, mapy wypukłości oraz mapy środowiska. Mapa wybojów nakładana jest na mapę środowiska, w wyniku czego powstaje zaburzona mapa środowiska (ang. perturbed environment map), a następnie łączona jest ona z właściwą teksturą nakładaną na obiekt

78 Środowiskowe mapowane wybojów I ćwiartka tekstura III ćwiartka mapa wybojów IV ćwiartka sumaryczna mapa w środowisku

79 Środowiskowe mapowane wybojów Mapy środowiska zawierają w sobie informacje m.in. o refleksach na powierzchni przedmiotu od rozstawionych na generowanej scenie wielokolorowych: świateł lustrzanych, odbić i refleksów świetlnych, które pochodzą od innych przedmiotów otaczających obiekt

80 Środowiskowe mapowane wybojów W procesie mapowania środowiskowego dzięki nałożeniu na pierwotną teksturę przedmiotu bitmapy środowiskowej uzyskujesię wszelkiego rodzaju efekty luster, szklanych drzwi, itp.

81 Środowiskowe mapowane wybojów dla każdej powierzchni obliczany jest kąt odbicia padającego światła (dla wielu źródeł wyliczany jest najpierw wektor wypadkowy). następnie otrzymana wartość modyfikowana jest zgodnie z danymi zapisanymi w tzw. mapie odbić (zawiera informacje o połyskujących fragmentach powierzchni) na koniec całość łączona jest z właściwą teksturą obiektu.

82 Środowiskowe mapowane wybojów W przypadku mapowania środowiskowego obrazy przedmiotów na lśniącej powierzchni wyglądają dobrze do momentu, gdy ani obserwator, ani przedmiot nie zmieniają swojego położenia. W chwili gdy przedmiot nieznacznie się przemieści, wystarczy przesunąć punkt zaczepienia tekstury. Jeśli jednak przemieszenie jest zbyt duże, odbicia ulegają silnemu zniekształceniu.

83 DOT 3 mapping Rozwiązaniem powyższego problemu polega na nakładaniu na bryłę nie jednej, ale sześciu tekstur odpowiadających obrazowi dolnej, górnej i czterech bocznych części otoczenia obiektu.

84 DOT 3 mapping

85 Mapowanie środowiska Polega na nakładaniu na obiekt tekstury przedstawiającej otoczenie tego obiektu. Efekt ten powoduje, iż obiekt sprawia wrażenie refleksyjnego, "metalicznego

86 Mapowanie środowiska

87 Mapowanie środowiska

88 Multiteksturowanie Podczas teksturowania, w większości przypadków na jeden obiekt nakładanych jest kilka różnych bitmap. Im więcej mapowanych jest tekstur, tym potrzeba większej mocy obliczeniowej akceleratora. Szybkie chipy graficzne przeznaczone do użytku domowego umożliwiają mapowanie do kilkudziesięciu gigatekseli w ciągu jednej sekundy. Tę podaną wartość nazywa się współczynnikiem fillrate i określa ona teoretyczną szybkość procesu wypełniania wielokątów przez procesor graficzny.

89 Mapowanie trójwymiarowe W pakiecie Microsoft DirectX począwszy od wersji 8.0 programiści uwzględnili obsługę całkiem nowego rodzaju tekstur, a mianowicie tekstur 3D Podobne funkcje zaimplementowano też w bibliotekach OpenGL 1.2 Oczywiście techniki tekstur trójwymiarowych nie są niczym nowym, gdyż z obrazów tego typu, nazywanych często warstwowymi lub wolumetrycznymi, od dłuższego czasu korzystają lekarze wykonujący komputerową tomografię

90 Mapowanie trójwymiarowe Nowa technika oznacza przede wszystkim, iż tekstury przestają wyłącznie okrywać powierzchnię przedmiotów, ale wnikają wgłąb nich. W przypadku tekstur 3D proces obliczeniowy jest wyjątkowo prosty. Aby obejrzeć wnętrze bryły należy części tekseli (wokseli) nadać atrybut przezroczystości. Można wtedy zobaczyć wszystkie najdrobniejsze detale, gdyż budowa i faktura wnętrza zawarte są w mapie wolumetrycznej.

91 Mapowanie trójwymiarowe Objętość trójwymiarowych tekstur jest jednak wyjątkowo duża. Np. 32-bitowa dwuwymiarowa tekstura o wymiarach pikseli ma objętość 1024 bajtów. Po dodaniu trzeciego wymiaru ( punktów) rozrasta się jednak do bajtów! Tak znaczne pojemności przetwarzanych obiektów wymagają od systemu olbrzymiej przepustowości magistrali pamięci i stosowania algorytmów kompresji tekstur

92 Alpha-blending Aby określić stopień przezroczystości tekstury wykorzystywany jest tzw. kanał alfa, a cała technika nazywana jest alpha-blendingiem Kanał alfa jest parametrem określającym stopień przezroczystości nakładanej tekstury. Przyjmuje on wartości od zera (obiekt zupełnie transparentny) do 255 (powierzchnia nieprzezroczysta) Jeśli nałożona zostanie tekstura z kanałem alfa równym zero, nic się nie zmieni na rysunku, tekstura będzie niewidoczna

93 Alpha-blending Jeżeli wartość kanału wynosi np. 128, wówczas obłożony nią obiekt będzie półprzezroczysty, a znajdujące się za nim przedmioty będą przezeń widoczne. Przy maksymalnej wartości mamy do czynienia z typową nieprzezroczystą teksturą Wartość kanału alfa jest jednym z czterech parametrów opisujących teksturę.

94 Kule i szachownica

95 Alpha-blending Praktycznie wszystkie nowoczesne akceleratory potrafią obsługiwać 32 bitowy kolor. Jak wiadomo do przedstawienia pełnej palety barw wystarczą 24 bity Brakujące osiem bitów to właśnie kanał alfa, a tekstury takie nazywane są RGBA Trzy kolory składowe oraz kanał alfa.

96 Cieniowanie Bardzo ważnym elementem sceny jest oświetlenie. To właśnie odpowiednie dobranie oświetlenia sprawia, że cała trójwymiarowa scena nabiera prawdziwej głębi 1. etap - kalkulacja oświetlenia obliczane są wektory natężenia światła dla każdego z wierzchołków trójkątów tworzących scenę 3D (lub nawet dla każdego piksela) 2. etap - zostają one zamienione na odpowiednią jasność na powierzchniach wielokątów z nałożonymi nań teksturami Drugi etap generowania trójwymiarowego obrazu nazywa się cieniowaniem (ang. shading) Niektórzy używają tego pojęcia dla całości procesu, ale to dwa oddzielne typy algorytmów

97 Oświetlanie sceny Obliczenia związane z oświetleniem polegają na określeniu współrzędnych oraz typów źródeł światła punktowe, rozproszone, ruchome i obliczaniu natężenia promieniowania w każdym z wierzchołków W wyniku tego procesu do poszczególnych punktów sceny zostają przypisane wektory określające natężenie światła w danym miejscu Karty graficzne wyposażone w moduł T&L (Transform & Lighting) wykonują najbardziej czasochłonne obliczenia związane z oświetleniem samodzielnie, bez udziału procesora głównego

98 Oświetlenie światłem otoczenia W najprostszych rozwiązaniach zakłada się, że światło dociera ze wszystkich kierunków Zakłada się wtedy stałe oświetlenie obiektów niezależnie od ich pozycji i orientacji Powstały obraz jest mało realistyczny ponieważ bardzo niewiele rzeczywistych scen jest oświetlanych w ten sposób

99 Pokój z kamerą oświetlony przez światło otoczenia

100 Oświetlanie punktowym źródłem światła jasność obiektu zmienia się w zależności od kierunku i odległości od źródła kierunkowym źródłem światła źródło światła znajduje się daleko od oświetlanego obiektu i promienie są równoległe stosowanie barwnych świateł i powierzchni model oświetlenia Warna światło jest modelowane jako odbicie zwierciadlane od jednego punktu oświetlanego przez punktowe źródło światła wieloma źródłami światła

101 Rendering waz model oświetlenia Cooka- Torrence a: a) plastik, b) miedź

102 Samochód oświetlony przez pięć świateł ze sterowaniem Warna

103 Oświetlanie klapy Warna odpowiednik przysłon reflektorów fotograficznych stożki Warna światło rozchodzi się tylko w obszarze ograniczonym stożkiem z wierzchołkiem w źródle światła modele oświetlenia mające podłoże fizyczne

104 Cieniowanie Istnieje wiele metod cieniowania. Najważniejsze z nich to: cieniowanie płaskie cieniowanie interpolacyjne Gourauda cieniowanie Phong a

105 Cieniowanie płaskie Cieniowanie płaskie (ang. flat shading) jest najprostszą metodą cieniowania. Polega ono na przyporządkowaniu całej powierzchni trójkąta jednego poziomu jasności oraz uwzględnieniu barwy w przypadku gdy na scenie, rozstawione są kolorowe źródła światła. Poziom jasności i barwa są określane przez jeden z jego wierzchołków zazwyczaj przez znajdujący się najbliżej obserwatora

106 Cieniowanie płaskie Oznacza to, że każdemu trójkątowi przypisuje się jeden ściśle określony odcień, niezależnie od otaczających go wielokątów. Zakłada się wtedy również rozproszone odbicie światła Niestety, rezultaty cieniowania płaskiego nie są zadowalające, gdyż szczególnie na okrągłych przedmiotach (np. kulach) uzyskuje się efekt kanciastości obiektów, wynikający z gwałtownych zmian jasności przylegających do siebie trójkątów.

107 Indywidualne cieniowanie płaskie

108 Cieniowanie płaskie i cieniowanie Gourauda

109 Cieniowanie Gourauda Cieniowanie to (ang.gouraud shading) zakłada, iż pojedynczy odcień wnętrza każdego trójkąta powstaje z uśrednienia (interpolacji) kolorów i natężenia światła występujących w każdym z jego wierzchołków niejako uwzględniona zostaje jasność sąsiednich wielokątów

110 Cieniowanie płaskie i cieniowanie Gourauda

111 Cieniowanie wielokątów metodą Gourauda z odbiciem rozproszonym

112 Cieniowanie Gourauda Często w metodzie tej wnętrzu trójkąta przypisuje się nie jeden, ale kilka różnych poziomów jasności Otrzymane są one przez interpolacje natężenia światła wzdłuż linii przechodzącej przez trójkąt i biegnącej od obserwatora do punktu w nieskończoności (zwierciadlane odbicie światła).

113 Cieniowanie Gourauda W ten sposób zostają zachowane płynne przejścia poziomów jasności pomiędzy poszczególnymi wielokątami, Nie ma przylegających do siebie obszarów o drastycznie różnych poziomach natężenia światła. Co ciekawe, cieniowanie Gourauda wywołuje złudzenie gładkości sferycznych obiektów złożonych nawet z niewielkiej liczby trójkątów

114 Cieniowanie wielokątów metodą Gourauda z odbiciem zwierciadlanym

115 Cieniowanie Phonga Spośród klasycznych, najbardziej zaawansowanym i skomplikowanym pod względem obliczeniowym sposobem odwzorowywania jasności obiektów jest cieniowanie Phonga (ang. Phong shading), nazywane też techniką per-pixel lighting. W metodzie tej kolor i natężenie światła przyporządkowywane są oddzielnie do każdego punktu sceny 3D - piksela obrazu W metodzie tej interpolacji podlega wektor normalny do powierzchni na podstawie normalnych wektorów węzłowych. Jasność wewnątrz trójkąta może się zatem wyraźnie różnić od wartości węzłowych

116 Wielokąty cieniowane metodą Phonga z odbiciem zwierciadlanym

117 Cieniowanie Phonga z krzywoliniową interpolacją kształtu obiektów Często w celu poprawienia wyglądu sceny stosuje się krzywoliniową metodę modelowania niektórych powierzchni

118 Powierzchnie krzywoliniowe z odbiciem zwierciadlanym

119 Zastosowanie wielu źródeł światła w stosunku do sceny Obrazy oświetlone jednym źródłem światła nie zawsze wyglądają naturalnie. Często w celu poprawienia wyglądu sceny stosuje się oświetlanie bardziej złożone, uwzględniające wiele źródeł światła, odbicia światła, itp. Dodatkowe efekty daje nałożenie tekstury

120 Ulepszony model oświetlania i wiele świateł

121 Cieniowanie z odwzorowaniem tekstury

122 Odwzorowanie z oddziaływaniem wzajemnym obiektów oświetlenie globalne W celu dalszej poprawy jakości obrazu stosuje się wzajemne oddziaływanie obiektów: mapowanie środowiska, algorytmy z oświetleniem globalnym Oddziaływanie takie może dotyczyć oświetlenia pochodzącego od obiektów sceny oraz być uzupełnione innymi efektami, takimi jak odbicia

123 Odwzorowanie z oddziaływaniem wzajemnym obiektów

124 Obraz z odbiciami

125 Śledzenie promieni Algorytm uwzględnia cienie, załamania i odbicia Występują promienie pierwotne i wtórne pochodzące od odbić, załamań, itp. Odbicia i załamania światła mogą być wielokrotne

126 Śledzenie promieni klatka z filmu Quest

127 Śledzenie promieni: funkcje do modyfikacji barw, normalnych do powierzchni i przezroczystości prawie w każdym pikselu

128 Metoda energetyczna Brana jest pod uwagę zasada zachowania energii promieni świetlnych w środowisku zamkniętym Całkowita energia emitowanana lub odbijana przez jedną powierzchnię jest odbijana lub pochłaniana przez inne powierzchnie We wcześniej prezentowanych rozwiązaniach źródło światła i powierzchnie przez nie oświetlane były traktowane oddzielnie Metoda energetyczna zakłada, że każda powierzchnia może emitować światło Źródła światła zawsze mają pewną powierzchnię Powierzchnie dzieli się na niewielkie płaty Rozpraszające powierzchnie są zabarwione barwami innych powierzchni

129 Sześcian (na rysunku brak emitującej białej ściany przedniej). Metoda energetyczna zdjęcie (a) z widocznym efektem rozlewania barwy, rendering klasyczny przy 49 płatach na ścianę (b i c) - cieniowanie stałe (b) i interpolowane (c)

130 Efekty specjalne Ostatnim etapem renderingu sceny 3D jest dodanie tzw. efektów atmosferycznych (ang. atmospheric effects). Nazwa ta niezbyt dobrze oddaje sens nakładanych na scenę elementów, gdyż oprócz typowych zjawisk atmosferycznych, takich jak mgły, opary nad lustrem wody, falowanie rozgrzanego powietrza, mżawka, zalicza się do nich dym, ogień oraz zmętnienia lustra wody, itp.

131 Efekt mgły W programach najczęściej wykorzystywanym efektem atmosferycznym jest mgła (ang. fog). Tworzy się ją za pomocą czterech różnych technik: mgła liniowa tablica mgieł mgła wykładnicza mgła wolumetryczna

132 Efekt mgły

133 Mgła w tle

134 Mgła liniowa Najprostszą z technik tworzenia jest tzw. mgła liniowa (ang. linear fog). Stosowanie tej metody polega na liniowym zamgleniu obiektów wraz ze wzrostem ich odległości od obserwatora. Wykorzystuje się w tym przypadku funkcje liniowe

135 Tablica mgieł Lepszą i częściej stosowaną metodą jest tzw. tablica mgieł (ang. table fog). W tym przypadku stopień zamglenia, zależny od odległości od obserwatora, zapisany jest w przygotowanej uprzednio tablicy. Ta metoda doskonale się sprawdza w przypadku tworzenia takich efektów, jak opary nad powierzchnią jeziora, nieciągłe smugi mgły nad bagnami itp.

136 Mgła wykładnicza Trzecim sposobem otrzymywania mgły jest tzw. mgła wykładnicza (ang. Expotential fog). W działaniu przypomina ona efekty uzyskiwane za pomocą tablicy mgieł, lecz nie wymaga się w tym przypadku predefiniowania stopni zamglenia, które obliczane są na bieżąco na podstawie zaprogramowanej funkcji wykładniczej.

137 Mgła wolumetryczna (ang. volumetric fog). Do jej tworzenia wykorzystywane są półprzezroczyste tekstury trójwymiarowe. Mgła zbudowana jest z warstw o różnej gęstości, co pozwala na wyjątkowo realne odwzorowanie otaczającego nas świata.

138 Zamglenie tła W realnym świecie, odległe obiekty, jak np. góry na horyzoncie, zawsze są widziane dosyć niewyraźnie. Z tym problemem akceleratory 3D radzą sobie w identyczny sposób jak w przypadku mgły wykładniczej obrazy obiektów rozmazywane są wraz ze wzrostem ich odległości od obserwatora.

139 Sygnalizacja głębokości Efekt ten (ang. depth cueing) polega na wykładniczej zmianie koloru i odcienia przedmiotu w zależności od dystansu od przedmiotu im jest on większy, tym mniej wyraźnie widać nawet duże obiekty.

140 Rasteryzacja Etap zamiany wszystkich parametrów generowanej sceny na zbiór pikseli gotowych do wysłania na monitor nazywa się rasteryzacją. Wykonuje go specjalizowany moduł znajdujący się wewnątrz każdego, nawet najprostszego układu graficznego, nazywany jednostką rasteryzującą.

141 Rasteryzacja Rasteryzacja nie dotyczy wyłącznie grafiki 3D, ale również dostosowywania płaskiego obrazu, np. z edytora tekstu, do wyświetlenia go na ekranie monitora, który składa się z matrycy punktów o ustalonym z góry wymiarze (rozdzielczości), np pikseli. W trakcie procesu dopasowywania wszystkie obiekty, jak np. okręgi, muszą zostać narysowane za pomocą ograniczonej liczby pikseli.

142 Rasteryzacja Każdemu punktowi sceny przyporządkowane są trzy współrzędne: x, y, z. Przeniesienie dwóch pierwszych wartości na obraz dwuwymiarowy nie stanowi problemu Współrzędna z określa zaś odległość obiektu od płaszczyzny ekranu. W większości programów wykorzystuje się 16-bitową głębię, która umożliwia odwzorowanie pozycji obiektu W aplikacjach inżynierskich oraz przy tworzeniu profesjonalnej grafiki używa się 24 lub nawet 32 bitowej głębi.

143 Techniki towarzyszące rasteryzacji Najważniejszymi technikami towarzyszącymi rasteryzacji są: z bufor bufor szablonowy antyaliasing dithering

144 z - bufor Podczas odwzorowywania trójwymiarowej sceny na obraz dwuwymiarowy jednostka rasteryzująca przechowuje wyniki swojej pracy w wydzielonej pamięci lokalnej akceleratora 3D, nazywanej buforem ramki (ang. frame buffer). To właśnie z tego obszaru w ostatniej fazie generowania obrazu na ekran monitora wysłana zostanie gotowa, pojedyncza klatka tworzonej sceny 3D.

145 z - bufor W pamięci RAM karty graficznej wydzielona zostaje również matryca odpowiadająca swoją wielkością rozdzielczości ekranu, a głębokością 16, 24 lub 32 bitom, w zależności od zastosowanej głębi współrzędnej z. Ten duży objętościowo fragment pamięci lokalnej karty, mający za zadanie przechowywać dane o współrzędnej z nazywany jest z-buforem (ang. z-buffer).

146 Z - bufor Zasada działania bufora z polega na tym, że np. dla dwóch trójkątów przed ich narysowaniem porównuje się ich współrzędne z z wartością zapamiętaną w z-buforze. Jeśli nowy rysowany punkt ma wartość niższą (to znaczy zasłania poprzedni obiekt), jest rysowany Cały proces powtarzany jest dla każdego obiektu generowanej sceny 3D.

147 Z - bufor Zastosowanie Z-bufora pozwala znacząco odciążyć jednostkę rasteryzującą akceleratora, która w przeciwnym razie musiałaby narysować zupełnie niepotrzebnie wiele dodatkowych trójkątów. Z drugiej strony technika ta skutecznie obciąża wewnętrzną magistralę pamięci karty, powodując zatory w dostępie do danych.

148 Z bufor

149 Bufor szablonowy Większość nowoczesnych akceleratorów wyposażona jest w tzw. bufor szablonowy (ang. stencil buffer) stosowany m.in. po to, aby zmniejszyć obciążenie procesora graficznego i magistrali pamięci. Może on zostać wykorzystany na kilka sposobów, jednak najczęściej programiści posługują się nim w symulatorach lotu lub jazdy samochodem. W tym przypadku najpierw tworzony jest szablon deski rozdzielczej lub kokpitu, który następnie umieszczany jest w buforze. Następnie akcelerator renderuje grafikę 3D tylko w miejscu nie zakrytym przez szablon Po wygenerowaniu sceny nakłada się oba obrazy na siebie.

150 Bufor szablonowy

151 Bufor szablonowy Do tego zadania wystarczy bufor jednobitowy Większość układów graficznych dysponuje 8 bitowym buforem szablonowym. Dzięki nim można uzyskać dodatkowe efekty, jak ślady po hamowaniu samochodu, plamy oleju na jezdni czy tzw. cienie wolumetryczne (ang. volumetric shadow) dokładnie odwzorowujące kształt rzucających je przedmiotów.

152 Wykorzystanie bufora szablonowego do tworzenia cienia

153 Antyaliasing Ponieważ ekran ma ograniczoną rozdzielczość rysując ukośną linię czy też granicę pomiędzy dwoma kolorami, zapalają się piksele znajdujące się najbliżej teoretycznego przebiegu linii (rasteryzacja odcinka). Taki sposób rysowania powoduje powstanie schodkowatych odcinków, a im niższa rozdzielczość, tym większe wrażenie schodkowatości. Aby się pozbyć tego efektu, w kartach zastosowano specjalne techniki nazywane antyaliasingiem.

154 Antyaliasing Można wyróżnić dwa główne typy antyaliasingu: krawędziowy pełnoekranowy

155 Antyaliasing

156 Antyaliasing krawędziowy Najczęściej wykorzystywaną metodą jest antyaliasing krawędziowy (ang. Edge Anti- Aliasing), polegający na odpowiednim rozmywaniu krawędzi wzdłuż rysowanej linii czy granicy kolorów. Procedury antyaliasingu wymagają znacznej mocy obliczeniowej, dlatego w większości wypadków nie wygładza się wszystkich widocznych na ekranie linii, lecz tylko tę część z nich, która najbardziej wpływa na wygląd generowanej sceny

157 Antyaliasing pełnoekranowy Sposób realizacji pełnoekranowego antyaliasingu (ang. Full Scene Anti-Aliasing) jest różny w zależności dla różnych procesorów graficznych. Niektóre procesory graficzne przetwarzają każdą klatkę w dwukrotnym powiększeniu, a następnie przeskalowują ją do żądanej wielkości Inne karty używają bufora akumulacyjnego, tzw. T- bufora. Umieszczane są w nim dwie lub cztery identyczne ramki obrazu, Każda z nich jest minimalnie przesuwana względem pozostałych po czym następuje ich zlanie w jeden obraz

158 Antyaliasing pełnoekranowy Niezależnie od stosowanej metody antyaliasingu pełnoekranowego ilość danych, które trzeba wygenerować, jest zawsze dwu - lub czterokrotnie większa od ilości normalnej, tj. bez wygładzania krawędzi, co prowadzi do poważnego spadku wydajności. Stosowanie tej metody powoduje jednak, że w odróżnieniu od antyaliasingu krawędziowego cały obraz na ekranie monitora pozbawiony jest schodków.

159 Dithering Dla 24-bitowej głębi barw dostępnych jest aż odcieni. Jednak w przypadku czasami wykorzystywanego trybu 16-bitowego liczba ta spada do Aby więc oddać brakujące w 16-bitowej palecie barwy, stosuje się metodę nazywaną ditheringiem. Polega ona na symulacji niedostępnego w systemie koloru poprzez kompozycję kilku zbliżonych do niego barw z dostępnej palety. Może to doprowadzić jednak do obniżenia jakości wyświetlanego obrazu, efektu - ziarnistości.

160 Dithering 16 bitowa-paleta kolorów obraz po ditheringu 24 bitowa-paleta kolorów obraz nie wymaga ditheringu

161 Głębia ostrości uzyskana metodą przetwarzania końcowego