Logowanie zdarzeń w aplikacjach J2EE. 4Developers, 4 kwietnia 2011

Transkrypt

1 4Developers, 4 kwietnia 2011

2 Zakres wykładu Cele logowania zdarzeń Sposób logowania Narzędzia Infrastruktura Ciekawe przypadki

3 Cele Wsparcie w trakcie developmentu Diagnozowanie błędów w czasie testów Diagnozowanie błędów na produkcji Historia komunikacji z systemami zewnętrznymi Historia działań użytkowników Ochrona własnej reputacji

4 Wsparcie w trakcie developmentu 1 public void createorder1() { 2 System.out.println("createOrder begin"); 3 4 User user = usersm.getuser(login); 5 System.out.println("User found"); 6 7 List<CartItem> items = cartm.getcartitems(); 8 for(cartitem item : items) { 9 System.out.println("Add discount for item #" + item.getid()); 10 item.setvalue(item.getvalue().multiply(user.getdiscount())); 11 } System.out.println("XXXXXXXXXXXXXXXXXXXXXXXXXXX before create order..."); 14 System.out.println("===================================================="); 15 ordersm.createorder(user, items); 16 System.out.println("createOrder done"); 17 }

5 Diagnozowanie błędów w czasie testów 1 [3/30/11 11:08:14:053 GMT] UUID: B8HEFISIX0RQ7XXQSNAJ ROOT: java.lang.runtimeexception: Babol swój widzę ogromny URL: 4 Locale: en 5 Remote host: Request Session ID: Y786Wic4OPvou2DFbA2N4O_ 7 Path info: / 8 Path translated: /opt/.../installedapps/aolwestgcell/wimp-de.ear/war-country-3.46.rc1.2.war 9 Query string: action=explode 10 Principal: null 11 Request parameters: 12 action: explode; 13 Headers: 14 Host: de.wimp.v2.ext.e-point.pl 15 User-Agent: Mozilla/5.0 (X11; U; Linux i686; pl-pl; rv: ) Gecko/ Ubuntu/ [...] 17 HttpSession: 18 TABLE_categories_tree: pl.epoint.ow.table.tablecontext@6afa6afa[page=1,pagesize=-1,pagersize=4, 19 pagesizes=[10, 20, 50, 100, 200],rootId=<null>,rootIdInInclusiveMode=false,expandedNodes=[]] 20 pl.epoint.foo.country.war.auth.ui.countryauthenticationconstants_login: test : pl.epoint.ow.services.processing.processingexception 23 Caused by: java.lang.reflect.invocationtargetexception 24 at java.lang.reflect.method.invoke(method.java:618) 25 at pl.epoint.ow.services.processing.impl.methoddelegateaction.execute(methoddelegateaction.java:59) more 27 Caused by: java.lang.runtimeexception: Babol swój widzę ogromny 28 at pl.epoint.foo.common.war.explodeactions.exploderuntime(explodeactions.java:23) more

6 Diagnozowanie błędów w czasie testów

7 Diagnozowanie błędów w czasie testów 14 public String test1() { 15 return numberformat.format(ordersm.getlastorderforuser(usersm.getuser(login)).getvalue()); 16 } 1 Exception in thread "main" java.lang.nullpointerexception 2 at pl.epoint.samples.multilineexecution.test1(multilineexecution.java:15) 3 at pl.epoint.samples.multilineexecution.main(multilineexecution.java:11)

8 Diagnozowanie błędów w czasie testów 18 public String test2() { User user = usersm.getuser(login); 21 assert user!= null : "User with login '" + login + "' not found"; Order lastorder = ordersm.getlastorderforuser(user); 24 assert lastorder!= null : "User '" + login + "' has no order"; BigDecimal value = lastorder.getvalue(); 27 assert value!= null : "Order '" + lastorder.getid() + "' has no value"; return numberformat.format(value); 30 } 1 Exception in thread "main" java.lang.assertionerror: User 'abacki' has no order 2 at pl.epoint.samples.multilineexecution.test2(multilineexecution.java:24) 3 at pl.epoint.samples.multilineexecution.main(multilineexecution.java:11)

9 Diagnozowanie błędów na produkcji

10 Historia komunikacji z systemami zewnętrznymi

11 Historia działań użytkowników

12 Sposób logowania System.out.println Kod diagnostyczny ogólny Kod diagnostyczny zorientowany na aspekty Poziomy logowania (debug, info, warn, error, itp.) Logowanie zdarzeń do bazy

13 commons-logging Fasada a nie konkretna implementacja Dla bibliotek a nie konkretnych instalacji Automatyczne poszukiwanie implementacji Problemy z ClassLoader ami

14 commons-logging 1 package pl.epoint.commonslogging; 2 3 import org.apache.commons.logging.log; 4 import org.apache.commons.logging.logfactory; 5 6 public class CommonsLoggingTest { 7 8 private static final Log log = LogFactory.getLog(CommonsLoggingTest.class); 9 10 public static void main(string[] args) { 11 log.debug("hello world!"); 12 log.error("my error", new RuntimeException()); 13 } 14 } 1 log4j.rootlogger=debug, A1 2 3 log4j.appender.a1=org.apache.log4j.consoleappender 4 log4j.appender.a1.layout=org.apache.log4j.patternlayout 5 log4j.appender.a1.layout.conversionpattern=%d %5p (%C:%M:%L) - %m%n :26:14,110 DEBUG (pl.epoint.commonslogging.commonsloggingtest:main:11) - Hello world! :26:14,113 ERROR (pl.epoint.commonslogging.commonsloggingtest:main:12) - My error 3 java.lang.runtimeexception 4 at pl.epoint.commonslogging.commonsloggingtest.main(commonsloggingtest.java:12)

15 log4j Ceki Gülcü, Konkretna implementacja Najpopularniejsza Pełna dokumentacja płatna ok. 15 USD MDC (ang. Mapped Diagnostic Context)

16 log4j 1 package pl.epoint.log4j; 2 3 import org.apache.log4j.logger; 4 import org.apache.log4j.mdc; 5 6 public class Log4jTest { 7 8 private static final Logger log = Logger.getLogger(Log4jTest.class); 9 10 public static void main(string[] args) { 11 MDC.put("login", "abacki"); 12 log.debug("hello world!"); 13 log.error("my error", new RuntimeException()); 14 } 15 } 1 log4j.rootlogger=debug, A1 2 3 log4j.appender.a1=org.apache.log4j.consoleappender 4 log4j.appender.a1.layout=org.apache.log4j.patternlayout 5 log4j.appender.a1.layout.conversionpattern=%d %5p (%C:%M:%L) - %m (login: %X{login})%n :37:25,021 DEBUG (pl.epoint.log4j.log4jtest:main:12) - Hello world! (login: abacki) :37:25,024 ERROR (pl.epoint.log4j.log4jtest:main:13) - My error (login: abacki) 3 java.lang.runtimeexception 4 at pl.epoint.log4j.log4jtest.main(log4jtest.java:13)

17 java.util.logging util/logging/overview.html od 2002 Konkretna implementacja Zawarta w JDK od wersji 1.4

18 java.util.logging 1 package pl.epoint.jdk; 2 3 import java.util.logging.level; 4 import java.util.logging.logger; 5 6 public class JdkTest { 7 8 private static final Logger log = Logger.getLogger(JdkTest.class.toString()); 9 10 public static void main(string[] args) { 11 log.fine("hello world!"); 12 log.log(level.severe, "My error", new RuntimeException()); 13 } 14 } 1 handlers=java.util.logging.consolehandler 2.level=FINE 3 4 java.util.logging.consolehandler.level=all :52:55 pl.epoint.jdk.jdktest main 2 FINE: Hello world! :52:55 pl.epoint.jdk.jdktest main 4 SEVERE: My error 5 java.lang.runtimeexception 6 at pl.epoint.jdk.jdktest.main(jdktest.java:12)

19 SLF4J Ceki Gülcü, od 2005 Fasada a nie konkretna implementacja Ulepszona wersja commons-logging MDC (ang. Mapped Diagnostic Context)

20 SLF4J + log4j 1 package pl.epoint.slf4j; 2 3 import org.slf4j.*; 4 5 public class Sslf4jTest { 6 7 private static final Logger log = LoggerFactory.getLogger(Sslf4jTest.class); 8 9 public static void main(string[] args) { 10 MDC.put("login", "abacki"); 11 log.debug("execute: " + new Test() + " result"); // slow 12 log.info("execute: {} {}", new Test(), "result"); // fast 13 } 14 } 1 log4j.rootlogger=info, A1 2 3 log4j.appender.a1=org.apache.log4j.consoleappender 4 log4j.appender.a1.layout=org.apache.log4j.patternlayout 5 log4j.appender.a1.layout.conversionpattern=%d %5p (%C:%M:%L) - %m (login: %X{login})%n :19:21,500 WARN (pl.epoint.slf4j.sslf4jtest$test:tostring:17) - Test.toString (login: abacki) :19:21,503 WARN (pl.epoint.slf4j.sslf4jtest:main:12) - Test.toString (login: abacki) :19:21,503 INFO (pl.epoint.slf4j.sslf4jtest:main:12) - Execute: something result (login: abacki)

21 logback Ceki Gülcü, od 2006 Konkretna implementacja Ulepszona wersja log4j tego samego autora Brak stabilnej wersji (0.9.28) Wybrane ulepszenia: 10 krotnie szybsza implementacja pełne pokrycie testami natywna integracja z SLF4J automatyczne odświeżanie konfiguracji pełna dokumentacja wiele JVM-ów może logować do tego samego pliku filtry

22 logback 1 package pl.epoint.logback; 2 import org.slf4j.*; 3 4 public class LogbackTest { 5 private static final Logger log = LoggerFactory.getLogger(LogbackTest.class); 6 public static void main(string[] args) { 7 MDC.put("login", "abacki"); 8 log.info("execute: {} {}", new Test(), "result"); 9 log.error("my error", new RuntimeException()); 10 } 11 } 1 <configuration> 2 <appender name="stdout" class="ch.qos.logback.core.consoleappender"> 3 <encoder> 4 <pattern>%d{hh:mm:ss.sss} [%thread] %-5level %logger{36}:%l - %msg \(login: %X{login}\) %n</pattern> 5 </encoder> 6 </appender> 7 <root level="info"> 8 <appender-ref ref="stdout" /> 9 </root> 10 </configuration> 1 16:32: [main] WARN pl.epoint.logback.logbacktest:14 - Test.toString (login: abacki) 2 16:32: [main] INFO pl.epoint.logback.logbacktest:8 - Execute: something result (login: abacki) 3 16:32: [main] ERROR pl.epoint.logback.logbacktest:9 - My error (login: abacki) 4 java.lang.runtimeexception: null 5 at pl.epoint.logback.logbacktest.main(logbacktest.java:9) [classes/:na]

23 Instrastruktura Ewidencja plików logów: Nazwa, opis Zarządca (log4j, syslog, skrypty) Polityka starzenia (rotacja, gzipowanie, usuwanie) Szacowana wielkość Agregacja

24 Instrastruktura

25 Automatyczne przeglądy logów 1 Wyjatki: java.lang.nullpointerexception 3 27 javax.transaction.rollbackexception: Transaction rolled back 4 21 com.ibm.wsspi.sib.core.exception.siconnectiondroppedexception: CWSIJ0047E: An operation was attempted 5 on a connection that is already closed ] CWSJR1102E: An internal error has occurred. The exception javax.resource.resourceexception: enlist: 7 caught Exception was thrown 8 15 pl.epoint.ow.services.processing.processingexception: Process name is undefined (has null value). 9 9 org.apache.velocity.exception.resourcenotfoundexception: Unable to find resource 10 'catalog/resource_not_found.vt' 11 7 pl.epoint.ow.services.processing.processingexception: Form name parameter does not exist NullPointery: at pl.epoint.foo.common.war.util.pathutils.splitpath(pathutils.java:33) at net.sf.ehcache.cache.isexpired(cache.java:1043) 16 6 at pl.epoint.foo.country.or.orderstatusdaoimpl.getorderstatus(orderstatusdaoimpl.java:59) Asercje: AssertionError Model is null - user logged out? foo representative is null - logged out? 22 4 orderidasinteger is null 23 4 Current registered foo representative is null. (AOD-2788) 24 2 User is not an registered user Statystyka wystapien znanych wyjatkow: 27 AOD AOD AOD

26 Ciekawe przypadki (1) Chcieliśmy otrzymywać informacje o każdym błędzie em... Nie logujmy wszystkiego...

27 Ciekawe przypadki (2) Policja żąda IP użytkownika który złożył to zamówienie Usunęliśmy dokument a on znowu jest widoczny

28 Podsumowanie Podsumowanie

29 Czy są jakieś pytania? Zapraszam do dyskusji