생각하는 대로 살자.

[Heritrix/crawler-beans.cxml]scratchDir에 쌓이는 로그기록 테스트

211.Heritrix_테스트및실행/02. Configuration-testing 2016. 8. 5. 21:39

scratchDir에 써준 경로에는 toeThread가 input,output stream을 일시적으로 기록하는 파일들이 쌓인다. 파일의 이름 형식은 tt+(toe thread의 serial num)+http.r(i/o)s 의 형태로 남는다. tt는 toe thread의 약자이고, 확장자인 r(i/o)s는 recoder_input/output_stream의 약자이다.

저작자표시 비영리

'211.Heritrix_테스트및실행 > 02. Configuration-testing' 카테고리의 다른 글

[Heritrix/crawler-beans.cxml]recovery 테스트 (0)	2016.08.16
[Heritrix/crawler-beans.cxml]maxOutlinks (0)	2016.08.16
[Heritrix/crawler-beans.cxml]candidates bean에서 seedsRedirectNewSeeds 값과(true/false), 크롤링 되는 소스에서 리다이렉션 방식(script/meta tag)을 변경하며 테스트 (0)	2016.08.05
[Heritrix/crawler-beans.cxml]extractorHtml bean에서 maxElementLength 값(1/1024)을 변경하며 테스트 (0)	2016.08.05
[Heritrix/crawler-beans.cxml]extractorHtml bean에서 extractJavascript 값을 변경하며 테스트 (script tag 안에 javascript coding) (0)	2016.08.05