대부분 텍스트뭉치라 그런가 거의 1/7이나 줄었네 ㅋㅋ
무작위 테스트에서 첨부파일까지 잘 받아지기는 한데 빠진거 있을랑가 모르겠다
커딕이나 자폰패치등 첨부파일 때문에 크롤링 깊이 1단계 늘이고 외부 링크는 차단해뒀는데도
온갖 잡다한 외부 파일들 다 긁어서 용량이 저 꼴 나버림
다시 설정 만져서 하기엔 이미 죽은 사이트고 ㅋㅋ
불필요한 거 싹 날리면 확 줄거 같긴 한데
조오오올라 귀찮을거 같음
압축하면 30기가고, 파일 검색으로 첨부파일 찾을수 있는거 같으니 걍 냅둘란다
