대용량 xml 파싱

Jsoup으로 xml 열심히 파싱하고 있었는데...

텍스트 파일 하나가 1.2G.. 

MemoryOutOfException이 발생하여 검색을 하니 StAX(Streaming API for XML) 를 쓰면 해결이 될거라고...

다만 StAX로 다하려니 파싱해서 데이터 넣기가 너무 불편해 ㅠㅠ 

블록별로 변수에 넣어서 Jsoup으로 파싱! 

결과적으론 1.2G 끄떡없다! ㅎㅎ 

<Actors>
<ActorInfo id="1">
<Name>윤나무</Name>
<Age>27</Age>
</ActorInfo >
<ActorInfo id="2">
<Name>정동화</Name>
<Age>28</Age>
</ActorInfo>
<ActorInfo>
...
</ActorInfo>
</Actors>

public static void data() {
	XMLInputFactory xmlInputFactory = XMLInputFactory.newInstance();
	try {
		String file = "data/bigFile.xml";
		XMLEventReader eventReader = xmlInputFactory.createXMLEventReader(new FileInputStream(file));		

		String data = "";

		while (eventReader.hasNext()) {
			XMLEvent event = eventReader.nextEvent();
			if(event.toString().contains("< ActorInfo ")){
				// xml parsing with Jsoup
				parseXml(data); 
				data = event.toString();
			} else {
				data += event.toString();
			}
		}
	} catch (FileNotFoundException e) {
		e.printStackTrace();
	} catch (XMLStreamException e) {
		e.printStackTrace();
	}
}

참고 : http://proinlab.com/archives/1161