안녕하세요,

 

멜론 차트 추출하기를 주제로 써 보았습니다. 이번엔 간단해요. 소스 코드도 엄청 짧구요.

 

나름 쓸모있는 듯 해도 별 쓰잘데 없는 그런 프로그램,

뭔가 잡다하지만 나름은 쓸모있을 듯하기도 한 문서,

 

그런게 딱 제 스타일입니다.

부담 없이 보아 주셨으면 합니다.

 

낚시(?)를 위해 시작 부분만 따로 여기에 올립니다. 나머지 내용은 링크의 PDF에서 보실 수 있습니다. 로그인하지 않으신 분들이나 모바일로 클리앙에 접속하시는 분들도 PDF를 쉽게 볼 수 있도록 링크를 걸었습니다. 첨부 파일이 업로드 되지 않아 링크로만 게시하도록 하겠습니다.

 

---

 

====== 멜론 Top 100 차트 내용 추출하기======

이번에는 아주 간단한 내용입니다.

국내 음원유통사의 하나인 멜론 차트의 내용을 추출하는 방법을 다루고자 합니다. 일단 멜론 차트의 내용을 추출, 가공했을 때 얻을 수 있는 건 무엇일까요? 일단 겉모양을 쏙 빼고 알짜(콘텐츠)만 있기 때문에 다른 식으로 활용하기 좋습니다. 차트를 바탕으로 어떤 조사를 한다든지, 나름대로의 집계를 할 때 좋을 것입니다. 물론 멜론 가요 차트는 한 예입니다. 이 문서가 보여주는 방법 자체를 응용한다면 웹에 있는 여러 자료(data)를 추출, 가공하여 유용한 정보(information)로 활용하는 것이 가능합니다.

개인적인 의견입니다만, 멜론 웹사이트에는 뭔가 덕지덕지 붙어있는 것이 너무 많습니다. 차트 자체에 눈이 집중되지 않고 산만합니다. 차트 정보만 분석할 목적이라면 본 스크립트를 통해 정보를 받아 엑셀로 보는 게 더 나아 보입니다.

** 이 문서는 2013년 01월의 멜론 웹페이지를 대상으로 하였습니다. 멜론 웹사이트의 개편 등으로 인해 HTML 문서 구조는 변경될 수 있습니다. **

===== 기반 지식 =====

이번에 설명하려는 기반 사항은 매우 단순합니다.

==== 웹 크롤링 ====
지난번 '네이버 웹툰 저장하기' 문서에서 거의 다 언급하였습니다. 그 문서와 이번 문서에서 하려는 내용은 근본적으로는 동일합니다. 다만 지난번에는 정규식을 사용하여 HTML 문서에서 단순하게 링크만을 추출하는 것이 작업의 전부였다면, 이번에는 HTML 문서의 구조를 조금 더 파헤치는 것이 다릅니다. 이렇게 웹에 있는 문서를 수집 분석하는 것은 검색 엔진이 기본적으로 하는 일 중 하나입니다. 이런 것을 '웹 크롤링 (web crawling)'이라고 합니다. 우리가 하는 일은 이 웹 크롤링과 유사합니다만, 특정 목적이 강하지요.

==== CSV (Comma-Separated Values) 파일 ====

'CSV'라는 용어를 미리 언급하고 넘어가겠습니다.그냥 텍스트 파일이라고 생각하시면 됩니다! 엑셀 같은 스프레드 시트(spread sheet)프로그램이 읽고 쓰는 파일 목록 중 하나입니다...