최근 웹크롤링을 활용해서 정보를 확보하고 분석하는 재미에 빠져있습니다. 지난 글에서[Scrapy] 웹사이트 크롤링해서 파일 저장 하기(분양정보수집사례)) 크롤링한 데이터를 파일로 저장하는 방법을 소개해드렸는데요. 다음에 DB에 저장하는 방법을 소개하기 위해서 mysql을 설치하였습니다. 늘 그렇듯이 겸사 겸사 설치 방법을 안내해드리기 위한 포스팅입니다 : ) mysql을 이용하기로 한 이유는 서비스를 배포하지 않고 비상업적으로 개인적인 사용을 할 경우에 무료로 사용가능하기 때문이죠 사용하시기 전에 라이선스 규정을 한번 읽어보시기 바랍니다. - 링크 : http://www.mysqlkorea.com/sub.html?mcode=product&scode=08 그럼 설치를 해보도록 하겠습니다. 1.설치파일 다운..
웹 사이트 정보를 추출(크롤링)하기 위해 어떤 언어를 사용할까 고민했는데요. 개인용도로 사용하기 위한 것인 만큼 빠른 생산성을 자랑하는 파이썬(Python)을 선택했습니다. 파이썬의 장점은 짧은 코딩(?)과 배우기 쉽다(?)는 점이죠 구글에서 많이 사용하는 것 때문에 유명하기도 하구요. 이전 포스팅에서 언급한 것 처럼 팀뷰어(Teamviewer) 아이디가 도용되어서 피씨를 포맷하는 바람에 파이썬(Python)을 다시 설치하게 되었습니다ㅜ 현재 최신 버전은 3.5.0이지만, 제가 사용하고 있는 3'rd Party 제품들이 아직 2.x 버전에서만 돌아가는 것들이 많아서 저는 2.7.10 버전을 설치하였습니다. 설치에 어려움을 겪으시는 분들은 없으시겠지만, 혹시나 하는 마음에 설치 절차 및 셋팅 방법을 한땀 ..