본문 바로가기
320x100
728x90

크롤러2

Java] 간단한 이미지 크롤러 만들기 요새 통 회사 다니느라 정신없어서 만들어보고 싶었던 이미지 크롤러를 만들 시간이 없었고, 사실 좀 귀찮았다... 그래서 최대한 간단하게 만들어보려고 했다. 개발환경은 텍스트 마이닝할 때와 다르지 않다. 보러 가기(새창) 코드는 이 곳에 공개되어 있습니다. 개발환경 : intelli j ultimate jquery spring boot 2.3 jsp 시작은 언제나 그렇듯 URL을 입력받을 인풋 박스를 하나 준비한다. 사이트를 확대해보면 이미지가 잘 크롤링이 됐다. 코드는 상당히 간단하다. 클라이언트 코드 (AJAX로 비동기 통신) $(function () { $(".send").click(function () { var value = $(".input").val(); //사용자의 입력 URL $.ajax(.. 2020. 12. 3.
JAVA]크롤링을 이용하여 웹 텍스트 마이닝 사이트 만들기 국비 지원 교육과정을 수료하고 남는 시간을 이용해서 만들어 볼 것이 뭐가 있을까 생각을 하다가, 우연히 생각난 게 대학교 때, R이라는 툴을 이용해서 텍스트 마이닝을 했던 것이 생각났다. 크롤링이 무엇이냐면, 웹 사이트에 존재하는 데이터들을 추출해내는 행위이고, 텍스트 마이닝은 이런 사진을 많이 봤을 텐데, 빅데이터에서 많이 사용되는 시각화 기법 중 하나로 특정 분야나 업무 등에서 많이 언급되는 데이터를 나열한 것인데, 많이 언급되는 단어일수록 크기가 커짐으로써, 사용자로 하여금 어떤 데이터가 대세인지 쉽게 알 수 있는 텍스트 기반의 기법이다. 개발환경 Library : jsoup 1.13.1 , JQuery 3.5.2 build tools : Maven 인터넷을 검색하다가 Jsoup라는 웹 크롤링 라이.. 2020. 8. 11.
300x250
320x100