JAVA 자료구조 jsoup 사용하기

2017.03.27 15:24

졸리운_곰 조회 수:316

jsoup 사용하기

파이썬에 BeautifulSoup가 있고, C#에 HtmlAgilityPack이 있다면, 자바에는 Jsoup이 html 파싱에 가장 편할 것 같다.

(이름도 beautifulSoup와 비슷하게 jsoup임)

 

사용 방법부터 보자면, 우선 jsoup 라이브러리부터 가져와야 한다.

해당 홈페이지에서 다운 받거나, gradle을 이용해서 라이브러리를 추가하도록 한다.

 

dependencies{

     compile 'org.jsoup:jsoup:1.7.3'

}  

 

라이브러리 추가가 완료되었으면 이제 실제 어떻게 사용되는지를 확인해 보자.

 

웹 페이지의 GET 데이터 정보 가져오기

 

import org.jsoup.Jsoup;

import org.jsoup.nodes.Document;

import org.jsoup.nodes.Element;

import org.jsoup.parser.Parser;

import org.jsou.select.Elements;

 

public class Test{

    public void getDataFromWeb(){

        Document doc = Jsoup.connect("웹데이터를 가져올 주소").get();

        ......

    }

 

웹 페이지의 POST 데이터 정보 가져오기

경축! 아무것도 안하여 에스천사게임즈가 새로운 모습으로 재오픈 하였습니다.
어린이용이며, 설치가 필요없는 브라우저 게임입니다.
https://s1004games.com

 

Document doc = Jsoup.connect("웹데이터를 가져올 주소").data("value1", "1").data("value2", "2").userAgent("Mozilla").cookie("auth", "token").timeout(3000).post(); 

 

웹 페이지의 XML 데이터 정보 가져오기

- XML 같은 경우에는 Jsoup 내부의 parser를 이용해야 한다.

 

Document doc = Jsoup.parse(new URL("웹데이터 주소").openStream(), "euc-kr", "웹데이터 주소");

Elements datas = doc.select("xml 노드");

for(i = 0; i < datas.size(); i++){

    System.out.println(String.valueOf(datas.get(i).attr("xml 각 노드의 속성"))); 

}

 

파싱하기

 

# class 명이 test인 항목만 가져와라

Elements items = doc.select(".test");

 

# id 명이 test인 항목만 가져와라

Elements items = doc.select("#test");

 

# class 명이 test인 항목 안의 a 태그만 가져와라

Elements tags = doc.select(".test a");

 



출처: http://yujuwon.tistory.com/entry/jsoup-사용하기 [Ju Factory]

 

 

본 웹사이트는 광고를 포함하고 있습니다.
광고 클릭에서 발생하는 수익금은 모두 웹사이트 서버의 유지 및 관리, 그리고 기술 콘텐츠 향상을 위해 쓰여집니다.
번호 제목 글쓴이 날짜 조회 수
27 [java][maven] jar 파일 의존성 한번에 다운로드 maven 사용 졸리운_곰 2023.08.24 192
26 Prometheus + Grafana로 Java 애플리케이션 모니터링하기 file 졸리운_곰 2020.12.17 279
25 Blockchain Implementation With Java Code file 졸리운_곰 2019.06.16 338
24 Java 코드로 이해하는 블록체인(Blockchain) 졸리운_곰 2019.06.16 377
23 순수 Java Application 코드로 Restful api 호출 졸리운_곰 2018.10.10 415
22 WebDAV 구현을 위한 환경 설정 file 졸리운_곰 2017.09.24 268
21 [Java] Apache Commons HttpClient로 SSL 통신하기 졸리운_곰 2017.03.27 784
20 JSoup를 이용한 HTML 파싱 졸리운_곰 2017.03.04 320
19 jsoup을 활용해서 Java에서 HTML 파싱하는 방법 정리 file 졸리운_곰 2017.03.04 579
18 NSA의 Dataflow 엔진 Apache NiFi 소개와 설치 file 졸리운_곰 2017.01.23 630
17 wordpress-java-integration 자바와 워드프레스 통합 졸리운_곰 2016.12.30 298
16 Create New Posts in Wordpress using Java and XMLRpc 졸리운_곰 2016.11.14 268
15 자바로 POST 방식으로 통신하기, java httppost 클래스를 활용한 예제 졸리운_곰 2016.11.14 647
14 [Java]아파치 HttpClient사용하기 file 졸리운_곰 2016.11.14 301
13 Building a Search Engine With Nutch Solr And Hadoop file 졸리운_곰 2016.04.21 435
12 Nutch and Hadoop Tutorial file 졸리운_곰 2016.04.21 391
11 Latest step by Step Installation guide for dummies: Nutch 0. file 졸리운_곰 2016.04.21 305
10 Nutch 초간단 빌드와 실행 졸리운_곰 2016.04.21 681
9 Nutch로 알아보는 Crawling 구조 - Joinc 졸리운_곰 2016.04.21 536
8 A tiny bittorrent library Java: 자바로 만든 작은 bittorrent 라이브러리 file 졸리운_곰 2016.04.20 418
대표 김성준 주소 : 경기 용인 분당수지 U타워 등록번호 : 142-07-27414
통신판매업 신고 : 제2012-용인수지-0185호 출판업 신고 : 수지구청 제 123호 개인정보보호최고책임자 : 김성준 sjkim70@stechstar.com
대표전화 : 010-4589-2193 [fax] 02-6280-1294 COPYRIGHT(C) stechstar.com ALL RIGHTS RESERVED