API활용_Jsoup API 이용한 웹 페이지 크롤링2

# Jsoup API 활용 (Jsoup API 이용한 웹 페이지 크롤링2)

## 웹 페이지 클롤링 하기 (HTML Parsing)

• 크롤링 할 홈페이지 url : https://finance.naver.com/news/news_list.naver?mode=LSS2D&section_id=101&section_id2=258 

실시간 속보 : 네이버 금융

• 위 홈페이지에서 실시간 속보 가져오기.
• 구현 로직

import java.io.BufferedReader;
import java.io.InputStreamReader;

import org.jsoup.Jsoup;
import org.jsoup.select.Elements;
import org.jsoup.nodes.*;

public class Project02_B {
	public static void main(String[] args) {
		
		String url = "https://finance.naver.com/news/news_list.naver?mode=LSS2D&section_id=101";
		
		BufferedReader br = new BufferedReader(new InputStreamReader(System.in));
		
		try {
			System.out.println("[입력 : 숫자 입력] : ");
			String sectionId = br.readLine();		
			url += url + "&section_id2=" + sectionId;
			
			System.out.println("================================");
			Document doc = Jsoup.connect(url).post();
			Element subTitle =  doc.select(".sub_tlt").first();
			System.out.println(subTitle.text());
			
			System.out.println("================================");
			Elements newsList =  doc.select(".newsList .articleSubject");
			for (Element dd : newsList) {
				System.out.println(dd.text());
			}
			
		} catch (Exception e) {
			e.printStackTrace();
		}
		
		
	}
}

• 출력 결과

[입력 : 숫자 입력] : 
258
================================
실시간 속보
================================
메디콕스, 호주 그린파머스와 대마 원료 수입독점계약 체결
[속보] 코스피, 2400선 재차 붕괴
삼성증권, 2년만에 '전국 동시 투자설명회' 재개
[ET라씨로] '누리호 발사 D-1'…AP 위성 등 관련주 강세
코스피, 장중 2400선 붕괴…19개월 만에 최저치
코스피·코스닥 또 연저점 경신
[fn마켓워치] 바이와알이 韓신임 대표에 배양호 前한국수력원자력 재생에너지처장 선임
마지노선 무너진 비트·이더…큰손들도 “추가적인 고통 대비”
개장 직후 하락 전환한 코스피, 원/달러 환율은 상승
개장 직후 하락 전환한 코스피·코스닥지수, 원/달러 환율은 상승
[시그널] E&F PE, 폐기물 처리업계 강자로 '우뚝'
[속보] 코스피 장중 2400선 재차 붕괴…2391선
KB證, 서울옥션과 하반기 투자전략·미술투자 세미나
[특징주] 바이오플러스, 미국·중국 필러 시장 진출 기대감… 4%↑
경기 침체 우려에 코스피 연중 최저치 '뚝'…2391.27
[장중시황] 코스피, 하루 만에 2400선 다시 붕괴…외인 '팔자' 낙폭 커져
[속보] 코스피, 장중 2400선 붕괴
[증시신상품] 신한자산운용, S&P500 월배당 ETF
와이즈에이아이, 일본 기업과 'AI 플랫폼' 수출 협약
[속보] 코스피, 장중 2400선 재차 붕괴