과제1_Node.js 로 네이버 뉴스 크롤링하기

const axios = require("axios"); //특정  URL  삽입 시 URL html 태그 가지고
const cheerio = require("cheerio");
var scanf = require('scanf');
 
 
// HTML 코드를 가지고 오는  함수
const getHTML = async(keyword) => {
  try{
    return await axios.get("https://search.naver.com/search.naver?where=news&ie=UTF-8&query=" + encodeURI(keyword)) //""안에는 URL 삽입
  }catch(err) {
    console.log(err);
  }
}
 
 // 파싱 함수
const parsing = async (keyword) => {
  const html = await getHTML(keyword)
  const $ = cheerio.load(html.data);// 가지고 오는 data load
  const $titlist = $(".news_area");
 
  let informations = [];
  $titlist.each((idx,node) => {
    const title = $(node).find(".news_tit").text();  
 
    informations.push({
      title: $(node).find(".news_tit:eq(0)").text(), // 뉴스제목 크롤링
      link: $(node).find(".info_group > a:nth-child(3)").attr('href') // url 링크 크롤링
 
    })
 
  }); //for문과 동일
 
  return informations;
}
 
(async function(){
  const news = await parsing("호날두");
 
  news.forEach(function(news) {
    console.log(news.title);
    console.log(news.link, '\n');
 
});
 
  })();