언론 보도 내역 자동 모니터링

const sheet_name = "시트1" //결과를 저장할 엑셀 Sheet 이름을 넣어주세요. 예) 시트1
const keyword_array = ['한국여성의전화','가정폭력'] //검색할 키워드를 넣어주세요
const q = keyword_array.join("+|+") //검색어가 둘 다 있어야 하면 "+"로, 둘 중 하나라도 있어도 된다면 "+|+" 로 입력해주세요
const start_date = '2023.01.01' //검색할 기간 (시작날짜)
const end_date = '2023.01.31' //검색할 기간 (종료날짜)

function main(){
  const base_url = "https://m.search.naver.com/search.naver";
  const params = {
                  'where': 'm_news',
                  'query': q,
                  'sort': 2,
                  'pd': 3,
                  'ds': start_date,
                  'de': end_date
                 }
  let query_string = convertToQueryString(params);
  do {
    let url = base_url + query_string;
    query_string = scraper(url);
  } while ( typeof(query_string) !== "undefined" ) //다음 페이지가 없을 때까지 계속 실행
}

function convertToQueryString(params) {
  var queryString = "?";
  for (var key in params) {
    queryString += key + "=" + encodeURIComponent(params[key]) + "&";
  }
  return queryString.substring(0, queryString.length - 1);
}

function getContent_(url) {
    return UrlFetchApp.fetch(url).getContentText()
}

function setSheetData(sheet, data){
  var row = sheet.getLastRow() + 1;
  const num_rows = 1;
  const col = 1;
  const num_cols = 4;

  for (var datum of data) {
    var input = [];
    input.push(datum);
    sheet.getRange(row, col, num_rows, num_cols).setValues(input);
    row++;
  }
}

function scraper(url){
  let html = UrlFetchApp.fetch(url).getContentText();
  let $ = Cheerio.load(html);
  let news_array = $('.news_wrap').toArray();
  let list_array = []
  news_array.forEach((news) => {
    let title = $(news).find('.api_txt_lines.tit').text();
    let press = $(news).find('.info_group > a.press').text();
    let link = $(news).find('a.news_tit').attr("href");
    let date = $(news).find('div.info_group > span.info:first').text();
    list_array.push([date, title, press, link]);
  })

  //insert into sheet
  const sheet = SpreadsheetApp.getActiveSpreadsheet().getSheetByName(sheet_name);
  setSheetData(sheet,list_array);

  let next_link = $('div.list_page > a.now').nextAll('a.pgn').first().attr("href");
  return next_link;
}