node.jsでスクレイピング - 闘うITエンジニアの覚え書き

作業用ディレクトリの作成、必要なライブラリのインストール

mkdir sample
cd sample
npm install request --save
npm install jquery --save
npm install jsdom --save

sample.js

const jquery = require("jquery");
const request = require("request");
const jsdom = require("jsdom");

var options = { 
  url: "https://xxxxx.xxxxx.xxxxx/",
  method: "GET",
  headers: {"Content-Type": "text/html"}
}

request(options, function (error, response, body) {
  const dom = new jsdom.JSDOM(body);
  const $ = (jquery)(dom.window);
  $("body").find("dl ul li").each(function(){
      console.log($(this).text());
  }); 
});

node sample.js