本文介紹了Node.js 利用cheerio制作簡(jiǎn)單的網(wǎng)頁爬蟲示例,分享給大家,具有如下:
1. 目標(biāo)
2. 代碼部分
介紹: 獲取segment fault頁面的列表標(biāo)題,將獲取到的標(biāo)題列表編號(hào),最終輸出到pageTitle.txt文件里
const https = require('https');const fs = require('fs');const cheerio = require('cheerio');const url = 'https://segmentfault.com/';https.get(url, (res) => { let html = ''; res.on('data', (data) => { html += data; }); res.on('end', () => { getPageTitle(html); });}).on('error', () => { console.log('獲取網(wǎng)頁信息錯(cuò)誤');});function getPageTitle(html) { const $ = cheerio.load(html); let chapters = $('.news__item-title'); let data = []; let index = 0; let fileName = 'pageTitle.txt'; for (let i = 0; i < chapters.length; i++) { let chapterTitle = $(chapters[i]).find('a').text().trim(); index++; data.push(`/n${index}, ${chapterTitle}`); } fs.writeFile(fileName, data, 'utf8', (err) => { if (err) { console.log('fs文件系統(tǒng)創(chuàng)建新文件失敗', err); } console.log(`已成功將獲取到的標(biāo)題放入新文件${fileName}文件中`) })}以上就是本文的全部?jī)?nèi)容,希望對(duì)大家的學(xué)習(xí)有所幫助,也希望大家多多支持武林網(wǎng)。
新聞熱點(diǎn)
疑難解答
圖片精選
網(wǎng)友關(guān)注