Node.js批量抓取高清妹子图片

jerry thinkphp 2015年11月19日 收藏
妹子不错,统统抓起来!
http://www.focalhot.com/blog/62.html
  1. //依赖模块
  2. var fs = require('fs');
  3. var request = require("request");
  4. var cheerio = require("cheerio");
  5. var mkdirp = require('mkdirp');
  6.  
  7. //目标网址
  8. var url = 'http://me2-sex.lofter.com/tag/美女摄影?page=';
  9.  
  10. //本地存储目录
  11. var dir = './images';
  12.  
  13. //创建目录
  14. mkdirp(dir, function(err) {
  15.     if(err){
  16.         console.log(err);
  17.     }
  18. });
  19.  
  20. //发送请求
  21. request(url, function(error, response, body) {
  22.     if(!error && response.statusCode == 200) {
  23.         var $ = cheerio.load(body);
  24.         $('.img img').each(function() {
  25.             var src = $(this).attr('src');
  26.             console.log('正在下载' + src);
  27.             download(src, dir, Math.floor(Math.random()*100000) + src.substr(-4,4));
  28.             console.log('下载完成');
  29.         });
  30.     }
  31. });
  32.  
  33. //下载方法
  34. var download = function(url, dir, filename){
  35.     request.head(url, function(err, res, body){
  36.         request(url).pipe(fs.createWriteStream(dir + "/" + filename));
  37.     });
  38. };