Skip to content

node.js 爬虫,使用了动态IP代理,和动态浏览器头部信息,防反爬

Notifications You must be signed in to change notification settings

bruce-gou/Reptilian

Folders and files

NameName
Last commit message
Last commit date

Latest commit

 

History

3 Commits
 
 
 
 
 
 
 
 
 
 
 
 

Repository files navigation

Reptilian

本案例是爬的一部小说,爬取并存在本地

使用了动态浏览器头部信息,和 动态ip代理, 这2个方式可以有效的伪装自己,不至于被反爬,然后拉黑

博客地址 :https://www.cnblogs.com/bruce-gou/p/9318865.html

该案例只适用于 该小说网站的这一部小说,其他网站需自行制定爬取规则

使用方式 npm i npm run start

About

node.js 爬虫,使用了动态IP代理,和动态浏览器头部信息,防反爬

Resources

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published