Skip to content

nomorewzx/MFWFetcher

Repository files navigation

###MFWFetcher 说明文档


MFWFetcher 用于抓取mafengwo.cn网站的公开用户历史数据,具体包括用户公开的个人信息,用户旅游目的地,旅游日期,旅游花费,日志发表日期等;

MFW_mmain.py脚本是整个爬虫的入口。有两个函数:fetchManyfetchSingle,分别是自动抓取多个用户的信息以及只抓取单个用户的信息。区别在于其开始爬取时种子URL来源不同。

About

fetching data from MFW

Resources

License

Stars

Watchers

Forks

Releases

No releases published

Packages

No packages published

Languages