bad request 400手机:如何在web中抓取大量网页呢?

来源:百度文库 编辑:中科新闻网 时间:2024/05/05 19:47:40
最近做一个实验,希望能在web中抓取大量网页,保存在windows的文件系统或者数据库中,目前常见的一些开源爬虫或者搜索引擎都是基于linux的,请问有没有windows平台下的爬虫或者搜索引擎(软件或源码)?

不清楚,帮你问问.

我公司正在开发,已经成形开始盈利了,你多少钱要?