做一个网络爬虫程序: 从一个网址 如http://hao.360.cn开始 得到网页的内容 找到其中的链接 并进
已帮助 人
做一个网络爬虫程序: 从一个网址,如http://hao.360.cn开始,得到网页的内容,找到其中的链接,并进一步下载(注:可以将已下载的链接保存入一个Hashtable中,其key为链接的网址,下载前其值为false,下载后其值为true)。 (要注意绝对引用与相对引用的问题,为了简化,可以只考虑绝对引用的链接)。 评分标准: 能获取网页内容(3分); 能解析出网页的内容中的网址(3分); 能放入一个hashtable中进一步下载(3分); 总体情况(1分)。

回答
共1条回复-
发起请求;获取响应内容;解析内容;保存数据
