文章标题:$article['title'];
分布式采集
发布时间:$article['dateline'];
2013-06-30 16:36:40
浏览量:$article['views'];
5851
分类链接 $article['cateurl'];
/other
分类名称:$article['catename'];
其它资料
文章内容:echo $article['content'];

一些网站会比频繁的访问进行封ip,这样就必须换ip或是使用代理。一些要采集大量数据的任务,使用一台电脑采集显示是太慢了。如何解决这些问题,分布式是一个方向。

分布式由一台主控服务器来调度其它的客户端进行数据采集,使每个客户端都有事做,使任务能分散的进行抓取。


Tags:$article['tag']

原文链接:$article['url'];
/article/287.html
阅读排行 $hotdata=getHotArticle(1);