设为首页收藏本站

开启辅助访问广告合作开通会员官方QQ/微信群新人报到处

分布式系统框架(V2.0) 轻松承载百亿数据，千万流量！讨论专区 - 源码下载 - 官方教程

HttpHelper爬虫框架(V2.7-含.netcore) HttpHelper官方出品，爬虫框架讨论区 - 源码下载 - 在线测试和代码生成

HttpHelper爬虫类(V2.0) 开源的爬虫类,支持多种模式和属性 源码 - 代码生成器 - 讨论区 - 教程- 例子

苏飞论坛»主页 › 开发专区 › 求助专区 › 遇到好头疼的问题了啦多线程

发新帖

查看: 3517|回复: 4

[其他] 遇到好头疼的问题了啦多线程

发表于 2014-1-11 15:43:04 | 显示全部楼层 |阅读模式

我在做一个多线程获取百度的列表结果出现了问题

首先单线程是没任何问题的

问题就处在不我开启了多线程之后，不知道如何去调度启动的做任务。

最耗时的操作有两个地方：

一个地方是获取输入关键词的页数

还有一个就是抓取结果

我把线程一下子启动了发现线程都是做同一样的任务，不知道如何下手操作了。。。。。。

1. 开通SVIP会员，免费下载本站所有源码，不限次数据，不限时间
2. 加官方QQ群，加官方微信群获取更多资源和帮助
3. 找站长苏飞做网站、商城、CRM、小程序、App、爬虫相关、项目外包等点这里

回复

使用道具举报

发表于 2014-1-11 18:49:51 | 显示全部楼层

你搜多线程我有例子

回复支持反对

使用道具举报

楼主| 发表于 2014-1-12 14:39:10 | 显示全部楼层

我看了但是还是没有思路怎么去分配调度那些线程

回复支持反对

使用道具举报

发表于 2014-1-13 08:23:42 | 显示全部楼层

一个取页数一个取结果啊，然后根据关键字来更新。或者是根据你的数据IP来更新就行了吧

回复支持反对

使用道具举报

楼主| 发表于 2014-1-14 09:55:29 | 显示全部楼层

哦哦谢谢飞哥

回复支持反对

使用道具举报

发新帖

|手机版|小黑屋|手机版|联系我们|关于我们|广告合作|苏飞论坛 ( 豫ICP备18043678号-2)

GMT+8, 2025-5-6 16:16

© 2014-2021

快速回复 返回顶部 返回列表