现在项目(web)中有个需求,每天临晨对一个 WEB 目标进行页面爬取,爬取过程是一个多线程任务,这个任务由 Quartz(Spring2 整合)cronTrigger 来调度。 大概同时会派出5-10个爬虫线程,执行爬虫线程的线程池,也是由 Spring 配置的 SimpleThreadPoolTaskExecutor。
现在的情况:众所周知,Quartz 缺省维持了一组自己的线程池,default pool size = 10。 实际上我全系统只有一个任务,每天运行一次,那么,每次调度触发时,池中始终只有一个线程会被用到。 这个线程开始执行任务后, 单独配置的爬虫线程池再接着开始执行 ...
版本:Struts 2.0.6
struts.xml
<package name="default" extends="struts-default">
...
</package>
<include file="struts-admin.xml"/>
struts-admin.xml
<package name="admin" namespace="/admin" extends="default">
...
</package>
www2 中完全没有问题的package继承配置,在 Struts 2.0.6 中如法炮制,启动 ...
- 浏览: 4411 次
- 来自: K星座

- 详细资料
搜索本博客
最近加入圈子
最新评论
-
SNA 架构下的在线人数统计
我们做的一个WEB系统,也有实时统计在线人数和具体人员的要求。我们采用主框架页A ...
-- by 雁行 -
SNA 架构下的在线人数统计
在线统计的计数自然是放到缓存里的。 我关心的问题是,怎样才能不依赖于 se ...
-- by totobacoo -
SNA 架构下的在线人数统计
dingyuan 写道既然都sna了。。在线统计的计数也放到缓存或者给数据库用户 ...
-- by hocus -
SNA 架构下的在线人数统计
既然都sna了。。在线统计的计数也放到缓存或者给数据库用户表加一个字段,标示用户 ...
-- by dingyuan -
Quartz 执行多线程任务
quartz 作为独立程序来运行,连我提的问题都不会存在了。 我想讨论的前提就是 ...
-- by totobacoo






评论排行榜