Java多线程网页爬虫

新闻媒体 · 其他 案例ID: 156411
联系该工程师
微信扫码,建群沟通
作者: Galatic - 2年经验- 中国航信

案例介绍

1.使用了线程池的机制,支持并行/并发下载网页内容,并不断提取新解析出来的url
2.网页以分类形式保存在指定目录(文件名由url无损转换过来)
3.个人开发的小程序,用swing组件集显示界面,核心是多线程程序设计
4.此代码已在我的个人github上(我的github上还有一些算法)

相似案例推荐

发布任务

企业点击发布任务,工程师会在任务下报名,招聘专员也会在 1 小时内与您联系确认。

1小时精推人才

需求方专属客服,免费梳理匹配

需求方客服微信二维码
扫码加微信 · 客服人工对接
微信沟通 联系需求方端客服 看中这位工程师了?客服帮你 1 小时对接沟通 → ×