小说网站分布式爬虫的实现 VIP

成为vip会员,免费看所有精品课程
  • 目录

    目录 收起>

    本课程接上一课的内容,从多线程的角度实现小说网站信息的采集、分析、存储等,在这个过程中重点介绍如何实现小说网站信息的分布式采集。

    1.小说更新列表页信息采集线程 00:09:16

    本课时主要介绍如何实现采集线程类以及编写小说更新列表页信息采集线程类并对代码做相关调试运行。

    2.小说简介页信息采集线程 00:11:28

    本课时实现小说简介页和章节列表页信息采集线程类并对代码做相关调试运行。

    3.小说阅读页信息采集线程 00:07:21

    本课时实现小说阅读页息采集线程类并对代码做相关调试运行。

    4.小说网站信息采集 00:11:21

    本课时实现对简介页信息采集线程和阅读页信息采集线程的控制,实现小说网站信息的分布式采集。
  • 提问

    提交问题
  • 下载

  • 线路

    视频太卡?试试切换线路 √ 线路1 √ 线路2
  • 收藏

    收藏课程
  • 分享

连播

连续播放

关灯

关灯模式
视频加载太慢?

我们有两条线路可以选择,试试切换线路吧

小说网站分布式爬虫的实现

4课时,39分钟2015-12-02
小鸡慢慢
小鸡慢慢

极客学院签约布道师

课程背景:
在前面的课程中已经介绍了如何实现小说信息的采集、持久化,本课程将重点介绍如何基于之前课程的内容实现小说网站分布式采集。

核心内容:
1.小说更新列表页信息采集线程
2.小说简介页信息采集线程
3.小说阅读页信息采集线程
4.小说网站信息采集

软件环境:MyEclipse

是否提供资料:

课程等级:高级

适合人群:
具有一定 Java 基础的开发人员
VIP视频学习页面加QQ好友
  • 技术问答