网络爬虫毕业设计69页.doc

上传人:晟*** 文档编号:7042259 上传时间:2021-09-17 格式:DOC 页数:69 大小:1.11MB
下载 相关 举报
网络爬虫毕业设计69页.doc_第1页
第1页 / 共69页
网络爬虫毕业设计69页.doc_第2页
第2页 / 共69页
网络爬虫毕业设计69页.doc_第3页
第3页 / 共69页
网络爬虫毕业设计69页.doc_第4页
第4页 / 共69页
网络爬虫毕业设计69页.doc_第5页
第5页 / 共69页
点击查看更多>>
资源描述

沈阳理工大学学士学位论文 I 摘要 目前即使通讯软件在平时的生活中有着十分广泛的应用,但是对绝大部分的软 件来说,都必须应用在互联网上,必须在一个 INTERNET 环境下才能使用。有时候单 位内部的员工,同学,在没有互联网环境下或因其他原因希望不用 INTERNET 就可以 进行信息交互,这样开发局域网通信就有了必要性。本文提出了局域网信息交互的需 求,并详细对网络协议 TCP/IP 协议族进行了介绍和研究,如 TCP,UDP,广播等相 关技术。并对网络信息交互原理惊醒了说明,在此基础上利用 SOCKET 网络编程实现 了一种基于 WINDOWS 平台的局域网信息交互功能。 网络爬虫是一种自动搜集互联网信息的程序。通过网络爬虫不仅能够为搜索引擎采集 网络信息,而且可以作为定向信息采集器,定向采集某些网站下的特定信息,如招聘 信息,租房信息等。 本文通过 JAVA 实现了一个基于广度优先算法的多线程爬虫程序。为何要使用多 线程,以及如何实现多线程;系统实现过程中的数据存储;网页信息解析等。 通过实现这一爬虫程序,可以搜集某一站点的 URLs,并将搜集到的 URLs 存入数 据库。将解析

展开阅读全文
相关资源
相关搜索

当前位置:首页 > 实用文档资料库 > 公文范文

Copyright © 2018-2021 Wenke99.com All rights reserved

工信部备案号浙ICP备20026746号-2  

公安局备案号:浙公网安备33038302330469号

本站为C2C交文档易平台,即用户上传的文档直接卖给下载用户,本站只是网络服务中间平台,所有原创文档下载所得归上传人所有,若您发现上传作品侵犯了您的权利,请立刻联系网站客服并提供证据,平台将在3个工作日内予以改正。