一、文献综述
基于网络爬虫技术的自主新闻采集网站的设计与实现
- 国内外研究现状
网站设计方面：
在国外，网页制作已经发展的十分成熟。在网站制作这块已经走在技术的前沿。他们有不少成熟的例子，例如Bootsrtap、Jquery等框架。他们的成熟技术使得他们制作的网站在各方面都有不错的表现。在内容上，外国网站的布局大气、清晰，使人能在舒适的用户体验下循序地了解网站所陈述的主题。在形式上，国外网站运用了多种优秀的写法，使网站在有不错互动动画的同时不卡顿，完美地提高了用户的体验。在适应性上，国外网站能在PC端，Pad端，以及各种手机端有完美的兼容显示效果。这让用户能够随时随地浏览网站。这及大地提高了用户查看网站的便捷性，大大增加了网站的人流量。可以说，外国的优秀范例有不错的指导意义。学习国外的网站可以获得很多实用的经验。
在近几年，中国的网站制作技术有不小的飞跃。在前几年，由于有不少用户使用Window XP自带的IE6，中国的网站制作者们不得不将不兼容新技术的IE6的显示效果作为第一考虑因素。在近几年，随着Window XP的用户量减少，以及chrome、FireFox等优秀浏览器被越来越多的用户接受、光纤在普通群众中普及、电脑配置不断升高等多种因素，中国互联网的制作技术在各方面都有了质的飞跃。lt;br /gt;
现在，随着电脑技术的发展，人们对于网站的需求也在不断地提升。在过去，网站的作用可能只要清晰地介绍内容，同时加几张图片和简单的动画就可以了。在现在，用户不但在用户体验方面有更高的要求，而且在网站功能方面也不断提出新要求。当用户当上一个网站时，他们不但希望了解内容，而且还想通过流畅的的动画、幻灯片等形式获取信息。同时，不少网站也开始针对用户需求，提供各种amp;ldquo;在线DIYamp;rdquo;、amp;ldquo;在线首饰定制amp;rdquo;等网站应用。这些主要依靠JavaScript的发展。总体说，用户对网站的需求也在与日俱增。
爬虫方面：
随着网络的迅速发展，万维网成为大量信息的载体，如何有效地提取并利用这些信息成为一个巨大的挑战。搜索弓|擎(Search Engine),例如传统的通用搜索引|擎AltaVista, Yahoo!和Google等，作为一个辅助人们检索信息的工具成为用户访问万维网的入口和指南。但是，这些通用性搜索引擎也存在着一定的局限性,如:
(1)不同领域、不同背景的用户往往具有不同的检索目的和需求，通过搜索弓|擎所返回的结果包含大量用户不关心的网页。
以上是毕业论文文献综述，课题毕业论文、任务书、外文翻译、程序设计、图纸设计等资料可联系客服协助查找。
