网络资源开发与利用

搜索引擎虽然表现为各种不同的形式，但其最根本是由信息搜集系统、索引数据库和查询接口三部分组成。下面就分别详细描述不同形式搜索引擎的组成：1)目录导航搜索引擎的信息搜集系统、索引数据库和查询接口目录导航式搜索引擎的信息搜集系统主要是由人工来完成，搜索引擎的标引专家依靠手工来搜寻不断出现的新的网站，给每个网站一个标题和大概的描述，将其放入相应的类目体系中。在页面上表现为每个类目路径下排列着相关的网站，所以也叫目录导航。目录导航式搜索引擎的索引数据库存入每个网站的标题、描述、类目、超文本链接（URL）组成倒排文档。目录导航式搜索引擎提供两种查询接口形式，一种是在网页上用户可以直接点击树状目录，一层一层的点击查看下去，直到找到用户需求的相关类目下的网站信息。另一种查寻接口就是关键词检索，用户直接在搜索框中输入所需信息的关键词，服务器接受命令后就会去索引数据库中匹配关键词，返回查询结果。因此可以看到，目录导航实现的原理比较简单，主要是编制目录导航页面和设计简单的检索功能。2) 网页搜索引擎的信息搜集系统、索引数据库和查询接口网页搜索引擎完全体现了现代先进的网络技术。网页搜索引擎的信息搜集系统是通过网络机器人（robot）或是网络蜘蛛（spider）来自动完成的，不需要任何的人工处理。网络机器人（robot）或是网络蜘蛛（spider）从一组已知的文档出发，通过这些文档的超文本链接确定新的检索点，然后用机器人或蜘蛛周游这些新的检索点，标引这些检索点上的新文档，加入索引数据库组成倒排文档。因此如何从原始文档中抽取出全部有用信息，并将抽取的信息记录到索引库中是关键。网页搜索引擎的的索引数据库建立的策略很大程度上影响了搜索引擎的效率与准确性。在设计一个索引数据库时，要针对实际需要确定索引数据库的数据结构和存储方式。由于搜索引擎系统通常处理的都是海量的信息，因此还要设计一定的压缩策略，对索引库进行有效的压缩，以提高检索的速度。索引库的具体结构在下文中会有详细的描述。网页搜索引擎一般只提供关键词检索这一种检索接口形式。为了方便用户的检索，网页检索的检索接口除了要提供对单个字符串进行检索的基本检索功能外，还要支持多种复杂的高级检索功能，如多个字符串组合检索、模糊检索等。网页搜索引擎的检索接口还担负着检索结果相关性排序等关键技术的实现。当然，也有的搜索引擎开发公司利用网络机器人（robot）或是网络蜘蛛（spider）抓取的网页用计算机自动分类建立目录导航系统，象香港中文大学开发的悠游网（）就是这种类型。3） 随着网络的发展，出现了许多多媒体搜索引擎，比如图片搜索引擎、MP3音乐搜索引擎等。常用搜索引擎列表【三大搜索门户】 / （谷歌） / （百度） / （雅虎） 【其他搜索门户】 / （搜狗） / （新浪爱问） / （中搜） / （搜搜） 【图片搜索】 / （雅虎相册） / （Google网络相册） / （flickr ）很棒的网络相册！需代理 【音乐搜索】 /newsearch.php （tureice）教育网内推荐！ / （搜刮） / （我99伴奏下载） /banzou/ （FUFU伴奏网） / （音乐娱乐社区） 【软件搜索】 /software/ （学生之家）教育网内速度很快 推荐！ /index.htm （华军软件） / （霏凡软件） /fixdown/default.html （全方位） / （心海e站） /powersearch.htm （驱动之家） /down/ （新浪科技） / （DIGDIG数据挖掘） /mydown/index.html （天极下载） / （eNet硅谷动力） 【博客搜索】 / （谷歌） / （百度） /blog/ （新浪） / （爱问） / （Souyo） 【地图搜索】 / （谷歌中国） / （谷歌美国） / （百度） / （图盟） / （搜狗） / （爱问） / （8684公交网） 【学术搜索】 / （谷歌学术搜索） / （Science周刊） / （Science每日新闻） / （Nature杂志） / （万方数据库） http:/repository.ust.hk/dspace/ （香港科技大学图书馆） / （中国科技论文在线） / （奇迹文库） / （中国预印本） / （开放阅读期刊联盟） 【wiki】 / （维基中文）（暂封） / （维库中文） /wiki/Main_Page （维库英文） 【FTP资源搜索】 / （北大天网） / （华中科大） 3/ftpsearch/ （华东理工） / （歪酷） /ftpsearch/search.html （星空互联） / （北邮） 【bt下载】 / （5Qbt）教育网内推荐！ / （BT China） / （bt之家） 【eMule下载】 / （VeryCD资源） / （飞客eMule搜索） 【游戏搜索】 / （Souyo游戏搜索） /disland/ （梦幻岛）红白机游戏大全！ 【法律搜索】 / （Qseek法律搜索） 【语言工具】 /translate_t （Google翻译） / （雅虎翻译） / （汉典字典） /cy/ （CERNET成语查询） / （爱词霸在线词典） / （StarDick）可自定义词典 【图书馆】 / （中国国家图书馆） / （中国科学院文献情报中心） / （北京大学图书馆） / （清华大学图书馆） / （中国人民大学图书馆） / （北京邮电大学图书馆） / （上海交通大学图书馆） / （武汉大学图书馆） / （广州图书馆） / （复旦大学图书馆） / （浙江大学图书馆） / （天津大学图书馆） / （北京师范大学图书馆） / （同济大学图书馆） / （中山大学图书馆） 0/cn/ （厦门大学知识资源港） / （西安交通大学图书馆） / （中国科技大学图书馆） / （超星数字图书馆） / （南京大学图书馆） / （北京理工大学图书馆） 29/ （北京交通大学图书馆） 【视频搜索】 百度视频搜索/百度汇集几十个在线视频播放网站的视频资源而建立的庞大视频库。百度视频搜索拥有最多的中文视频资源，提供用户最完美的观看体验。内容包括互联网上用户传播的各种广告片、预告片、小电影、网友自录等视频内容，以及WMV、RM、RMVB、FLV 、MOV等多种格式的视频文件检索。爱问视频搜索/ 新浪视频搜索用于搜索网络上的视频文件，可搜索到rmvb,rm,asx,wmv,mpg等各种视频播放格式的文件，以及压缩后的rar，zip等文件。文件类型涉及影视题材，音乐，新闻资讯，广告，作品，FLASH，以及小视频等等。 奇虎奇酷视频搜索/奇虎公司打造的生活搜索引擎。OpenV 视频搜索http:/www.openv.tv/中文专业电视及视频搜索引擎 TVix视频搜索 / 视频搜索引擎。提供电视节目，电视剧，电影，MV，自拍的DV等。 雅虎视频搜索/为您网罗互联网上精彩的视频短篇。CCTV视频搜索 /视频搜索引擎。提供中央电视台各频道电视节目片断。SOSO视频搜索 /视频搜索引擎。提供电视视频、网络视频。中文视频搜索专家天天在线-中文音视频搜索/天天在线推出的中文音视频搜索测试版。 Google视频搜索 （英）/用户用关键字即可搜索到许多组织的视频数据库索引以及网友上载的视频文件。 用户需要下载Google视频观看器（Google Video Viewer）的软件才能够观看完整的视频。Yahoo视频搜索（英）/能够搜索微软Windows Media、苹果QuickTime、RealNetwork的Real Media等多种格式的视频文件。 AOL视频搜索（英）/aolcom/videohome新发布的AOL Video Beta，可以允许用户从时代华纳周刊获取超过15,000的包括音乐视频的原始授权视频，还有CNN和MSNBC的新闻片断，华纳兄弟娱乐公司的电影。 【集成搜索引擎集锦】 集成搜索引擎的优点是明显的：首先，它在一个网站上同时搜索许多搜索引擎，最终返回的结果被进行了适当的整合，删除了一些不适合和重复的网页，从而大大地节省你的时间、金钱和精力，使搜索变得更有效率；其次，它使你的搜索结果更为全面、准确，也更容易找到符合你需要的结果。 以下是集成搜索引擎; 1. 引擎之家 () 2.Digisearch (/digisearch/) 3. Fusion (papp.dcu.ie/fusion/) 4.Cyber 411 (/) 5. Metacrawler (/) 6.SavvySearch (:2000/) 7.Profusion (/) 8. Mamma (/) 9.Ask Jeeves (/) 10. Highway 61 (/) 11.Dogpile (/) （1）p2p的概念 P2P是peer-to-peer的缩写，可以理解为“伙伴对伙伴”的意思，或称为对等联网。 它是基于P2P拓扑结构发展起来的一项新型网络通讯技术,P2P是一种技术，但更多的是一种有着改变整个互联网基础的潜能的思想。简单的说，P2P直接将人们联系起来，让人们通过互联网直接交互。P2P使得网络上的沟通变得容易、更直接共享和交互，真正地消除中间商。P2P就是人可以直接连接到其他用户的计算机、交换文件，而不是像过去那样连接到服务器去浏览与下载。P2P另一个重要特点是改变互联网现在的以大网站为中心的状态、重返“非中心化”，并把权力交还给用户。互联网最基本的协议TCP/IP并没有客户机和服务器的概念，所有的设备都是通讯的平等的一端。在十年之前，所有的互联网上的系统都同时具有服务器和客户机的功能。但是许多技术出现之后往往并不会完全按照原先的设计发展，服务器/客户机的架构逐渐变成了互联网的主流，浏览变成了人们在互联网上最主要的生存方式。互联网的普通用户似乎在慢慢的退化、和电视观众一样被动地浏览着大网站们创造的内容。 互联网的存储模式将由现在的“内容位于中心”模式转变为“内容位于边缘”模式。从这个角度看P2P带来了几个改变： 首先，客户不再需要将文件上载到服务器，而只需要使用P2P将共享信息提供出去； 其次运行P2P的个人电脑不需要固定IP地址和永久的互联网连接，这使得那些拨号上网的用户也可以享受P2P带来的变革，这部分用户在所有用户中占有极大的比重； 最后，P2P完全改变过去控制互联网的客户机/服务器模式，消除客户机和服务器二者之间的差别。 WAP等移动服务协议目前还主要关注让人们去使用处于中心的商业服务如新闻、股票信息等。但更多的时候人们最需要的信息是那些在他们的个人电脑上的信息，P2P使这成为可能。人们可以通过无线联网P2P访问他们的个人电脑，这也就是一些公司所宣传的个人化P2P（Personal P2P）的“无线版本”。 eMule eMule 是以 eDonkey2000 网络为基础的新型 P2P 文件分享工具。 OPENEXT 一款P2P软件。通过它，Internet用户之间可以直接建立点对点的连接。 迅雷Thunder “光速般”的智能下载软件迅雷（thunder2.2.0）。迅雷它拥有比目前用户常用的下载软件快710倍的下载速度。 易载ezpeer 易载ezPeer简体中文版，免费注册使用！ezPeer 是一个革命性的P2P（点对点）文件共享软件。 Kuro M3 Kuro-全球第一款全中文界面的火爆MP3超强抓歌软件！ 酷狗(KuGoo) “KuGoo”是酷狗的简称，是基于中文平台专业的P2P音乐及文件传输软件。通过KuGoo，用户可以方便、快捷、安全地实现国内最大的音乐搜索查找。 APIA APIA 是一个正在发展中的 P2P 网络系统，如同目前熟知的 eDonkey、Gnutella 与 Kazaa 等软件。 iMesh 能够让你设定分享文件的类型，音乐、影片或其他文件；也能够让你搜寻并且下载你想要的文件。 BearShare BearShare 是一个非常好的文件分享软件，它让你、你的朋友、在世界上的每一个人都可以分享文件。 即时讯息系统譬如ICQ、AOLInstantMessenger、YahooPager、微软的MSNMessenger以及国内的OICQ是最流行的P2P应用。3.“”这个词是文件传送协议的缩写(File Transfer Protocol)，FTP的主要作用就是让用户连接上一台所希望浏览的远程计算机。这台计算机必须运行着FTP服务器程序，并且储存着很多有用的文件，其中包括计算机软件、图像文件、重要的文本文件、声音文件等等。二、FTP的工作原理 FTP是基于C/S模式而设计的。在进行FTP操作的时候，即需要客户应用程序，也需要服务器端程序。我们一般先在自己的计算机中执行FTP客户应用程序，在远程服务器中执行FTP服务器应用程序，这样，就可以通过FTP客户应用程序和FTP进行连接。连接成功后，可以进行各种操作。在FTP中，客户机只提出请求各接收服务，服务器只接收请求和执行服务。 在利用FTP进行文件传输之前，用户必须先连入INTERNET网中，在用户自己的计算机上启动FTP用户应用程序，并且利用FTP应用程序和远程服务器建立连接，激活远程服务器上的FTP服务器程序。准备就绪后，用户首先向FTP服务器提出文件传输申请，FTP服务器找到用户所申请的文件后，利用TCP/IP将文件的副本传送到用户的计算机上，用户的FTP程序再将接收到的文件写入自己的硬盘。文件传输完后，用户计算机与服务器计算机的连接自动断开。 与其他的C/S模式不同的是，FTP协议的客户机与服务器之间需要建立双重连接：一个是控制连接，另一个是数据连接。这样，在建立连接时就需要占用两个通信信道。FTP与其他客户端应用程序不同之处就是它在HOST之间使用两条连接.一条接连用于数据的传输,而另一条则用于传输控制信息.控制连接使用非常简单的通信规则,需要传送的只是一行命令或一行响应.另一方面,因为要传送的数据类型较多,数据传送需要复杂的规则.将命令与数据传输分开使FTP的效率更高.FTP使用TCP的服务.FTP使用两个端口:端口21用于控制连接,而端口20用于DATE连接.FTP的默认端口号为21.客户有3个构件:用户接口,客户控制进程和客户数据传输进程.服务器传输进程.控制连接在控制进程之间进行,数据连接在数据传输进程之间进行.在整个交互的FTP会话中,控制连接始终处于连接状态,数据连接则在每次文件传送时先打开然后关闭.每当涉及到传送文件的命令时,数据连接就被打开,而当文件传送完毕时连接就关闭.换言之,当用户开始FTP会话时,控制连接就打开.在控制连接处于打开状态时,若传送多个文件,则数据连接可以打,开和关闭多次.哟啊使用FTP,拥护就需要在远程服务器上有一个用户名和口令,某些站点有一组可提供公共使用的文件,要使用这些文件,用户不需要有拥护名或口令.因此可以使用ANONYMOUS作为拥护名并使用GUEST作为口令.拥护接入到这样的系统是受到限制的迅雷下载迅雷特色迅雷使用的多资源超线程技术基于网格原理，能够将网络上存在的服务器和计算机资源进行有效的整合，构成独特的迅雷网络，通过迅雷网络各种数据文件能够以最快的速度进行传递。 多资源超线程技术还具有互联网下载负载均衡功能，在不降低用户体验的前提下，迅雷网络可以对服务器资源进行均衡，有效降低了服务器负载。 缺点就是比较占内存，一般你只要将迅雷配置中的“磁盘缓存”设置得越大（自然也就更好的保护了磁盘），那么内存就会占的更大；还有就是广告太多了，我想只要迅雷肯改进这两项，那么迅雷就会变得非常的成功了。 资源来源 迅雷是个下载的软件，迅雷本身不支持上传资源，它只是一个提供下载和自主上传的工具软件。简单的说迅雷的资源取决于拥有资源网站的多少，同时需要有任何一个迅雷用户使用迅雷下载过那个资源，迅雷就能有所记录。如果大家能在很多网站上使用迅雷下过，那资源就很多了。迅雷7在UI界面和性能上有了巨大的改进和提升。在界面方面，提供了华丽的外观，用户可以自由的切换配色方案或者自定义自己的个性化配色，甚至可以自由的拖放入一张自己的图片，而迅雷7会自动提取背景图特征色的方式让整个界面的风格保持一致。 迅雷7借助BOLT引擎实现了一套全新的皮肤系统，也就是说： 您可以随意往迅雷拖入一张图片进入迅雷界面换肤，我们会通过提取背景图特征色的方式让整个界面的风格保持一致； 您可以随意更换背景皮肤，随意自定义想要的配色方案； 您可以精心裁剪图片，达到满意的效果； 您可以调整界面的所有字体，换成您自己安装的或系统自带的华文琥珀、火星文、隶书等等。 您可以随心调整主界面和任务列表透明度，配合着皮肤，调整出酷炫的效果，没有达不到，只有想不到。 您可以在win7下享受玻璃效果。功能变化： 1、新增“离开模式”支持 【“离开模式”是一种仅Win7、Vista操作系统默认支持的节能技术，开启“离开模式”后，计算机进入“睡眠”状态时，显卡、声卡等设备被关闭，而CPU、内存、硬盘、网卡仍运行，使迅雷可以在降低计算机功耗的情况下继续运行,让你的下载更低碳、更环保！】 2、新增“发送文件到”功能 【支持发送到本地目录及移动存储设备】 3、新增“高清片库”功能 【迅雷看看高清片库，720P电影免费下！】 4、新增“迅雷导航”功能 【不知道下载什么？来迅雷导航看看吧！】 5、新增“下载完成