关于垂直搜索引擎的研究与思考

1/5关于垂直搜索引擎的研究与思考关于垂直搜索引擎的研究与思考摘要本文介绍了垂直搜索引擎的相关知识和主要技术，通过了解垂直搜索引擎，能够让软件开发人员更好地掌握应用该技术，以满足用户对信息搜索的要求。关键词垂直搜索引擎；垂直搜索引擎技术；准则中图分类号TP3文献标识码A文章编号16746708490206010引言近几年来，随着信息技术的迅速发展，互联网上数据量也在急剧增长。在这样的海量数据面前，如何让用户快速准确地找到所需要的信息已成为研究的热点问题。垂直搜索引擎正是用于解决这类问题的。1垂直搜索与垂直搜索引擎垂直搜索的本质是对垂直门户信息提供方式的一次简化性的整合。垂直搜索的本质是对垂直门户信息提供方式的一次简化性的整合。它服务于某项功能的。而垂直搜索引擎是为垂直搜索服务，对网页中某类信息进行一次简化性的整合，通过关键词抽取出有用的数据进行处理，然后再返回给用户。垂直搜索引擎的工作原理垂直搜索通过网络蜘蛛将网页的非结构化数据抽取成特定的结构化信2/5息数据，进而获得元数据，然后将这些数据存储到数据库，进行进一步的分析处理，最后分成各个关键词，根据关键词的权重，来列出网页的重要度，存入数据库。整个过程中，数据由非结构化数据抽取成结构化数据，经过深度加工处理后以非结构化的方式和结构化的方式返回给用户。垂直搜索引擎的现况垂直搜索引擎是搜索引擎行业保持高增长的重要力量。据调查,目前中国互联网中的垂直搜索引擎日益发展壮大，不断有面向新行业的垂直搜索引擎网站出现，例如，有面向房子的搜房网，有面向求职的职业搜索，有面向学术的学术搜索等。目前垂直搜索引擎的主要盈利模式是基于竞价排名的广告模式，具体广告主在购买垂直搜索引擎服务后，通过注册一定数量的关键词，付费最高者排名靠前，购买了同一关键词的网站按不同的顺序进行排名,出现最终的搜索结果。垂直搜索引擎主要特点技术1）网页信息采集技术网页信息采集技术通过网络蜘蛛实现。网络蜘蛛可定向性的采集和垂直搜索范围相关的网页，通过网页的链接地址来寻找网页，读取网页内容并索引到其他网页，网络蜘蛛再访问这些WEB页面，通过无休止的重复以上过程，直到把这个网站所有的网页都抓取3/5完为止；2）从非结构化信息抽取到WEB结构化信息抽取，垂直搜索引擎和普通搜索引擎的区别就是对WEB页面信息进行深度的分析和处理，从而提供专业的搜索服务。可以将HTML元素分为以下几类简单对象不包含其他HTML元素的元素；容器对象有至少一个简单对象和其他容器对象组成的HTML元素；分组对象该方法分析了简单对象的视觉特征，然后从里到外以此分析分组对象或容器对象；3）索引技术垂直搜索能够支持全文索引，并提供多种结果排序方式。WEB页面被网络蜘蛛储存在页面存储器中，通过分析索引软件对采集的信息进行分析和处理，建立可供查询的、可靠的索引数据库。有的建立WWW页面内容的全文索引，有的只对页面中按分类或特征对信息进行抽取。垂直搜索引擎的优势1）使用的范围广。垂直搜索引擎依赖于互联网，而互联网的快速发展带动了垂直搜索引擎的发展。行业的信息量变大，信息过滤的重要性突显出来，垂直搜索引擎提高了好的工具，为想了解该行业的人提供一个便利方式；2）行业对垂直搜索引擎的重视度提高。搜索引擎是人们登陆互联网的门户,垂直搜索引擎则是它所面向行业的门户,在这里进行广告投资,获得巨大收益的概率大,所以每4/5个商业公司都会重视对其相关行业的垂直搜索引擎投资。垂直搜索引擎存在的问题用户对排名结果的满意度竞价排名是垂直搜索引擎广告的主要模式，同时也给垂直搜索引擎的广告带来巨大的经济利益，但竞价排名是根据关键词的出价来决定顺序的。从而形成价高者排名靠前，价低者排名靠后的规律。根据统计研究表明，用户使用搜索引擎一般看到第三页，后面的搜索结果用户往往跳过。这就出现搜索结果与用户所需要的内容不一致的情况，干扰了用户信息的获取。同时，价高者的搜索结果对用户来说没用多大的利用价值，但排名靠前；而有用的搜索结果排名靠后，极大破坏了用户的体验。所以用户使用垂直搜索引擎能够达到满意的结果是急需解决的问题。数据挖掘深度低数据挖掘,就是对用户在查询结果出现后的浏览行为和关键词输入记录,并进行有效整理统计分析,进而根据所获得的相关数据进行二次应用。挖掘用户的浏览习惯可以判断用户对某些内容的需要来满足用户的搜索目的；挖掘行业的关注点，对用户搜索时使用的关键词做记录，每隔一段时间多这些关键词进行分析统计，获取各个行业关注的情况。同时通过给企业用户提供搜索报告,可以和他们交换一些互联网没有的行业资料,实现双赢的效果；挖掘广告，5/5使得企业所投放的广告获得更好的收益。移动搜索使用率低随着手机的逐渐普及,以及3G技术的迅速铺开,移动搜索也已经提到议事日程来。目前由于移动平台的局限性，移动搜索使用率不高。搜索引擎的速度快、准确度高的特点在移动平台上不能很好的展现，需要不断的完善，争取垂直搜索引擎和移动平台能有完美的结合。6结论随着信息技术和互联网的发展，垂直搜索引擎在网络