关于垂直搜索引擎的研究与思考

1 / 5 关于垂直搜索引擎的研究与思考 关于垂直搜索引擎的研究与思考 摘要 本文介绍了垂直搜索引擎的相关知识和主要技术，通过了解垂直搜索引擎，能够让软件开发人员更好地掌握应用该技术，以满足用户对信息搜索的要求。 关键词 垂直搜索引擎；垂直搜索引擎技术；准则 中 图 分 类 号 TP3 文 献 标 识 码 A 文章编号 1674-670849-0206-01 0 引言 近几年来，随着信息技术的迅 速速发展，互联网上数据 量量也在急剧增长。在这 样样的海量数据面前，如 何何让用户快速准确地找 到到所需要的信息已成 为为研究的热点问题。垂 直直搜索引擎正是用 于解 决决这类问题的。 1 垂垂直搜索与垂直搜索引 擎擎 垂直搜索的本质是 对对垂直门户信息提供方 式式的一次简化性的整合 。垂直搜索的本质是对 垂垂直门户信息提供方式 的的一次简化性的整合。 它它服务于某项功能的。 而而垂直搜索引擎是为垂 直直搜索服务，对网页中 某某类信息进行一次简化 性性的整合，通过关键词 抽抽取出有用的数据进行 处处理，然后再返回给用 户户。垂直搜索引擎的工 作作原理：垂直搜索通过 网网络蜘蛛将网页的非结 构构化数据抽取成特定的 结结构化信息数据，进而 获获得元数据，然后将这 些些数据存储到数据库， 进进行进一步的分2 / 5 析处理 ，最后分成各个关键词 ，根据关键词的权重， 来来列出网页的重要度， 存存入数据库。整个过程 中中，数据由非结构化数 据据抽取成结构化数据， 经经过深度加工处理后以 非非结构化的方式和结构 化化的方式返回给用户。 垂直搜索引擎的现况 垂直搜索引擎是搜索引 擎擎行业保持高增长的重 要要力量。据调查 ,目前 中中国互联网中的垂直搜 索索引擎日益发展壮大， 不不断有面向新行业的垂 直直搜索引擎网站出现， 例例如，有面向房子的搜 房房网，有面向求职的职 业业搜索，有面向学术的 学学术搜索等。 目前垂 直直搜索引擎的主要盈利 模模式是基于竞价排名的 广广告模 式，具体广告主 在在购买垂直搜索引擎服 务务后，通过注册一定数 量量的关键词，付费最高 者者排名靠前，购买了同 一一关键词的网站按不同 的的顺序进行排名 ,出现 最最终的搜索结果。 垂 直直搜索引擎主要特点技 术术 1）网页信息采集 技技术网页信息采集技术 通通过网络蜘蛛实现。网 络络蜘蛛可定向性的采集 和和垂直搜索范围相关的 网网页，通过网页的链接 地地址来寻找网页，读取 网网页内容并索引到其他 网网页，网络蜘蛛再访问 这这些 web 页面，通过 无无休止的重复以上过程 ，直到把这个网站所有 的的网页都抓取完为止； 3 / 5 2）从非结构化信息 抽抽取到 web 结构化信 息息抽取，垂直搜索引擎 和和普通搜索引擎的区别 就就是对 Web页面信息 进进行深度的分析和处理 ，从而提供专业的搜索 服服务。可以将 HTML 元元素分为以下几类：简 单单对象：不包含其他 HTTML 元素的元素；容 器器对象：有至少一个简 单单对象和其他容器对象 组组成的 HTML元素； 分分组对象：该方法分析 了了简单对象的视觉特征 ，然后从里到外以此分 析析分组对象或容器对象 ； 3）索引技术垂直 搜搜索能够支持全文索引 ，并提供多种结果排序 方方式。 Web 页面被网 络络蜘蛛储存在页面存储 器器中，通过分析索引软 件件对采集的信息进行分 析析和处理，建立可供查 询询的、可靠的索引数据 库库。有的建立 WWW 页 面面内容的全文索引，有 的的只对页面中按分类或 特特征对信息进行抽取。 垂直搜索引擎的优势 1）使用的范围广。垂 直直搜索引擎依赖于互联 网网，而互联网的快速发 展展带动了垂直搜索引擎 的的发展。行业的信息量 变变大，信息过滤的重要 性性突显出来，垂直搜索 引引擎提高了好的工具， 为为想了解该行业的人提 供供一个便利方式； 2）行业对垂直搜索引擎 的的重视度提高。搜索引 擎擎是人们登陆互联网的 门门户 ,垂直搜索引擎则 是是它所面向行业的门户 , 在这 里进行广告投资 , 获得巨大收益的概率 大大 ,所以每个商业公司 都都会重视对其相关行业 的的垂直搜索引擎投资。 4 / 5 垂直搜索引擎存在的问 题题 用户对排名结果的 满满意度 竞价排名是垂 直直搜索引擎广告的主要 模模式，同时也给垂直搜 索索引擎的广告带来巨大 的的经济利益，但竞价排 名名是根据关键词的出价 来来决定顺序的。从而形 成成价高者排名靠前，价 低低者排名靠后的规律。 根根据统计研究表明，用 户户使用搜索引擎一般看 到到第三页，后面的搜索 结结果用户往往跳过。这 就就出现搜索结果与用户 所所需要的内容不一致的 情情况，干扰了用户信息 的的获取。同时 ，价高者 的的搜索结果对用户来说 没没用多大的利用价值， 但但排名靠前；而有用的 搜搜索结果排名靠后，极 大大破坏了用户的体验。 所所以用户使用垂直搜索 引引擎能够达到满意的结 果果是急需解决的问题。 数据挖掘深度低 数据 挖挖掘 ,就是对用户在查 询询结果出现后的浏览行 为为和关键词输入记录 ,并并进行有效整理统计分 析析 ,进而根据所获得的 相相关数据进行二次应用 。挖掘用户的浏览习惯 可可以判断用户对某些内 容容的需要来满足用户的 搜搜索目的；挖掘行业的 关关注点，对用户搜索时 使使用的关键词做记录， 每每隔一段时间多这些关 键键词进行分析统计， 获 取取各个行业关注的情况 。同时通过给企业用户 提提供搜索报告 ,可以和 他他们交换一些互联网没 有有的行业资料 ,实现双 赢赢的效果；挖掘广告， 使使得企业所投放的广告 获获得更好的收益。 5 / 5 移 动动搜索使用率低 随着 手手机的逐渐普及 ,以及 33G 技术的迅速铺开 ,移移动搜索也已经提到议 事事日程来。目前由于移 动动平台的局限性，移动 搜搜索使用率不高。搜索 引引擎的速度快、准确度 高高的特点在移动平台上 不不能很好的展现，需要 不不断的完善，争取垂直 搜搜索引擎和移动平台能 有有完美的结合。 6 结 论论 随着信息技术和互 联联网的发展，垂直搜索 引引 擎在网络信息检索中 将将发挥着越来越重