网络营销知识仓库-第30部分
按键盘上方向键 ← 或 → 可快速上下翻页，按键盘上的 Enter 键可回到本书目录页，按键盘上方向键 ↑ 可回到本页顶部！
————未阅读完？加入书签已便下次继续阅读！
he Internet。 A user enters search terms； typically by typing a keyword or phrase； and the search engine retrieves a list of World Wide Web （WWW ）sites； personal puter files； or documents； either by scanning the content stored on the puters or puter networks being searched or by parsing （analyzing）an index of their stored data。 搜索引擎是帮助用户查找存储在个人电脑、计算机网络如互联网上的信息的软 件序。用户输入搜索项目，通常是通过录入一个关键词或短语，搜索引擎通过扫描被搜索的计算机和计算机网络，或者分解（分析）它们数据的索引，返回万维网站点、个人电脑文件或文档的列表。 这个定义可能越看越模糊，那么以下章节的内容将会让你清晰地认识搜索引擎。 第二节 搜索引擎的基本工作原理 现在互联网上存在的网页数量是数以百亿千亿计的，这些网站存储在不同的服务器上， 分布在世界各地的数据中心和机房。 对于搜索引擎来说，要抓取互联网上所有的网页几乎是不可能的，从目前公布的数据来看，容量最大的搜索引擎也不过是抓取了整个网页数量的百分之四十左右。一方面原因是抓取技术存在瓶颈，无法遍历所有网页，有许多网页无法从其它网页的链接中找到；另一个原因是存储技术和处理技术的问题，如果按照每个页面平均大小 20K计算（包含图片），100亿网页的容量是 100×2000G 字节，即使能够存储，下载也存在问题（按照一台机器每秒下载20K 计算，需要 340 台机器不停的下载一年时间，才能把所有网页下载完毕）。同时，由于数据量太大，在提供搜索时也会有效率方面的影响。因此，许多搜索引擎的网络蜘蛛只是抓取那些重要的网页，而评价重要性的主要依据是某个网页的链接深度。 有人会认为搜索引擎在接收到搜索请求时，会实时地从全球所有的服务器上查询信息，并把查询结果展示在用户面前，这其实是一种误解。如果搜索引擎是这样工作的，那么查询一条信息可能要等上好几年才能得到搜索结果，这还不包括期间网页发生的变化。 实际上，搜索引擎会预先去拜访大量的网站，并把这些网页的部分信息预先存储在自己的服务器上，这样，当用户搜索的时候，其实是在搜索引擎自己的服务器中进行查询，就像我们在自己的电脑中查询文件一样。 搜索引擎是非常复杂的技术，但是其基本原理并不复杂，其基本技术包括抓取、索引、 排序。 一、抓取 搜索引擎首先会派出一种被称作“蜘蛛”或者是“机器人”的软件，根据一定规则扫描存在于互联网上的网站，并沿着网页上的链接从一个网页到另一个网页，从一个网站到另一个网站。为保证采集的资料最新，它还会回访已抓取过的网页。 二、索引 由分析索引系统程序对收集回来的网页进行分析，提取相关网页信息（包括网页所在 URL、编码类型、页面内容包含的所有关键词、关键词位置、生成时间、大小、与其它网页 的链接关系等），根据一定的相关度算法进行大量复杂计算，得到每一个网页针对页面文字 中及超链中每一个关键词的相关度（或重要性），然后用这些相关信息建立网页索引数据库。 三、排序 当用户输入关键词搜索后，由搜索系统程序从网页索引数据库中找到符合该关键词的所有相关网页。因为所有相关网页针对该关键词的相关度早已算好，所以只需按照现成的相关度数值排序，相关度越高，排名越靠前。 最后，由检索器将搜索结果的链接地址和页面内容摘要等内容组织起来，返回给用户。 搜索引擎优化魔法书 SEO Magic Book浩维互动免费电子书 timev 第三节 搜索引擎的分类 按照不同的技术特点，可以把搜索引擎分为网页级搜索、垂直搜索、元搜索引擎、目录搜索和集成搜索等五类。一、网页级搜索 网页级搜索引擎是名副其实的搜索引擎，国外具代表性的有Google、Yahoo、MSN LiveSearch、Ask，国内著名的有百度、搜狗等。它们都是通过从互联网上提取的各个网站的信 息（以网页文字为主）而建立的数据库，检索与用户查询条件匹配的相关记录，然后按一定 的排列顺序将结果返回给用户。网页级搜索引擎也是目前常规意义上的搜索引擎。 二、垂直搜索垂直搜索是针对某一个行业的专业搜索引擎，是搜索引擎的细分和延伸。它将网页库中某类专门的信息进行一次整合，定向分字段抽取出需要的数据进行处理，然后再以某种形式返回给用户。 垂直搜索引擎与普通网页搜索引擎的最大区别是对网页信息进行了结构化抽取，也就是将网页的非结构化数据抽取成特定的结构化信息数据，然后将这些数据存储到数据库，进行进一步的加工处理，如：去重、分类等，最后分词、索引，再以搜索的方式满足用户的需求。可以这样说，网页搜索是以网页为最小单位，基于视觉的网页块分析是以网页块为最小单位，而垂直搜索是以结构化数据为最小单位。 各大搜索引擎都有自身的垂直搜索功能，比如 MP3 搜索、图片搜索、新闻搜索、Blog 搜索等。独立的垂直搜索网站也受到有相关兴趣的用户的青睐，比如旅游搜索引擎、商业搜 索引擎、比价搜索引擎等。 三、元搜索引擎 元搜索引擎在接受用户查询请求时，同时在其它多个引擎上进行搜索，并将结果返回给用户。元搜索引擎并不直接抓取网页，而是抓取多个搜索引擎的索引数据库，并根据自己的算法对抓取结果重新筛选排序。 虽然说元搜索引擎综合了多个搜索引擎的结果，但由于是建立在其他搜索引擎基础之 上，自身的排序算法也难以得到认可，所以一直没有特别的影响力。 比较知名的元搜索引擎有Dogpile（dogpile ）、Vivisimo（vivisimo ）、比比猫（bbmao ）等。 四、目录搜索目录索引虽然有搜索功能，但在严格意义上算不上是真正的搜索引擎，仅仅是按目录分 类的网站链接列表，并提供站内搜索而已。用户完全可以不用进行关键词查询，仅靠分类目 录也可找到需要的信息。 Yahoo和搜狐都提供分类目录功能，其它知名的目录还有 DMOZ（dmoz ）、Looksmart（looksmart ）等。 五、集成搜索 集成搜索算不上是搜索引擎，只是运用了一定的网页技术，把多个搜索引擎的搜索功能整合在一个搜索页面，并对各个搜索引擎的功能进行分类，方便用户在多个搜索引擎的搜索结果中进行比较和选择。部分集成搜索甚至没有对用户的搜索请求做出任何记录。所以，集成搜索更像一个在线的、集合了多个搜索引擎入口的软件，而不是搜索引擎。 国内有很多集成搜索的网站，如优客搜索（yok ）。 第四节 搜索引擎的未来 随着计算机和互联网应用的普及，大众对搜索的要求也越来越高，人们期望搜索引擎的速度更快、返回结果更准确、可以搜索的内容更丰富、更加智能化和个性化。一、快速化 速度的提高是现在各个搜索引擎都在努力达到的目标。快不仅仅是指搜索引擎返回结果的速度，更是指搜索引擎获取新信息的速度。现在博客和论坛已经成为信息最重要的来源，一条爆炸性的新闻很可能来自某个人博客，而不是知名媒体。 二、多样化 多样化主要包括两个方面：内容多样化和搜索途径多样化。 内容多样化除文字之外还包括图片、音频、视频内容的搜索。 搜索途径多样化可以通过语音指令、动作指令、甚至是思维指令进行搜索。三、智能化 语义输入可以通过输入自然语言来查找结果，就像在问朋友问题。比方说，“第一个 登上太空的中国宇航员是谁？”这是很多搜索引擎研究的防线。虽然如ask 一直宣称自己是提问式搜索，但实际上并不能完全做到和用户的自然对话。 互动功能逐层缩小搜索范围，使用户更快更准地找到所需信息。目前有些搜索引擎已实现了部分互动性。 相关搜索在用户搜索过程中结合大量其他用户的搜索习惯统计，给出可能用户要查找的内容，引导和启发搜索者找到想要找的内容。 四、社会化 有人把社会化搜索称作“搜索人脑”。搜索引擎借助对大量用户的粘性，提供用户提问 的功能，而这一提问的回答者不是搜索引擎本身，而是其他所有看到这一问题的用户。通过 大量用户的群策群力，以及对应的专业人士的帮助，这些问题往往能得到比较好的解答。比如新浪的爱问、百度知道等都属于社会化搜索的范畴。 目前，社会化搜索的不足是还不能对回答内容的准确性进行评价，只能依靠提问者自己的判断。另外问题不能及时得到解答也会影响用户的耐心。 五、个性化 因为每个用户的喜好、目的不同，对搜索结果的期待就有很大差异。比如同样是搜索“绿茶”，有人希望查找“绿茶”的商品信息，有人则是要找一部叫《绿茶》的电影。 所以现在很多搜索引擎开始建议用户注册登录，比如 Google 和 Yahoo，这样用户的搜索习惯就会被搜索引擎记录和分析。如果你经常查询电影的相关资料，那你下次输入“绿茶”的时候，返回结果中《绿茶》电影的信息就会出现在靠前的位置了。 个性化搜索对用户搜索习惯的数据收集有很高的要求，不过在某种程度上，又涉及到用户的隐私问题。 第五节 主要搜索引擎介绍一、Google1、关于Google“Google”来源于“Googol”，这是一个数学名词，表示一个 “1” 后面跟着 100 个 “0”。这个词是由美国数学家Edward Kasner 的外甥Milton Sirotta 创造的，随后通过Kasner和James Newman 合著的“Mathematics and the Imagination”（《数学与想象力》）一书广为 流传。Google 使用这一术语体现了公司整合网上海量信息的远大目标。 Google的使命是整合全球信息，使人人皆可访问并从中受益。完成该使命的第一步始于 Google 创始人 Larry Page和 Sergey Brin，他们在斯坦福大学的学生宿舍内共同开发了全新的在线搜索引擎，然后迅速传播给全球的信息搜索者。目前 Google 被公认为全球规模最大的搜索引擎，它提供了简单易用的免费服务，用户可以在瞬间得到相关的搜索结果。 访问 google 或众多 Google 域之一时，用户可以使用多种语言查找信息，查看股价、地图和要闻，查找美国境内所有城市的电话簿名单，搜索数十亿计的图片并详读全球最大的Usenet 信息存档——超过十亿条帖子，发布日期可以追溯到 1981 年。 用户甚至不必特意访问Google 主页，也可以访问所有这些信息。使用Google 工具栏， 用户可以从网上的任何位置执行 Google 搜索，而 Google 桌面栏（测试版）将 Google 搜索框放在 Windows任务栏中，这样用户可以从任何正在使用的应用程序中执行搜索，而不必打开浏览器。即使身边没有PC 机时，用户也可以通过WAP 和i…mode 手机等无线平台使用Google。Google的实用性及便利性赢得了众多用户的青睐，它几乎完全是在用户的交口称颂下成为全球最知名的品牌之一的。 作为一个企业，Google通过提供广告服务来获取收入，使广告客户能够刊登与特定网页内容相关、重要而又经济实效的在线广告。这不仅为用户提供了实用的广告信息，同时也给刊登广告的客户带来了好处。Google 认为，搜索用户应该知晓在他们面前展示的讯息是自然排名还是付费信息，因此始终在搜索结果或网页上将广告与其他内容区分开来。Google不出售搜索结果中的排名，也不允许有人通过付费来提高在搜索结果中的排名。 成千上万的广告客户加入了Google AdWords 计划，利用定位广告在网上推广他们的产品和服务，可以相信 AdWords 是同类计划中规模最大的一个。此外，成千上万的网站管理人员利用Google AdSense 计划刊登与其网站内容相关的广告，增加收入并改善用户体验。 Google 是全球最大的搜索引擎，借助和America Online、Netscape 及其他公司的合作伙伴关系，它所回应的查询远远多于其他在线服务商。 Google 是互联网上5 大最受欢迎的网站之一，在全球范围内拥有无数的用户。 Google是阿根挺、澳大利亚、比利时、巴西、加拿大、丹麦、法国、德国、印度、意大利、墨西哥、西班牙、瑞典、瑞士、英国和美国的头号搜索引擎（根据 Nielsen//NetRatings05 年 6 月调查报告唯一身份访问者总数结果）。 每月全球唯一身份用户：3 亿 8000 万（Nielsen/NetRatings，05 年 8 月调查报告）。 全球受众：超过百分之五十的点击量来自美国境外。 Google 在硅谷和全球各地拥有最顶尖的技术人员和业务专家。截止到 2005 年 12 月31日，共有5；680 名全职员工，其中许多是技术人员或工程师。 2、Google 技术 Google秉持着开发“完美的搜索引擎”的信念，在业界独树一帜。所谓完美的搜索引擎，就如公司创始人之一Larry Page 所定义的那样，可以“确解用户之意，切返用户之需”。为了实现这一目标，Google 坚持不懈地追求创新，而不受现有模型的限制。为此，Google开发了自己的服务基础结构和具有突破性的PageRank（TM）技术，使得搜索方式发生了根本性变化。 Google的开发人员从一开始就意识到，要以最快的速度提供最精确的搜索结果，就需要一种全新的服务器设置。大多数的搜索引擎依靠少量大型服务器，这样，在访问高峰期速度就会减慢，而 Google 却利用相互链接的 PC来快速查找每个搜索的答案。这一创新技术成功地缩短了响应时间，提高了可扩展性，并降低了成本。这也是其他公司一直在效仿的技术。与此同时，Google 从未停止过对其后端技术的改进，以使其技术效率更高。 Google 搜索技术所依托的软件可以同时进行一系列的运算，且只需片刻即可完成所有 运算�
