文件服务器 web搜索引擎,Web地图服务搜索引擎的工作原理和体系结构

朱雀 2022-09-03 11:10 230阅读 0赞

OGC

WMS规范定义了三个接口，分别是GetCapabilities、GetMap和GetFeatureInfo。其中前两个接口是必须实现的。

GetCapabilities接口用来获取服务器元数据，它是计算机和人都可以理解的、关于WMS的信息内容和可以接受的请求参数的描述。当向一个

WMS服务器发送GetCapabilities

请求时，返回服务级元数据的XML文档，是对服务信息内容和可接受请求参数的一种描述。这些文档是根据Web地图服务规范所规定的DTD的格式编写的，同

时，文档中各图层都是以相同的方式进行描述的。这样，我们就可以对服务器返回的信息做统一的处理。

基于上述分析，在理论上，我们可以让一个高效的网络蜘蛛程序对互联网中所有的URL发送GetCapabilities请求。通过对响应信息的分析

来判断对方是否是符合OGC

WMS规范的网络地图服务器。这样，我们就可以提取出整个互联网中几乎所有的WMS服务器信息。Web地图服务搜索引擎主要有如下两个步骤：

(1)

从互联网上发现、搜集有用URL信息，利用高性能的Spider程序去自动地在互联网中搜索信息。“网络蜘蛛”工作的方式，是查看一个页面，并从中提取出

相关URL详细，然后它再从该页面的所有URL中出发，爬行到相关页面，重复这过程，直到把爬过的所有URL信息都收集回来。

(2)

对收集回来的所有URL地址都发送一个符合GetCapabilities规范的HTTP请求，收集所有的请求响应文档。对响应文档进行解析，再以结构化的形式将其存储到本地数据库中供用户检索。

上面简述了Web地图服务搜索引擎的工作原理，从这里不难看出Web地图服务搜索引擎的基本构成是URL搜索器(Web

Spider)、WMS响应文档解析与存储器和用于结构化存储WMS服务器元数据信息的Capabilities数据库。Web

地图服务搜索引擎体系结构如图3-1所示。

![a4c26d1e5885305701be709a3d33442f.png][]

图3-1 Web地图服务搜索引擎体系结构图

URL搜索器主要负责从互联网中搜索到所有可以搜索到的URL链接地址，并将其储存到临时数据库中。URL搜索器主要以一个网络蜘蛛为基础，周期性的对整个互联网进行全面的爬行。

WMS响应文档解析与存储器主要负责对临时数据库中的URL发送符合GetCapabilities规范的HTTP请求，判断出有效的WMS链接，再对WMS响应文档进行解析，并提取出相关的信息存储于Capabilities数据库中。

Capabilities数据库负责以结构化的形式储存和管理WMS原数据信息。

WEB地图服务搜索引擎的主要工作流程是：首先从网络蜘蛛开始，Spider程序每隔一定的时间自动启动并读取网页URL服务器上的URL列表，抓

取各URL所指定的网页，解析出该网页中的URL地址，并将当前页上的所有超链接存入到URL服务器中。在进行网页抓取的同时，对当前URL地址发送

GetCapabilities请求，再由WMS响应文档解析储存器对响应文档进行解析然后将解析结构以结构化的形式存入数据库。

其中URL搜索器、WMS响应文档解析器、Capabilities数据库是实现WMS搜索的关键，下面进行详细分析。

[a4c26d1e5885305701be709a3d33442f.png]: /images/20220829/975e96bdca1343bfacd6e78c0a5bbfe2.png

发表评论取消回复

表情：

评论列表（有 0 条评论，230人围观）

还没有评论，来说两句吧...

相关阅读

相关 Web服务器工作原理

Web服务器工作原理概述很多时候我们都想知道，web容器或web服务器（比如Tomcat或者jboss）是怎样工作的？它们是怎样处理来自全世界的http请求的？它们在幕后做

痛定思痛。/ 2024年04月03日 13:02/ 0 赞/ 202 阅读

相关 Web信息收集之搜索引擎

1、信息收集概述 1.1、web信息搜集（探测）即web踩点，主要是掌握目标web服务的方方面面，是实现web渗透入侵前的准备工作 1.2、web踩点内容包括操作系

曾经终败给现在/ 2023年07月04日 11:11/ 0 赞/ 103 阅读

相关 WEB前端-搜索引擎工作原理与SEO优化

一、搜索引擎工作原理搜索引擎的工作分为三个阶段，即爬行，索引和检索 1、爬行 ![1731684-20190814153046726-1864177528.png]

布满荆棘的人生/ 2023年06月02日 09:17/ 0 赞/ 115 阅读

相关 Web服务器的工作原理。

转自：[http://www.pinlue.com/article/2019/12/0215/479828480239.html][http_www.pinlue.com_ar

墨蓝/ 2022年12月08日 01:50/ 0 赞/ 246 阅读

相关搜索引擎的工作原理

搜索引擎的工作原理第一步：爬行搜索引擎是通过一种特定的规律的软件跟踪网页的链接，从一个链接爬到另一个链接，像蜘蛛在蜘蛛网上爬行一样，所以被称为“蜘蛛”，也被称为

比眉伴天荒/ 2022年09月28日 14:27/ 0 赞/ 234 阅读

相关搜索引擎分类与工作原理

搜索引擎分类与工作原理整理：Ackarlix 搜索引擎分类搜索引擎按其工作方式主要可分为三种，分别是全文搜索引擎（Full Text Search Engine）、目

Myth丶恋晨/ 2022年09月19日 14:25/ 0 赞/ 246 阅读

相关文件服务器 web搜索引擎,Web地图服务搜索引擎的工作原理和体系结构

OGC WMS规范定义了三个接口，分别是GetCapabilities、GetMap和GetFeatureInfo。其中前两个接口是必须实现的。 GetCapabiliti

朱雀/ 2022年09月03日 11:10/ 0 赞/ 231 阅读

相关搜索引擎的基本工作原理

搜索引擎的基本工作原理包括如下三个过程：首先在互联网中发现、搜集网页信息；同时对信息进行提取和组织建立 [索引库][Link 1]；再由检索器根据用户输入的查询关键字，在索引库

朱雀/ 2022年08月20日 08:18/ 0 赞/ 293 阅读

相关 Web服务器的工作原理

Web服务器工作原理概述很多时候我们都想知道，web容器或web服务器（比如Tomcat或者jboss）是怎样工作的？它们是怎样处理来自全世界的http请求的？它们在幕

我不是女神ヾ/ 2022年08月07日 08:41/ 0 赞/ 274 阅读

相关 Web服务器的工作原理

`1.Tomcat Server处理一个HTTP请求的过程` `1` `、用户点击网页内容，请求被发送到本机端口` `8080` `，被在那里监听的Coyote HTTP/`

今天药忘吃喽~/ 2021年12月20日 04:21/ 0 赞/ 449 阅读