技术进展国际期刊
开放获取

抽象的

使用迁移代理设计 Web 搜索引擎和可用平台的属性分析

尼拉吉·辛哈尔、阿舒托什·迪克西特、RP 阿加瓦尔、AK 夏尔马

移动代理是软件代理的一种，是计算机软件和数据的组合。它能够自主地从一台计算机迁移到另一台计算机，并在目标计算机上继续执行。当远程主机存储大量数据时，可以在数据本地处理这些数据，而不是通过网络传输。主要关注的是，将计算移至数据，而不是将数据移至计算。基于迁移爬虫代理的分布式爬虫，网络文档的选择和过滤过程可以在网络服务器而不是搜索引擎端完成，减少了网络爬虫带来的网络负载。在本文中，我们介绍了移动代理的优点及其在各个领域的使用。我们还展示了移动代理技术在设计网络搜索引擎中的使用，