基于Websphinx网络爬虫的研究与改进

来源 :电脑知识与技术·学术交流 | 被引量 : 0次 | 上传用户:antoney
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读
  摘要:搜索引擎技术随着互联网的日益壮大而飞速发展。它成功的商业运作也造就了Google、百度等这样的商业奇迹。作为搜索引擎的重要组成部分,网络爬虫的爬行效率对搜索引擎至关重要。基于Websphinx对网络爬虫进行了相关介绍,概述了Websphinx的结构框架、搜索方式及提出了一些看法。 全文查看链接   Link l = links[i]; 全文查看链接   在扫描网页内容时,可将每一次的信息与上一次比较,对于每次变化很小或长时间没什么变化的网页可以记为“懒惰”网页,同样对网站也是如此。从而可以降低其搜索周期,比如从原来的一周一次降为两周一次,变化快的也可以缩短周期,但到上限为止。 全文查看链接
其他文献
摘要:计算机网络课程的教学,要求有足够的实践来支撑。目前,与网络软件方面的实践,多数学校都能安排,但是网络硬件设备方面的实践,很多学校并不具备条件——主要的问题是投入大。这里介绍了用BOSON NetSim组建虚拟网络实验室,它经济、灵活,非常适合学校教学使用。  关键词:虚拟网络实验室;NetSim  中图分类号:TP393文献标识码:A 文章编号:1009-3044(2008)19-30084
摘要:任何仿真环境中都有大量的数据需要存储和读取,数据库作为信息的存储地,有着至关重要的作用,因此,为了满足仿真系统的应用需求,开发一套适合仿真环境的数据库管理系统具有很重要的意义,其中物理存储结构的设计又是其基础。 本文为全文原貌 未安装PDF浏览器用户请
摘要:企业信息孤岛的问题日益得到人们的重视,企业应用集成(EAI)技术的提出很好的解决了这类问题。该文对EAI进行了深入的阐述,分析了EAI的特点、优势以及技术本身的缺陷,提出了一种基于XML的业务流程集成的框架,并通过一个实例系统给出了框架的具体实现方法。  关键词:EAI;XML;业务流程;BWE  中图分类号:TP311文献标识码:A文章编号:1009-3044(2009)24-6863-0
摘要:由于应用程序不能直接和数据源打交道,因此就产生了各种各样的数据库访问技术。通过以一个学生信息管理系统的开发为依托,详细论述了在Visual c 6.0平台下通过ODBC技术和OLEDB技术,连接ACCESS和SQL SERVER数据库,并对数据库中的记录进行访问,以及实现记录的插入,删除,查找等功能,最后并对每种访问方式的效率做了初步评估。
摘要:网络调查是一种通过web页面和计算机网络进行问卷调查、获取客户态度的实用调查方式,通过应用ISP技术,可以提高网络调查系统的性能。文章介绍了JSP技術的特点,分析了JSP通过JavaBeans和JDBc动态访问web数据库的方法、模型和关键技术,提出了一个基于JSP技术的通用网络调查系统的设计方案,介绍了系统总体设计原理,并给出主要模块的实现方法。  关键词:网络调查系统;JSP;JavaB
摘要:简要说明在使用Windows XP系统进行网络互访时,需要满足的基本条件,并采用大量的实例分析,提出网络互访出现问题时的解决方案。  关键词:Windows XP系统;網络互访;Guest用户 本文为全文原貌 未安装PDF浏览器用户请先下载安装
摘要:随着嵌入式电子产品的迅猛发展,触摸屏由于其便捷、灵活、占用空间少等优点。已经逐渐取代键盘成为嵌入式计算机系统常选用的人机交互输入设备。windowsCE是微软公司推出的嵌入式实时操作系统,是一个紧凑、高效、可扩展的操作系统,适用于各种嵌入产品。介绍了windowsCE操作系统中触摸屏驱动程序的模型和工作流程,并给出了AKM4182触摸屏控制芯片在XscalePxA270平台上的驱动程序实现。
摘要:在特殊教育教师培养和残疾人教育中,明眼人经常需要阅读、书写盲文。在盲文课程教学中,也经常需要将盲文和明眼文字混排。该文从输入法入手,采用编码的方式,设计盲文字库,用flash、PCE和画图软件制作Braille盲文点符,通过普通计算机键盘输入,就可以把非凸点的盲文点符输入到普通的文档中。设计出的盲文点符精度较高,点位比例符合国家盲文字符标准,立体感强,美观实用。  关键词:flash;PCE
摘要:文章在实践中设计实现了基于Ajax技术、在J2EE框架下的非現场监管分析系统。系统层次结构清晰,代码复用率高,并且由于Ajax技术正处在迅速发展并逐步走向成熟的阶段,使用Ajax技术引用异步调用机制,能有效地提高系统的运行效率和改善用户的交互体验。 本
著/裴明熙(韩) 绘/李范埼(韩) 译/徐 涵    呀,真像电影画面。  我什么都不知道。  你们这些人,经常干这种事吗?  谁  让你们单独行动的?  明白了。今天的星星格外闪烁吧?  今晚风大。  所以星星就更加闪烁了吗?  风和星星有什么关系呀?  我们所看到的星星的光芒是经过空气折射的。  折射——光弯曲的现象。  空气中混合着热空气和冷空气,它们不断运行。  和运行的空气不断发生碰撞的