● 摘要
内容搜索是互联网的重要服务之一,本论文研究课题是为人民搜索公司提高搜索质量,有效管理数据,以及研究数据之间的关联关系而进行的专题研究。在现有算法基础比较薄弱的情况下,需要有大量的优质分析数据来为新的算法提供支持,因而需要通过系统来支撑数据抓取、到数据分析、再到数据产出的一整套管理服务,这就是本系统主要的设计出发点。
本文通过搜索引擎数据管理发展现状及趋势进行调研总结,同时结合人民搜索自身对于数据的需求,总结出了从数据分析任务,到任务验收再到数据任务结算的解决方案,包括抓取数据管理、数据分析任务管理、分析人员管理、任务验收管理以及结算管理等模块。本项目经过前期系统性的调研、需求分析,再到后期的系统设计,经过严格的系统测试和系统实施,实现了通过系统来对搜索引擎的分析数据进行高效的管理。
经过对系统上线效果的评估,实现了对各类数据有效地管理。
相关内容
相关标签