Analyzing the Web Crawler as a Feed Forward Engine for an Efficient Solution to the Search Problem in the Minimum Amount of Time through a Distributed Framework

Qureshi, Muhammad Atif; Younus, Arjumand; Rojas, Francisco Javier Palm

doi:10.1109/icisa.2010.5480411

Cited by 7 publications

(2 citation statements)

References 12 publications

Supporting

Mentioning

Contrasting

Unclassified

Order By: Relevance

“…Shaojie y otros [61] proponen una mejora al algoritmo de PageRank utilizando medidas de similaridad, bajo el nombre de SimRank. Qureshi y otros autores [62] diseñan un crawler llamado "visionerBOT". Su principal aporte es el uso de MAPreduce [63], el framework de Google para manejo de computación distribuida.…”

Section: Evolución Históricaunclassified

Evolución y tendencias actuales de los Web crawlers

Sarmiento

Salinas

2013

Ing.

View full text Add to dashboard Cite

<p>La información disponible en redes de datos como la Web o las redes sociales se encuentra en continuo crecimiento, con unas características de dinamismo especiales. Entre los mecanismos encargados de rastrear los cambios en dicha información se encuentran los Web<br />crawlers, los cuales por la misma dinámica de la información, deben mejorarse constantemente en busca de algoritmos más eficientes. Este documento presenta el estado actual de los algoritmos de rastreo de la Web, sus tendencias, avances, y nuevos enfoques dentro del contexto de la dinámica de las redes sociales.</p>

show abstract

Section: Evolución Históricaunclassified

Evolución y tendencias actuales de los Web crawlers

Sarmiento

Salinas

2013

Ing.

View full text Add to dashboard Cite

show abstract

“…The dataset consists of Web pages from Multimedia University 2 , crawled using the Visioner-Bot Web Crawler [10]. We set the crawl to download at most 500 Web pages per host.…”

Section: A the Datasetmentioning

confidence: 99%

WebSum: Enhanced SumBasic algorithm for Web site summarization

Tee

Soon

Ting

2012

2012 4th Conference on Data Mining and Optimization (DMO)

View full text Add to dashboard Cite

Due to the rapid increase of information in the World Wide Web, there exists an explosion of information on the Web that may overwhelm the common Web user. The Web user may find it quicker or more efficient to browse the Web by reading summaries of Web sites. This paper proposes WebSum to compress Web site content into a summary. WebSum is an enhancement of the SumBasic algorithm, that was mainly used for multi-document summarization. In the case of Web sites, we find that several Web characteristics such as title and keywords can be used to extract sentences that may represent the overall topic of the Web site. Initial results show that WebSum is able to reveal sentences relate to the concept of the Web site. WebSum is then evaluated against the original algorithm of SumBasic.

show abstract