GOOGLE The Anatomy of a Search Engine

-


ARCHIVE

SOURCE
The Anatomy of a Search Engine:




"High Level Google Architecture"

Sergey Brin and Lawrence Page
{sergey, page}@cs.stanford.edu
Computer Science Department, 
Stanford University,
 Stanford, CA 94305





Abstract

       In this paper, we present Google, a prototype of a large-scale search engine which makes heavy use of the structure present in hypertext. Google is designed to crawl and index the Web efficiently and produce much more satisfying search results than existing systems. The prototype with a full text and hyperlinkdatabase of at least 24 million pages is available athttp://google.stanford.edu/ 


       To engineer a search engine is a challenging task. Search engines index tens to hundreds of millions of web pages involving a comparable number of distinct terms. They answer tens of millions of queries every day. Despite the importance of large-scale search engines on the web, very little academic research has been done on them. Furthermore, due to rapid advance in technology and web proliferation, creating a web search engine today is very different from three years ago. This paper provides an in-depth description of our large-scale web search engine -- the first such detailed public description we know of to date. 

       Apart from the problems of scaling traditional search techniques to data of this magnitude, there are new technical challenges involved with using the additional information present in hypertext to produce better search results. This paper addresses this question of how to build a practical large-scale system which can exploit the additional information present in hypertext. Also we look at the problem of how to effectively deal with uncontrolled hypertext collections where anyone can publish anything they want.



 Keywords: World Wide Web, Search Engines, Information Retrieval, PageRank, Google
'via Blog this'

Popular posts from this blog

Les origines historiques de la guerre en Ukraine

-
Image
DES ORIGINES PROFONDES DANS LA FORMATION DES NATIONS https://ihedn.fr/2023/03/10/les-origines-historiques-de-la-guerre-en-ukraine/# En France, certaines voix affirment que l’OTAN et les États-Unis portent une lourde responsabilité dans la guerre en Ukraine, en raison des élargissements de l’OTAN. Mais si l’on regarde l’Histoire un peu plus lointaine, les faits montrent que tous les pays de l’ancien bloc de l’Est ayant appartenu par la force au pacte de Varsovie ont, dès le début des années 1990, voulu rejoindre l’OTAN, qui est une alliance défensive. Différentes raisons les motivaient : se protéger de la volonté de domination de la Russie, se prémunir contre une résurgence de l’impérialisme russe ; parce qu’ils avaient subi, pendant les 45 années précédentes, l’occupation soviétique et le joug soviétique, parce qu’ils avaient fait, des siècles durant, l’expérience de la violence politique russe. Par exemple, au printemps 1940, le massacre à Katyń, en Pologne, et dans d’autres lieux (do...
Read more

Rôle de la télévision un « rôle intégrateur »

-
Image
Rôle de la télévision un « rôle intégrateur ». Elle renvoie aux ethnies l’image d’une façon d’être et de vivre ensemble. Les informations, les émissions en direct ou en quasi direct font que les populations voient dans le poste de télévision un miroir, un reflet et en même temps des propositions sur ce qui fait qu’elles se trouvent dans une collectivité. Soucieux, en général, de tenir un discours moyen recevable par le plus grand nombre, le petit écran joue actuellement une véritable fonction intégratrice. Il brise l’isolement de certaines catégories de la population. Grâce à la force de conviction de l’image et du direct, elle conforte l’impression de l’auditeur d’avoir participé à l’événement ou au débat. Elle ne suscite pas seulement l’assentiment mais, au-delà, l’identification. Identification qui se joue sur l’instant, de part et d’autre du récepteur. Mais identification qui se noue également entre téléspectateurs au terme des transactions qui s’ébauchent le lendemain dans les éc...
Read more

la plupart des Français interrogés pensent appartenir à la classe moyenne

-
Image
  Comment les Français conçoivent-ils la répartition des revenus dans la société et leur propre place dans la hiérarchie sociale ? Et quelle est la prévalence des opinions dites « populistes » ? La dernière vague de l’enquête ISSP (2019) montre que ces différentes perceptions sont généralement cohérentes entre elles, à deux exceptions près : (1) la plupart des Français interrogés pensent appartenir à la classe moyenne, mais se font une idée très inégalitaire de la société française à l’image d’une pyramide, c’est-à-dire une grande proportion de pauvres et des effectifs de plus en plus faibles à mesure que l’on s’élève dans l’échelle des positions. (2) Ces différentes opinions des Français semblent dissociées de leur propre niveau de revenu. Cette note a été réalisée en partenariat avec Quetelet Progedo Diffusion   Dylan Alezra , Observatoire du Bien-être du Cepremap Claudia Senik , Observatoire du Bien-être du Cepremap, Sorbonne-Université et PSE Versi...
Read more