Google's Indexierungspolitik

["Bernhard Eversberg" <ev _at__ buch.biblio.etc.tu-bs.de>]

Die verschwundenen E-Dissertationen ...

Vor kurzem hatten wir ja festgestellt, dass unsere 
E-Dissertationen, monatelang heftig ueber Google genutzt, 
ploetzlich aus deren Index verschwunden waren.
(Ist das anderswo auch passiert? Oder laesst man da sowieso 
keine Suchmaschinen-Crawler ran?)
Eine Anfrage ergab zunaechst einen offensichtlich automatisch 
zugeteilten, vorfabrizierten Text, wobei unsere Anfrage so 
verstanden worden war (vom Programm), als haetten wir uns ueber 
unser Ranking beschwert. (Kommt wohl oefter vor, war aber 
keineswegs der Fall.) Die Antwort war im Kern genau so, wie wenn 
man sich bei irgendeiner Verwaltung beschwert: "Ja, wir koennen 
leider nicht anders, Sie wissen schon, die EDV..."
Wir hatten uns nicht beschwert! Das waere nur dann berechtigt, 
wenn wir fuer die Indexierung zahlen wuerden, aber bei einem 
geschenkten Gaul darf man hoechstens hoeflich fragen.
Nochmalige, praezisierte Anfrage (siehe unten) ergab dann 
folgende Antwort, die von allgemeinerem Interesse sein duerfte 
(und vielleicht sogar, aber ganz sicher ist das nicht, manuell 
verfasst wurde):
(Doch in der Sache viel besser ist diese Antwort auch nicht)

------- Forwarded message follows -------
Date sent:      	Tue, 21 Aug 2001 09:32:03 -0700
From:           	"GoogleTeam" <googleteam _at__ google.com>
Subject:        	RE:{Google#180-893}Where are our dissertations?
To:             	"Bernhard Eversberg" <ev _at__ buch.biblio.etc.tu-bs.de>

Hi Bernhard,

We understand your frustration and apologize for being unclear.  
The issue that you present to us has to do with an index shift.  
Every time we update our database of web pages, our index invariably shifts: 
We find new sites, we lose some sites, and sites ranking may change. 
There is no determined reason to exclude a site from indexing.  
There is a good likelihood that it will be picked up on our next crawl. 
These occur every 4-6 weeks.

Regards,
The Google Team

-----Original Message-----
From:   Bernhard Eversberg (ev _at__ buch.biblio.etc.tu-bs.de)
Date:   Monday, August 20, 2001  11:03 PM
To:   GoogleTeam (googleteam _at__ google.com)
Subject:  RE:Where are our dissertations? THAT WAS NOT THE PROBLEM!


On 20 Aug 01, at 12:27, GoogleTeam wrote:

> Thanks for your note. Why a site's rank changes is a surprisingly 
> difficult question to answer. Even we can't tell exactly why a ..

Dear Google-Team

Obviously, you used a prefabricated reply. 
The problem is not that our ranking changed or our service was 
unstable! We do have a high rank, and our servers are reliable. 
The problem is that some of our stuff, the PDF files, suddenly is no 
longer indexed.
Is this a matter of policy or what? Is there a mechanism that
for some automatically determined reason decides to exclude a
site from PDF indexing?
That's what we'd like to know!
Regards, B.E.


Bernhard Eversberg
Universitaetsbibliothek, Postf. 3329, 
D-38023 Braunschweig, Germany
Tel.  +49 531 391-5026 , -5011 , FAX  -5836
e-mail  B.Eversberg _at__ tu-bs.de