[Talk-de] Massendownloads (was: Last auf den Servern)

Christian H. Bruhn brogo at arcor.de
Mo Aug 16 08:11:53 UTC 2010


Hallo!

> ueberdurchschnittlich hoehen Zahl an Leuten, die mit dem /map-Aufruf
> groessere Datenmengen herunterladen. Fast zu jedem Zeitpunkt gibt es 3-4
> Leute, die mit 10 und mehr parallenen Threads massig Daten herunterladen
> (und meistens kommen 2 oder 3 davon von einer t-dialin-Netzadresse).

Vielleicht ziehen sich auch einige Leute alle möglichen Daten, weil
sie (die unberechtigte) Angst haben durch den geplanten Lizenzwechsel
würden Ihnen Daten weggenommen. Man sollte noch mal darauf hinweisen,
auch nach einem Wechsel der Lizenz immer noch der letzte
CC-Planet-Dump zum Download bereitsteht.

Außerdem sollte man für größere Gebiete sowieso auf XAPI oder
Planetfile bzw. dessen Extrakte zurückgreifen.

Das kann auch nicht oft genug sagen.

Kann man Adressen nicht kurzzeitig sperren und statt Daten einen
entsprechenden Hinweis senden? Wäre es nicht sinnvoll, solche
parallelen API-Aufrufe künstlich zu verlangsamen? So daß für jede
IP-Adresse registriert wird wieviele API-Aufrufe erfolgen, und jeden
weitern Aufruf einen Tick zu verzögern, so daß der normale Mapper
davon nichts merkt, aber die Massendownloader gebremst werden?

Christian





Mehr Informationen über die Mailingliste Talk-de