TOR Geoip Download failed

[berndy2001]

Der Geoip-Datenbank download (in rc.tor) und das nachfolgende entpacken schlägt fehl.
Ursache: GeoIPCountryCSV.zip bringt einen 404. Laut Maxmind ist Geolite Legacy seit Anfang 2019 eingestellt.

Idee:

• Geolite2 nützen:
  Beim Tor-Browser ist folgendes als Kommentar hinterlegt
  

  wget https://geolite.maxmind.com/download/geoip/database/GeoLite2-Country.mmdb.gz
  gunzip GeoLite2-Country.mmdb.gz
  python mmdb-convert.py GeoLite2-Country.mmdb

  Auf einer 7590 liegt die Laufzeit des Python-Skripts bei 6min20sek.
• Prüfen ob der Download valid ist bzw. der Exit-Code passt.

 

[gismotro]

Und jetzt ?

 

[berndy2001]

Diskussion eröffnet. Möchtest du was sinnvolles beitragen?

Mir ging es vor allem darum aufzuzeigen, dass die derzeitige geoip-implementierung nicht funktioniert. Sollte keine Lösung gefunden werden, sollte man die Funktion entfernen.

 

[er13]

Ich kenne das Problem, hatte jedoch noch keine Zeit, mögliche Optionen zu evaluieren.

Stand jetzt ist mir angesichts der Laufzeiten von mmdb-convert.py nichts besseres eingefallen als https://packages.debian.org/sid/tor-geoipdb herunterzuladen und dieses mittels https://git.busybox.net/busybox/tree/archival/dpkg_deb.c auf der Box zu extrahieren. Es wäre dann allerdings nicht die letzte verfügbare Version von geoipdb, sondern die letzte als Debian-Paket verfügbare Version. Die Versionsnummer des Debian-Pakets müsste man auch entweder übers WebIF einstellen oder automatisch erkennen können.

 

[berndy2001]

Habe die Quellen gefunden, im Git gibt es auch die Letztversion: https://gitweb.torproject.org/tor.git/plain/src/config/. Das von mir getestete mmdb-convert.py hatte ich aus irgendeinem einem github-repo.
Hätte den Vorteil, dass man nicht auf den Package-Maintainer angewiesen ist und die Versionsnummer auch nicht benötigt.

 

[er13]

Ja, ist 'ne bessere Alternative. Magst Du den Code hier anpassen und einen PR erstellen?

 

[berndy2001]

Ja, kann ich gerne machen.

 

[berndy2001]

Pullrequest erstellt.