Dashboard
Azoren Tourismus Datenbank| Insel | Pins | % |
|---|
| Gruppe | Pins |
|---|
Scraper steuern
Ein HTTP-Aufruf = eine Seite → kein TimeoutPhase 1 — URL-Index aufbauen (Listing-Seiten)
Trägt die gewünschten Listing-Seiten in die Warteschlange ein und ruft sie dann nacheinander einzeln ab. Jeder Aufruf dauert max. 30 Sek. — kein Timeout.
Einzelne URL manuell scrapen
Phase 2 — Pin-Details abrufen
Ruft für gesammelte URLs die Detailseite ab. Selektiv nach Kreis, Kategorie oder fehlenden Geodaten.
📋 Staging / Diff
Gescrapte Daten prüfen bevor sie in die DB übernommen werdenURL-Index
Gesammelte Pin-URLsAlle Pins
▸ Spalten ein-/ausblenden
Inseln
9 Inseln der AzorenKategorien
44 Tipologias mit ÜbersetzungenKreise
Concelhos nach InselOrtschaften-Karte
Pins nach Ortschaft einfärben, Gebietsflächen ein-/ausblendenGemeinden
FreguesiasÜbersetzungen
Quellbezeichnungen (PT) → Ihre Übersetzungen (DE) für den EndnutzerOberste Ebene der Baumstruktur. Quellbezeichnung (PT) kommt von turismo.azores.gov.pt, Ihre Übersetzung (DE) erscheint für den Endnutzer.
| Slug | Português (Quelle) | Deutsch (Ihre Übersetzung) | |
|---|---|---|---|
| Lade… | |||
Geo-Validierung
GPS → Adresse (Nominatim / OpenStreetMap)
Fehlende ergänzen — nur leere Felder werden befüllt, nie überschrieben.
Plausibilitätsprüfung — GPS-Position wird gegen Kreis/PLZ geprüft. Abweichungen = Verdacht auf Fehler in Quelle.
PLZ-Check — unvollständige oder unbekannte PLZ werden markiert.
🌐 Browser-Scraping
Dein Browser ruft die Seiten ab und schickt sie an den ServerPhase 1 — Listenseiten
Phase 2 — Pin-Details
Einzelne URL
Scraper mit Proxy
Scraping über Proxy-Server — umgeht IP-Sperrung🔌 Proxy-Konfiguration
Der Server leitet alle Scraping-Requests über diesen Proxy. Format: http://ip:port
Phase 1 — URL-Index aufbauen (Listing-Seiten)
Trägt die gewünschten Listing-Seiten in die Warteschlange ein und ruft sie dann nacheinander einzeln ab. Jeder Aufruf dauert max. 30 Sek. — kein Timeout.
Einzelne URL manuell scrapen
Phase 2 — Pin-Details abrufen
Ruft für gesammelte URLs die Detailseite ab. Selektiv nach Kreis, Kategorie oder fehlenden Geodaten.
GPX-Tracks und PDF-Folhetos von der Quelle herunterladen und lokal speichern.
Export
🗑 Gelöschte Pins (Log)
Pins die über Staging als gelöscht markiert und entfernt wurden. Nützlich für Geodaten-Exporte um veraltete Einträge zu identifizieren.
🗺️ GPX Export — Waypoints
📋 Export-Historie (letzte 30)
🔍 Duplikate
Doppelte Einträge anhand der Pin-URL erkennen🗺 Mapper
Textvarianten Aktivitätstypen zuordnenKategorie wählen und laden.
Einstellungen & Datenpflege
🤖 Auto-Übersetzung
Optional: E-Mail eintragen → 50.000 Zeichen/Tag statt 5.000. Keine Registrierung nötig, nur als Kennung.
🏷️ Kategorie-Typ-Manager
↺ Reset pro Kategorie lädt die tatsächlichen Untertypen aus den Pins. Neue Typen werden beim Scraping automatisch erkannt.
🚑 Notfall-Reparatur
Behebt den Bug bei dem Pins nach dem Bearbeiten aus der Liste verschwanden (is_active wurde fälschlich auf 0 gesetzt).
🔧 Datenpflege
08:00 / 20:00, fechado, value-Objekte) in einheitliches {open, close} Format.