Sammelt automatisch Deals mit Metadaten aus MyDealz Kategorien inkl. Infinite Scroll
Das Skript „MyDealz Deal Collector“ ist ein automatisches Datensammel-Werkzeug für die Webseite MyDealz.de – eine Plattform, auf der Nutzer Schnäppchen und Deals posten.
Es ist ein sogenanntes Tampermonkey-User-Script, das im Browser läuft und dort die MyDealz-Seiten direkt ausliest. Hier ist die Zusammenfassung in Klartext:
🧠 Zweck des Skripts
Das Skript sammelt beim Durchscrollen automatisch alle Deals auf einer MyDealz-Kategorie- oder Suchseite (nicht auf einzelnen Deal-Seiten).
Dabei werden wichtige Metadaten jedes Deals ausgelesen und als strukturierte Datensätze gespeichert. Ziel ist es, aus MyDealz-Inhalten ein eigenes Datenset zu erstellen – etwa für Analysen, Preisbeobachtungen oder maschinelles Lernen (LLMs).
⚙️ Was das Skript konkret macht
1. Automatische Datensammlung
Erkennt alle sichtbaren Deals auf einer Seite (die -Elemente).
Extrahiert pro Deal:
Titel & URL
Preis (als Text und als Zahl in Cent)
„Temperatur“ (also Community-Bewertung, auch negative Werte)
Autor (wer den Deal gepostet hat)
Kommentarzahl
Kurzbeschreibung
Status (aktiv, abgelaufen, hot, cold, burn)
Zeitpunkt der Erfassung & Seitenzahl
2. Läuft mit unendlichem Scrollen (Infinite Scroll)
Nutzt den IntersectionObserver, um zu erkennen, wenn das Ende der Seite erreicht ist.
Scrollt automatisch weiter und sammelt die neu geladenen Deals.
Stoppt automatisch bei einer konfigurierbaren Maximalanzahl (MAX_DEALS) oder Seitenzahl (MAX_PAGE).
3. Speichert Daten lokal
Alle gesammelten Deals werden in localStorage gespeichert (im Browser).
Debounced-Speicherung verhindert Performance-Einbrüche.
Daten bleiben auch nach einem Reload erhalten.
4. Bietet einfache Steuerung im Browser
Drei Buttons erscheinen am rechten Bildschirmrand:
🟢 START / STOP – Startet oder pausiert die Aufzeichnung
🔵 EXPORT – Exportiert alle gesammelten Deals als JSON-Datei mit umfangreichen Metadaten
⚫ RESET – Löscht alle bisher gespeicherten Daten
Die Farben wechseln logisch (grün = Start, rot = Stop).
5. Exportiert die Ergebnisse
Exportiert ein JSON-File mit:
Allen Deals (Rohdaten)
Statistiken (Durchschnittspreise, Temperaturschnitt etc.)
Beschreibung der Felder
Metainfos (z. B. Kategorie, Zeit, Skriptversion)
Die Datei ist maschinenlesbar und ideal für Weiterverarbeitung in Python, Excel oder LLMs.
6. Intelligentes Verhalten
Pausiert den Auto-Scroll, wenn der Tab nicht sichtbar ist (Ressourcenschonung).
Erkennt nur neue Deals via MutationObserver, statt alles ständig neu zu parsen (schneller & effizienter).
Nutzt Fallbacks und Fehler-Handling, falls MyDealz das HTML leicht ändert.
🧩 Wozu es nützlich ist
Datensammlung: Automatisches Erstellen von Datensätzen zu MyDealz-Deals für Analyse oder Archivierung.
Preisforschung: Beobachtung, wie Community-Bewertungen und Preise zusammenhängen.
LLM-Training oder Prompt-Testing: JSON-Export mit Feldbeschreibungen kann direkt für Modelle verwendet werden.
Automatisches Monitoring: Wer möchte, kann die Daten mit eigenen Filtern (z. B. nur „Hot Deals über 500°“) weiterverarbeiten.
🧾 Zusammengefasst in einem Satz
Das Skript ist ein Browser-Crawler für MyDealz, der Deals automatisch mitscrollt, strukturiert extrahiert, lokal speichert und als JSON-Dataset exportiert – mit eingebauter Kontrolle, Statistik und Fehlerresistenz.