Leider ist diese Diskussion mittlerweile abgelaufen
Abgelaufen

Crawler für Saturn und MediaMarkt

eingestellt am 28. Apr 2021
Hallo liebe Community,

ich weiß, dass es für die Preise der einzelnen Expert-Filialen zum Vergleich einen Crawler von gibt, vielen Dank dafür
Ich frage mich, ob es so etwas auch für Saturn und Media Markt Filialen gibt? Weiß da jemand was?

Danke schon mal im Voraus und liebe Grüße
Zusätzliche Info
Sag was dazu

29 Kommentare

sortiert nach
's Profilbild
  1. Barney's Profilbild
    Barney
    Jaxbeer28.04.2021 17:23

    @Barney Darf ich fragen wo es diesen Crawler für Expert gibt ? Finde …@Barney Darf ich fragen wo es diesen Crawler für Expert gibt ? Finde leider nichts.Vorab Danke.


    Na klar, hier entlang.
    Im übergeordneten Verzeichnis findet sich auch das Äquivalent für Medimax. (bearbeitet)
  2. Barney's Profilbild
    Barney
    Braetschek29.04.2021 10:32

    Kann man das Medimax-Teil auch für die Electronic Partner-Filialen umschrei …Kann man das Medimax-Teil auch für die Electronic Partner-Filialen umschreiben ?


    Ich zitiere die Frage noch mal, denn tatsächlich habe ich jetzt auch eine Version des Tools für ElectronicPartner online. Danke an dieser Stelle für die Bereitstellung der Filialübersicht.

    Theoretisch könnte man auch beide Märkte in ein Programm packen, da die Website wirklich komplett identisch funktioniert. Für den Moment belasse ich es aber mal bei der Trennung.
  3. peterfunny's Profilbild
    peterfunny Autor*in
    Barney15.05.2021 10:34

    Ich zitiere die Frage noch mal, denn tatsächlich habe ich jetzt auch eine …Ich zitiere die Frage noch mal, denn tatsächlich habe ich jetzt auch eine Version des Tools für ElectronicPartner online. Danke an dieser Stelle @der_Tobi für die Bereitstellung der Filialübersicht.Theoretisch könnte man auch beide Märkte in ein Programm packen, da die Website wirklich komplett identisch funktioniert. Für den Moment belasse ich es aber mal bei der Trennung.


    Du bist der Wahnsinn! Danke euch beiden Hoffentlich finde ich so auch mal einen Deal den ich der Community mitteilen kann
  4. Barney's Profilbild
    Barney
    Braetschek01.06.2021 16:30

    Würde mich auch über einen Crawler für Euronics freuen...gerade heute habe …Würde mich auch über einen Crawler für Euronics freuen...gerade heute habe ich in einem Euronics-Shop ein Angebot entdeckt, welches ich sonst gern mal mit den anderen Filialen verglichen hätte...Vielleicht hast Du ja doch IRGENDWANN mal die Muße...


    So, hier kommt die erste Version des Crawlers für Euronics.

    Achtung, übertreibt es damit bitte nicht! Ich habe mir bereits eine kurzzeitige IP-Sperre eingefangen. Zumindest eine Abfrage dürfte aber problemlos durchgehen. Sind leider einfach sehr viele Filialen, was die Verbindungen und somit auch die Dauer natürlich ziemlich hochtreibt. Schneller und sicherer ginge es möglicherweise per Warenkorb-API, aber dort habe ich bislang noch keinen validen Zugangspunkt gefunden.
  5. Barney's Profilbild
    Barney
    Meinst du für die Fundgrube? Oder was genau willst du dort crawlen? Es gibt ja keine marktspezifischen Angebote außer halt die zuvor erwähnten Restposten.
  6. Kroko_Dok's Profilbild
    Kroko_Dok
    Barney28.04.2021 16:59

    Meinst du für die Fundgrube? Oder was genau willst du dort crawlen? Es …Meinst du für die Fundgrube? Oder was genau willst du dort crawlen? Es gibt ja keine marktspezifischen Angebote außer halt die zuvor erwähnten Restposten.



    Er meint wahrscheinlich dass die MM/Saturn Filialen online auch unterschiedliche Preise haben, was aber nicht der Fall ist.
  7. Barney's Profilbild
    Barney
    Braetschek29.04.2021 10:32

    Kann man das Medimax-Teil auch für die Electronic Partner-Filialen …Kann man das Medimax-Teil auch für die Electronic Partner-Filialen umschreiben ?


    Weiß nicht, müsste ich mir mal anschauen. Kostet aber alles meine Freizeit und ich kann mich ehrlich gesagt nicht an tolle EP-Deals erinnern, also ist die Relevanz wohl eher gering.
  8. Barney's Profilbild
    Barney
    Braetschek29.04.2021 10:47

    Die nutzen ja dasselbe Shop-System inkl. identischer Artikelnummern wie …Die nutzen ja dasselbe Shop-System inkl. identischer Artikelnummern wie Medimax. Also müßte man ja im Prinzip nur den Code vom Medimax-Crawler kopieren und überall wo "medimax" in den Links steht dies durch "ep" ersetzen.Oder stelle ich mir das zu einfach vor ?


    Wie geschrieben, müsste ich mir anschauen. Mit einem einfachen Austausch des Begriffs ist es aber ja alleine deswegen schon nicht getan, weil ich erst einmal sämtliche Märkte irgendwo abgreifen muss.
  9. Porax's Profilbild
    Porax
    Barney28.04.2021 17:25

    Na klar, hier entlang. Im übergeordneten Verzeichnis findet …Na klar, hier entlang. Im übergeordneten Verzeichnis findet sich auch das Äquivalent für Medimax.


    Klasse Checker!
    Danke.
  10. Barney's Profilbild
    Barney
    _Grav1ty_15.05.2021 16:44

    Hi, hast du das auch für Euronics gemacht, nein oder?Und wieso kommt …Hi, hast du das auch für Euronics gemacht, nein oder?Und wieso kommt manchmal ein anderer Preis? Habe das gerade mal gemacht, aber der 2. beste Preis ist leider in Wirklichkeit 100 EUR höher. Danke


    Nein, Euronics ist weniger trivial und erfordert mehr Zeit, die ich aktuell nicht investieren will.

    Wo genau ist der Preis höher? Bei Medimax oder bei expert? Letzteres kann daran liegen, dass die Versandkosten nicht abgerufen werden können. Bei Medimax wiederum sollte eigentlich alles passen.
  11. Barney's Profilbild
    Barney
    _Grav1ty_15.05.2021 20:15

    Ne. Bei Expert hat der als normalen Preis 1098€ ausgespuckt. Bei dem H …Ne. Bei Expert hat der als normalen Preis 1098€ ausgespuckt. Bei dem Händler hat es aber 1199€ + VSK gekostet.Habe es dann nochmals später versucht. Da kam als zweit günstigster Preis (günstigster war ein Ausstellungsstück) 1099€.


    Expert ist teilweise so drauf, dass die ihre Preise erhöhen, wenn sie feststellen, dass jemand ein Produkt in den Warenkorb legt. Da das Tool exakt das im Hintergrund tut, kann es durchaus sein, dass dadurch unmittelbar eine Preiserhöhung initiiert wird. Selbst festgestellt habe ich dieses Phänomen allerdings noch nie.
  12. Braetschek's Profilbild
    Braetschek
    Barney08.06.2021 13:46

    So, hier kommt die erste Version des Crawlers für Euronics.Achtung, …So, hier kommt die erste Version des Crawlers für Euronics.Achtung, übertreibt es damit bitte nicht! Ich habe mir bereits eine kurzzeitige IP-Sperre eingefangen. Zumindest eine Abfrage dürfte aber problemlos durchgehen. Sind leider einfach sehr viele Filialen, was die Verbindungen und somit auch die Dauer natürlich ziemlich hochtreibt. Schneller und sicherer ginge es möglicherweise per Warenkorb-API, aber dort habe ich bislang noch keinen validen Zugangspunkt gefunden.



    Wahnsinn! Besten Dank für Deine Mühe!!!!
  13. Jaxbeer's Profilbild
    Jaxbeer
    Darf ich fragen wo es diesen Crawler für Expert gibt ? Finde leider nichts.Vorab Danke.
  14. Jaxbeer's Profilbild
    Jaxbeer
    Link geht leider nicht:
    Not found error: This is not the page you're looking for.
    If you think this is a mistake please contact us_

    OK hab den übergeordneten Ordner genommen.
    Danke (bearbeitet)
  15. Barney's Profilbild
    Barney
    Jaxbeer28.04.2021 17:26

    Link geht leider nicht:Not found error: This is not the page you're …Link geht leider nicht:Not found error: This is not the page you're looking for. If you think this is a mistake please contact us_


    Gib mir doch mal zwei Sekunden.
  16. peterfunny's Profilbild
    peterfunny Autor*in
    Dann ist meine Frage beantwortet, vielen Dank für die Antworten und allen einen schönen Abend
  17. Braetschek's Profilbild
    Braetschek
    Barney28.04.2021 17:25

    Na klar, hier entlang. Im übergeordneten Verzeichnis findet …Na klar, hier entlang. Im übergeordneten Verzeichnis findet sich auch das Äquivalent für Medimax.



    Kann man das Medimax-Teil auch für die Electronic Partner-Filialen umschreiben ?
  18. Braetschek's Profilbild
    Braetschek
    Barney29.04.2021 10:34

    Weiß nicht, müsste ich mir mal anschauen. Kostet aber alles meine Freizeit …Weiß nicht, müsste ich mir mal anschauen. Kostet aber alles meine Freizeit und ich kann mich ehrlich gesagt nicht an tolle EP-Deals erinnern, also ist die Relevanz wohl eher gering.



    Die nutzen ja dasselbe Shop-System inkl. identischer Artikelnummern wie Medimax. Also müßte man ja im Prinzip nur den Code vom Medimax-Crawler kopieren und überall wo "medimax" in den Links steht dies durch "ep" ersetzen.
    Oder stelle ich mir das zu einfach vor ?
  19. der_Tobi's Profilbild
    der_Tobi
    Dafür ist die Community ja da und vielleicht profitieren wir dadurch ja mal von einem EP Deal
  20. _Grav1ty_'s Profilbild
    _Grav1ty_
    Barney28.04.2021 17:25

    Na klar, hier entlang. Im übergeordneten Verzeichnis findet …Na klar, hier entlang. Im übergeordneten Verzeichnis findet sich auch das Äquivalent für Medimax.



    Hi,
    hast du das auch für Euronics gemacht, nein oder?
    Und wieso kommt manchmal ein anderer Preis? Habe das gerade mal gemacht, aber der 2. beste Preis ist leider in Wirklichkeit 100 EUR höher.

    Danke
  21. _Grav1ty_'s Profilbild
    _Grav1ty_
    Barney15.05.2021 17:41

    Nein, Euronics ist weniger trivial und erfordert mehr Zeit, die ich …Nein, Euronics ist weniger trivial und erfordert mehr Zeit, die ich aktuell nicht investieren will.Wo genau ist der Preis höher? Bei Medimax oder bei expert? Letzteres kann daran liegen, dass die Versandkosten nicht abgerufen werden können. Bei Medimax wiederum sollte eigentlich alles passen.



    Ne. Bei Expert hat der als normalen Preis 1098€ ausgespuckt. Bei dem Händler hat es aber 1199€ + VSK gekostet.
    Habe es dann nochmals später versucht. Da kam als zweit günstigster Preis (günstigster war ein Ausstellungsstück) 1099€.
  22. Braetschek's Profilbild
    Braetschek
    Barney15.05.2021 17:41

    Nein, Euronics ist weniger trivial und erfordert mehr Zeit, die ich …Nein, Euronics ist weniger trivial und erfordert mehr Zeit, die ich aktuell nicht investieren will.Wo genau ist der Preis höher? Bei Medimax oder bei expert? Letzteres kann daran liegen, dass die Versandkosten nicht abgerufen werden können. Bei Medimax wiederum sollte eigentlich alles passen.



    Würde mich auch über einen Crawler für Euronics freuen...gerade heute habe ich in einem Euronics-Shop ein Angebot entdeckt, welches ich sonst gern mal mit den anderen Filialen verglichen hätte...

    Vielleicht hast Du ja doch IRGENDWANN mal die Muße...
  23. Hans-Hermann's Profilbild
    Hans-Hermann
    Ganz großartig - dickes Dankeschön auch von mir!

    Nur mit dem Expert Checker kriege ich leider keine Ergebnisse.
    Ich mache es dort wie bei den anderen Checkern auch, ich suche über die "zentrale" Homepage (also nicht schon eine Filiale ausgewählt) das Produkt und kopiere dann die URL.
    Wenn ich sie einfüge, kommt immer diese Fehlermeldung:

    Traceback (most recent call last):
    File "main.py", line 41, in <module>
    csrf_token = soup.find("meta", {"name": "csrf-token"})["content"]
    TypeError: 'NoneType' object is not subscriptable

    Hab's auch schon mit verschiedenen Produkten probiert.

    Kann es sein, dass der Expert Checker nicht mehr läuft?
  24. hendrik00981's Profilbild
    hendrik00981
    Gibt es hier ein Update?
  25. Driago's Profilbild
    Driago
    Gibt es an dieser Front Neuigkeiten? (bearbeitet)
    Barney's Profilbild
    Barney
    Welche Front?
's Profilbild
Diskussionen
Top-Händler