Das Putzlowitsch Test- und SEO-Blog

XoviLichter-Rankings scrapen? Nicht bei aus.gerech.net!

Xovilichter

Zufällig habe ich auf GitHub ein Projekt entdeckt, welches PHP-Skripte zum scrapen der Ranking-Seiten von Dynapso und Xovi bereitstellt.

Für den Ranking-Monitor von aus.gerech.net ist soetwas nicht erforderlich. Dort werden die Daten maschinenlesbar im JSON und XML-Format zur Verfügung gestellt. Nur ist das bisher nicht dokumentiert und so weiß niemand was davon. :-)

Die URLs lauten:

  • JSON: http://aus.gerech.net/data/xovilichter/top123.json
  • XML: http://aus.gerech.net/data/xovilichter/top123.xml

Der Aufbau ist recht einfach und weitestgehend selbsterklärend. Im Kopf gibt es drei Datenfelder:

  • nam – Name bzw. Suchbegriff
  • upd – Datum und Zeit des letzten Updates der Liste
  • cnt – Anzahl der Google-Suchergebnistreffer (nicht Listeneinträge!)

Es folgt in rnk eine Liste der Suchergebnisse mit folgenden Datenfeldern:

  • pos – Position in den Suchergebnissen
  • url – URL der Seite
  • typ – Typ des Suchergebnisses, mögliche Werte
    • txt – normales Suchergebnis
    • new – Google-News
    • img – Universal Search Bilder
    • vid – Video
  • img – URL des Bildes, wenn Typ img ist (optional)
  • aut – Name des Autors, falls verfügbar (optional)
  • lpo – letzte Position, 1000 falls neu in der Liste

Bei der Position für Universal-Search Ergebnisse wird eine Unternummerierung vorgenommen. Das erste Ergebnis bekommt .1, das zweite .2, das dritte .3 usw. an die eigentliche Position angehängt. Befinden sich zum Beispiel vier Bilder an der Position 13, so erhalten sie die Positionen 13.1, 13.2, 13.3 und 13.4 in pos zugeordnet.

Die Daten werden stündlich zu vollen Stunde erhoben. Es dauert aber ein paar Minuten, bis sie dann tatsächlich vorliegen. Also sollten die Daten ein paar Minuten nach der vollen Stunde abgefragt werden. Den aktuellen Zeitpunkt der Daten sieht man ja in den Kopfdaten.

Das Top-10 Diagramm im PNG-Format liegt auch zu diesem Zeitpunkt vor. Es gibt ein 24-Stunden-Diagramm und ein 3-Wochen-Diagramm:

  • 24 Stunden: http://aus.gerech.net/charts/xovilichter/ctop10.png
  • 3 Wochen: http://aus.gerech.net/charts/xovilichter/wtop10.png

Und morgen zeige ich dann, wie ich mit ein paar Zeilen PHP-Code das Ranking von aus.gerech.net hier bei Schnurpsel einbinde. :-)

6 Kommentare »

Seophonist – die Rankingseiten

In guter Tradition – Seophonist

Gestern startete der neue, schon seit Jahren im September stattfindende, Dingensphone-SEO-Wettbewerb. Nach Befreiphone (2008), VolksPhone (2009), reVierphone (2010), JahresendSEO (2011) und hochgeschwindigkeitsSEO (2012) geht es diese Jahr um den Seophonisten. Der Seophonist ist also ein SEO, der phoniert, mithin seophoniert. Aus gegebenem Anlaß habe ich einfach mein altes Befreiphone rausgekramt und neu verphonet.

seophonist

Ein Seophonistenphone unterwegs

Mit meiner Zweitverwertung stehe ich nicht alleine da, Martin hat sein altes VolksPhone für den aktuellen Seophonist-Contest recycled.

Auch schon eine gute Tradition sind die Rankingseiten. Als offizielle Seite, die dann wohl auch maßgeblich für den Zieleinlauf sein wird, ist auf der Wettbewerbsausschreibungsseite Sistrix genannt.

Seophonist bei Sistrix

OMClub - SISTRIXGewohnt schlicht und übersichtlich kommt das Ranking bei Sistrix daher. An der Korrektheit der Daten ist nicht zu zweifeln, da Sistrix über lange Erfahrung im Bereich der Erfassung und Auswertung der Google-SERPs verfügt.

Der Rankingverlauf der ersten drei Plätze und die Übersicht über die Anzahl der Treffer runden das Bild ab. Die Seite selbst taucht aber bisher nicht im Ranking bei Google auf, warum auch immer. Ein noindex oder einen Ausschluß in der robots.txt konnt ich nicht finden.

Seophonist bei gerechnet

SEOphonist Top 100  SEOphonistAuch schon bei vielen SEO-Wettbewerben dabei ist Gerechnet (bzw. schnurpsel und hbgf). Die Daten werden dort nur stündlich erfaßt. Es gibt zwei Ranking-Diagramme, ein Stunden-Ranking der letzten 24 Stunden und ein Tagesdiagramm für das Seophonist-Ranking jeweils um 22 Uhr. Da ist im Moment aber noch nicht viel zu sehen.

Ansonsten gibt es eine Top-123-Rankingliste mit Trendanzeige und Links zu den jeweiligen Seiten. Alles kommt recht übersichtlich daher. Die Seite selbst war zunächst in der Top-10 eingestiegen, ist aber mittlwerweile auf Plätze jenseits der Zehn zurückgefallen.

Seophonist bei Dynapso

SEOphonist Contest • Dynapso.deSeit ein oder zwei SEO-Wettbewerben mischt auch Dynapso bei den Ranking-Seiten mit. Das Ranking-Digramm und die Liste sehen gut aus. Die Liste bietet neben der Trendanzeige auch noch eine Information zum möglicherweise vorhandenen Autoren-Profil. Eine interessante Sache, sieht man doch praktsich auf einen Blick, wer da mit wievielen Seiten mitmischt.

Bei der Erfassung, Auswertung oder Darstellung der Daten in der Liste scheint es aber Probleme zu geben. So wiederholen sich einige Ergebnisse in Fünferblöcken am Ende des Rankings. Diese sind dort aber so nicht wirklich in den Google-SERPs vorhanden.

Das wundert mich etwas, da Dynapso seit ein paar Tagen seinen Monitoring-Dienst auch gegen Geld anbietet. Da sollten solche Fehler aber nicht auftreten. Möglicherweise ist aber auch nur das öffentlich sichtbare Seophonist-Ranking betroffen. Sehr Vertrauen erweckend ist es aber trotzdem nicht.

Seophonist beim SuchmaschinenMonitor

SEOPhonist Contest - SuchmaschinenMonitorErst mit Verspätung eingestigen, aber auch bereits bei den vorigen SEO-Wettbewerben dabei ist der SuchmaschinenMonitor. Auch hier wird eine Top-100 mit viertelstündlicher Aktualisierung geboten. Gut gelöst und übersichtlich ist die Darstellung der Universal-Search-Ergebnisse.

Ambitioniert ist das Ranking-Diagramm, welches per Voreinstellung alle 100 Treffer anzeigt. Wenn man jetzt noch ein wenig am Bereichsregeler schiebt (und etwas Geduld hat), ergibt sich bisweilen eine Darstellung von durchaus künstlerischem Wert und erinnert mich an die 3D-Darstellung des Frequenzspektrums in Steinbergs WaveLab. :-)

Seophonist, was zählt, legt der Veranstalter fest

Wie immer gilt aber als „Zielfoto“ nur das, was der Veranstalter festgelegt hat. Da können die Rankingseiten noch so schön und bunt und übersichtlich sein, Maßgeblich sind sie alle nicht (außer vielleicht Sistrix).

Hier gibt es das Ranking der Rankingseite :-)

Ranking der Ranking-Seiten

5 Kommentare »

fullmetalseo2013 – die Ranking-Seiten im Ranking

Kurze Geschicht meiner Ranking-Überwachung

Meine erste Ranking-Überwachung bei einem SEO-Wettbewerb habe ich vor nunmehr schon acht Jahre ins Rennen geschickt. 2005 gabe es von der ct, die älteren Leser werden sich erinnern, den Contest um die Hommingberger Gepardenforelle. Damals habe ich mein Ranking-Monitoring noch gar nicht so sehr als Beitrag zum Wettbewerb selbst gesehen, sondern viel mehr als kleinen Service für andere und natürlich in erster Linie auch für mich selbst.

Mittlerweile habe ich den einen oder anderen SEO-Wettbewerb mit meinem Monitoring begleitet und nebenbei sind daraus auch Sachen wie der Bilder-Domain-Index bidox und der Bilder-Beobachter bibeo entstanden.

fullmetalseo2013 Top-Listen

Auch bei fullmetalseo2013 bin ich mit dabei, aber es gibt auch einige andere Ranking-Seiten. Ein paar habe ich mir mal angesehen (Stand gestern 23 Uhr):

Fullmetalseo2013 - Ranking der Ranking-Seiten

dynapso.de

Fullmetalseo2013 Contest • dynapso.deDynapso ist erst relativ spät mit dem dem Ranking-Monitoring gestartet, hat sich aber zwischenzeitlich in der Top-10 etablieren können.

Bei Dynapso kann man mit einem Aktualisierungsiterval von 15 Minuten fast schon von Echtzeit-Monitoring sprechen. Die Liste zeigt neben den üblichen Daten wie Platzierung, Trend und URL auch, falls vorhanden, die Google-Autoren-Info an. Nette Sache.

Das Diagramm ist ansprechend gestaltet und ein kleines bißchen interaktiv. Bei mir funktionieren allerdings die Bereichs-Schieber oben rechts nicht. Könnte aber auch an mir oder meinem Browser liegen.

Für ein paar Tage über des vorletzte Wochenende war das Rankingmonitoring hängen geblieben.

nextbig.de

Fullmetalseo2013  NextBiGSchon vom Start weg mit dabei ist NextBig. Die Platzierungen sind insgesamt recht gut, lange Zeit war die Seite auf der ersten Google-Trefferseite zu finden. In den letzten Tagen blieb dann aber nur noch ein Platz jenseite von Rang 10 übrig.

Das die Platzierung bei Google nicht unbedingt etwas mit inhaltlicher Qualität oder Mehrwert für den Nutzer zu tun hat, wird hier deutlich. Die Seite kämpft mit technischen Problemen bei der Datenerfassung, denn bei der genannten stündlichen Aktualisierung ist bestenfalls alle zwei Stunden eine Rankingliste zu sehen. Dazwischen sieht die Seite dann so aus. Der Betreiber scheint sich aber darum nicht zu kümmern.

Auch bei der Darstellung besteht Optimierungspotenzial. So werden die Universal-Seach-Boxen für Bilder und News nicht ordentlich aufgelöst. Das Sonderzeichen vor der URL gibts scheinbar nur beim Mac, unter Windows sehe ich im Firefox [8FFF] und im Chrome sowie IE ein leeres Kästchen. Die Liste wirkt duch die Umbrüche der zu langen URLs zerissen und unübersichtlich. Hier könnte eine …-Verkürzung helfen.

Im übrigen scheint alles ein klein wenig bei mir abgekupfert zu sein, wenn auch etwas schlechter umgesetzt. :-)
Bei Schnurpsel/GerechNet: [Domain filtern] mindestens 3 Zeichen
Bei NextBig: [nach Domain filtern] min. 3 Zeichen
Lustigerweise wird dort gar nicht nach der Domain gefiltert, sondern nur nach einer Zeichenkette in der URL, also z.B. html.

Wie auch immer, für den nächsten SEO-Wettbewerb wäre mal eine Überarbeitung des Ranking-Monitorings angebracht.

gerech.net

Gut, zu meiner eigenen Ranking-Seite schreibe ich jetzt nicht viel. Mit knapp einer Woche Verspätung gestartet, lag die Seite zwischenzeitlich sogar auf Platz 1. Nach dem steilen Aufstieg folgte aber schnell der tiefe Fall im Ranking. Auch bei der Top-123 gibt es noch Verbesserungsmöglichkeiten. Für Kritik und Anregungen habe ich immer eine offnes Ohr. Der nächste SEO-Wettbewerb kommt gestimmt. :-)

suchmaschinenmonitor.de

FullmetalSEO2013 - Google Ranking Check by SuchmaschinenMonitorDer SuchmaschinenMonitor taucht in meinem Ranking erst spät auf, liegt seitdem auf Plätzen zwischen 40 und 60.

Auch hier wird eine Top-100 mit stündlicher Aktualisierung geboten. Gut gelöst und übersichtlich ist die Darstellung der Universal-Search-Ergebnisse. Auch die Übersicht der Trefferzahl und die Liste der „Schleichende Veränderungen“ ist interessant, wobei ich bei letzterer nicht ganz verstanden habe, was sie anzeigt.

Ambitioniert ist das Ranking-Diagramm, welches per Voreinstellung alle 100 Treffer anzeigt. Wenn man jetzt noch ein wenig am Bereichsregeler schiebt (und etwas Geduld hat), ergibt sich bisweilen eine Darstellung von durchaus künstlerischem Wert und erinnert mich an die 3D-Darstellung des Frequenzspektrums in Steinbergs WaveLab. :-)

Ranking mit Ranking-Seiten

Ja, man kann auch mit Ranking-Seiten bei SEO-Wettbewerben ranken. Solche Seiten können durchaus auch ein paar natürliche Links auf sich ziehen. Inhaltlich scheinen die vielen ausgehenden (nofollow) Links und die möglicherweise recht hohe Dichte des Keywords zumindest nicht zu schaden. Mal sehen, ob die eine oder andere Rankingseite morgen Abend in der Top 10 mit zu den Gewinnern gehört.

Ein Kommentar »

fullmetalseo2013 – einige Seiten im Ranking beobachtet

fullmetalseo2013 kurz vor dem Finale

Übermorgen geht der fullmetalseo2013-Wettbewerb zu Ende und ich habe mir mal den Rankingverlauf einiger Seiten angesehen. Da ich den Startschuß zum Contest verpaßt hatte, beginnen meine Ranking-Aufzeichnungen erst am 21. Mai. Die zu Grunde liegenden Daten habe ich aus der fullmetalseo2013 Top-123 entnommen.

Fullmetalseo2013 - Ranking einiger Seiten

Zuerst will ich drei Doodle-Blogger betrachten.

simonrueger.de

Simon ist erst Anfang Juni in den Wettbewerb eingestiegen, hatte aber vom Start weg zunächst recht gute Platzierungen in der Top-10 aufzuweisen. Mittlerweile ist er aber auf Plätze jenseits der 30 zurückgefallen.

Ich nehme an, er hat in den letzten Tagen kaum noch aktiv etwas für sein Ranking getan und zieht dann im Endspurt mit seinem Video in die Top-10. Videos sind im Unterschied zu Bildern durchaus gewinnberechtigt. Ich bin gespannt.

tagseoblog.de

Martin gehört zu den Teilnehmern der ersten Stunde und lag zwischenzeitlich sogar auf Platz 1. Ich habe es selbst zwar nicht gesehen und auch keine Daten vorliegen, aber es muß wohl so gewesen sein. Ab dem 26. Mai ging es jedoch kontinuierlich bergab in die 30er Plätze.

Nicht vergessen darf man aber, daß sein Bild praktisch die ganze Zeit die Bildersuche und auch die Universal-Search-Box anführt. Allerdings kann man mit einem Bild nix gewinnen. Es zeigt aber Martins Ausnahmestellung im Bereich der Bildersuche.

oceparx.de

Ralf-Peter ist wohl auch von Anfang an mit dabei und lag zwischenzeitlich, wie im Diagramm zu sehen ist, recht weit vorne im fullmetalseo2013-Ranking. Ab dem 25. Mai hat er allerdings die Top-10 endgültig verlassen und ist auf Plätz im Bereich um 30 bis 40 abgesackt. Zwischendurch war er sogar aus der Top-100 verschwunden und wollte bereits aufgeben.

Die Seite hat sich nun wieder gefangen und außerdem habe ich seine fullmetalseo2013-YouTube-Playlist in den Rankings entdeckt. Vielleicht geht da ja noch was…

putzlowitsch.de

Ingo ist erst mit einer knappen Woche Verzögerung in den Wettbewerb eingestiegen. Anfänglich sah es auch hier ganz gut aus, der Sprung auf die erste Seite wurde nur knapp verfehlt. Allerdings konnte sich das Video zeitweilig auf der ersten Seite behaupten und auch das Bild (ohne Wert) lag gut im Rennen.

Was Ingo vielleicht noch so vor hat, kann ich nicht sagen, da muß ich ihn erst fragen. :-)

ndr.de

Der NDR vertritt diesmal die ARD im SEO-Wettbewerb. Ich gehe zwar nicht davon aus, das die Seite etwas mit dem Ausgang des Rennen zu tun haben wird, aber der derzeit gefestigte Platz in der Top-100 ist aller Ehren wert.

fullmetalseo2013 – das Ende ist nah

Nur noch zwei Tage, dann wird beim fullmetalseo2013-Contest abgerechnet. Der Zieleinlauf kann noch einmal spannend werden, denn kurzfristige Optimierungen konnen auch in relativ kurzer Zeit noch greifen und die scheinbar verfestigte, aktuelle Top-10 durcheinander bringen. Man darf gespannt sein.

Ein Kommentar »

Betrachtungen zum megaabstauberseo-Ranking

Ich habe mal ein paar Teilnehmer des megaabstauberseo-Wettbewerbs (vorzugsweise Doodle-Blogger) auf meine Beobachtungsliste gesetzt und deshalb ein spezielles Ranking-Diagramm bei hbgf.de erstellt:

megaabstauberseo - Keyworddomains

tagseoblog.de

Martin vom TagSeoBlog war wohl beim megaabstauberseo-Start noch in den Herbstferien und ist deshalb erst später eingestiegen. Der Artikel hat auch einen recht guten Start hingelegt, obwohl er ausdrücklich darum gebeten hat, nicht verlinkt zu werden. Ganz im Gegenteil, er hat Links aus seinem Beitrag für Kommentare vergeben. Ich habe mich mit meiner Top-123 für „massenhaften Spam-Links“ beworben und den Link auch bekommen. Danke! :-)

Mittlerweile ist der TagSeoBlog zurück gefallen, was aber nicht garan liegt, daß der Beitrag schlecht ist. Ich denke eher, daß jetzt zum Finale viele nochmal die Link-Keule schwingen und somit im Ranking steigen. Wo jemand gewinnt, verliert auch jemand. So ist das nun mal in den SERPs.

simonrueger.de mit Video

Simon von SR ist von Anfang an im megaabstauberseo-Rennen und kam auch mit dem Video kurzzeitig in die Top-10. Dann ging es bergab und seit kurzem konnte sich das Video wieder stark verbessern.

Ich denke, er fährt da so ein bißchen die Doodle-Taktik, bei der er mit den Videos in letzter Zeit sehr erfolgreich war. Das wird zwar nicht für den ersten Platz und den Hauptgewinn reichen, aber vielleicht zumindest für die Seite 1 und damit ein SeoDay-Ticket.

oceparx.de mit Video

Ralf-Peter von Oceparx ist seit dem zweiten megaabstauberseo-Tag mit dabei. So richtig gut lief es bisher weder für den Artikel noch das Video. Bei seiner Seite gabe es in letzter Zeit Probleme mit der Erreichbarkeit. Immer wieder habe auch ich Fehler wie „Die Verbindung wurde zurück gesetzt“ oder „Der Server antwortet nicht“ erhalten. Das ist auch für Google sicher ein negatives Siganl.

Vielleicht konnte er die Server-Probleme beheben und setzt noch zu einem Endspurt an.

gerech.net mit Video

Ingo von GerechNet konnte sich vom megaabstauberseo-Start weg mit seiner Top-123-Liste ganz gut in der Top-10 halten. Dann fiel er auf Plätze zwischen 10 und 20 zurück und nun geht es nach einem kurzen Sprung die Top-10 wieder nach unten.

Wieso rede ich von mir selbst eigentlich in der dritten Person? Also ich habe auch wieder ein Video mit am Start, welches allein zwar noch keine Spitzenplätze belegen konnte, aber vielleicht in der Video-OneBox den Sprung auf die erste Seite schaffen könnte. Mit meinen Bilder läuft es auch nicht wirklich gut.

Hier das Video :-)

ard.de

Die ARD lasse ich immer gerne mal bei SEO-Wettbewerben mitlaufen. Beim megaabstauberseo-Contest war da bisher noch nichts zu holen. Bei früheren Wettbewerben konnten aber bisweilen durchaus Achtungserfolge erzielt werde. Diesmal fehlt es einfach auch an genügend Unterstützung.

Es ist noch nicht aller Tage Abend

Morgen gegen 17.30 oder 18.00 Uhr fällt der megaabstauberseo-Hammer, dann wird man sehen, wer gewinnt. Bis dahin darf sich kaum einer sicher sein, es zu schaffen, denn die anderen Teilnehmer schlafen nicht.

5 Kommentare »