Kommentare zu: Mein eigener Spider…

Von: Nico

Nico — Sat, 05 Jun 2010 19:02:19 +0000

Kann man den Spider eigneltich auch i-wo Downloaden oder kannste mir Links schicken wie man einen Spider selber Programiert?

Von: marchionni.ch

marchionni.ch — Fri, 27 Mar 2009 15:31:16 +0000

Keyword Rank Tracking Tool…

Um Fortschritte und Wirkung von SEO-Massnahmen zu beurteilen, ist eine Erfolgskontrolle zwingend nötig. Aus diesem Grund habe ich ein Skript entwickelt, welches die Position eines Keywords in den Google SERPs (search engine result pages) täglich aufz…

Von: Flug

Flug — Sat, 21 Mar 2009 12:37:08 +0000

@chris, das ist eine gute Idee, beides zu verbinden, obs geht weis ich aber auch nicht,.. lass mal hören, wenn Du was weist.

Von: Chris

Chris — Mon, 19 Jan 2009 06:41:53 +0000

Also ich bin ja nu n nichder Technik-Freak …. aber kann man so einen Spider nicht selbst für eigne Zwecke schön nutzen? Wenn es möglich wäre dies mit ner Linkanalyse und ner PR-Analyse zu verbinden (weiss net ob das techn. machbar ist) … kann man slbst eigne Daten sehen und Schlüsse ziehen wo es lohnt Linktausch zu betreiben .. und vllt. neue Muster erkennen ???

Oder geht sowas dann doch nicht und nu ein reines Onpage ist drin?

Von: Cell

Cell — Thu, 30 Oct 2008 10:40:00 +0000

Erstmal: Gute Idee, wäre schön, wenn du den Checker dann anbietest. Leider sind die meisten wie von Sistrix nun ja alle samt kostenpflichtig oder unzuverlässig.

Nebenbei: Hast du den Blogaufbau (Design) selbst gemacht? Also außer dem Logo? Wenn nein, wo bekomm ich es her :) Keine Angst wird umgebaut ;)

Von: torsten

torsten — Wed, 29 Oct 2008 20:07:23 +0000

Wer mal mit eigenem Spider und Index rumspielen möchte sollte mal einen Blick auf:

yacy.net werfen. Dort kann man sich sein “eigenes kleines Google” runterladen und mit experimentieren. Zum Backlinkcheck etc. ist es wunderbar geeignet. Kostet nichts das gute Stück. Viel Spaß beim testen. (Is nicht meine Seite, ist ein echter Tipp :)

Von: Marc

Marc — Fri, 24 Oct 2008 13:59:10 +0000

Kein Problem, Dein gesamter IP-Bereich wurde vom Page Restrictor Script ohnehin geblockt. Also wird Dein Spider bestenfalls meine Seite mit der Rechenaufgabe zu sehen bekommen.

22.10.2008 23:25:07 – 85.17.10.174 xastus2.xastus.com – BoeserSeoSpider – – http://www.meinedomain.de/ – iprange – 85.17.0.0/85.17.255.255

:-)
Gruß
Marc

Von: Frager

Frager — Thu, 23 Oct 2008 16:39:45 +0000

Klar darfst du eine öffentliche Website besuchen (und dort Dinge tun, die man dort so tut und weswegen sie ins Netz gestellt wurde).
Du darfst mir auch eine E-Mail schreiben, mit Infos für mich, dafür ist mein Postfach da

Wenn du aber massenhaft öffentliche Sites besuchst und dort Dinge tust, weswegen sie nicht ins Netz gestellt wurden – dann erinnert das an Spam – also statt mir eine (persönliche) Mail zu schreiben, beballerst du das komplette Netz. Das ist imho nicht in Ordnung – vor allem, wenn alle das machen würden.

Nun ja – ist eine Frage der menschlichen Haltung und das du böse bist, verheimlichst du ja immerhin nicht…

Meinetwegen können wir das hier beenden.

Von: admin

admin — Thu, 23 Oct 2008 15:29:05 +0000

Frager ich kann durchaus deine Position verstehen und stimme dir in vielen Dingen bei.

Aber ganz ehrlich welchen Bot brauchst du denn ausser dem GoogleBot? Welcher liefert dir denn sonst noch einen monetisierbaren Nutzen. Yahoo? MSN? ASK? Eigentlich reichen diese 4 Zeilen und du hast Ruhe von Bots.

Sicher ist dieser Bot im Augenblick ein Bot der mir persönlich von Diensten ist und mir hilft meine Arbeit besser zu machen. Ein nutzen für die Allgemeinheit gibt es im Augenblick nicht! Da helfen auch die Viagra Warnungen nicht, da geb ich dir recht.

Aber ich betrachte im Augenblick eine Webseite als eine öffentliche Webseite die ich besuchen darf und solange ich dieser Seite keinen Schaden anrichte, sehe ich da auch kein Problem.

Natürlich kann mein Spider auch mal wild werden und ne Menge Traffic verursachen, was auch zu einem finanziellen Schaden führen kann. Ist natürlich Scheisse, sollte sowas aber passieren sieht man natürlich das mein Spider den Mist verursacht hat, so würde ich mich mit Sicherheit nicht aus der Verantwortung ziehen.

Von: Frager

Frager — Thu, 23 Oct 2008 14:42:22 +0000

Realistisch gesehen wird es Jahre dauern, bis sich ein juristischer Gleichklang ausgebildet hat.
Obige Beispiele ziehen imho nicht – denn vom Google-Bot habe ich einen Nutzen – monetarisierbaren Traffic.
Von deinem Bot habe ich eventeuell Pflegekosten aber keinen Nutzen. Im Grunde verhälst du dich wie der Staat, der Daten haben möchte aber den Providern die Kosten für die Vorratsdatenspeicherung auferlegt.
Gut – der Staat behauptet, die Allgemeinheit hat einen Nutzen davon.

Den Nutzen ggf. vor Viagra-Spam gewarnt zu werde -netter Versuch, aber imho für eine Massenaktzeptanz nicht ausreichend – orientiere dich doch auch hier am Staat – Warnung vor B**benanschl**** sollte schon drinne sein ;-)

Das mit den Pflegekosten mag jetzt übertrieben klingen – das gibt sich aber, wenn irgendwann alle Seo’s Eigennutzbots durch Web geistern lassen :-(
Viele Bots, viele Webmasterrobotsschraubereien, viele unnütze Arbeitszeit – wofür?
Je mehr Bots, desto größer die Wahrscheinlichkeit, dass da auch Geschwister vom wildgewordenen Slurp bei sind…

Juristisch sauber kannst du das nur so lösen: Schreibe die Webmaster an, und bitte sie um die Daten (Opt-in). Kriegst du dann wahrscheinlich nicht. Warum auch den Wettbewerb mit wettbewersrelevanten Daten beliefern?
Was folgt daraus?

BTW: Opt-out hat sich auch bei Spam nicht durchgesetzt, warum sollte es bei Bots so sein?