Expired Domains » News und Hintergründe » Seite 4 von 11

Domain Status unter weiteren TLDs

2011-02-27 - kostaki 5 Comments »

Es gibt mal wieder etwas neues im Memberbereich. Es geht um den Status eines Domainnamens unter weiteren TLDs. Wird ein Key unter .ORG gelöscht, ist es interessant zu wissen ob dieser Key noch unter .COM oder .DE frei ist, damit man die Domain sofort registrieren kann. Anders herum ist eine Domain die gelöscht wird und sonst überall vergeben ist wahrscheinlich interessanter als eine die noch überall zu haben ist. Damit man diese Informationen schnell zur Hand hat gibt es für alle Domains extra Spalten mit dem aktuellen DNS Status für die CNOBID Endungen.

Status TLDs CNOBID

Hierfür kommt kein Whois zum Einsatz, sondern DNS Checks. Für CNOBI Domains habe ich ja mittlerweile Zugriff auf die Zone Files und kann den DNS Status direkt aus diesen ermitteln. Kommt hier ein nicht vorhanden zurück, wird der Domainname noch einmal gegen die Pending Delete Liste geprüft, da diese Domains ja nicht mehr im Zone File stehen. Nun sind DNS Checks nicht 100% korrekt, aber technisch sind mir bei der Anzahl an Domains keine Whois Abfragen möglich. Deshalb gibt es eine gewisse Fehlerquote, aber ich denke damit kann man leben. Es gibt auch extra Filter um die neuen Felder in seine Abfragen einbeziehen zu können.

Beim einbauen habe ich ein kleines Problem bekommen was den Platz in den Tabellen angeht. Man kann den Text kleiner machen oder die Zellen Paddings runter setzen, aber irgend wann kommt man immer an die maximale Breite der Tabelle/Seite und ich mag eigentlich keine Horizontalen Scrollbalken, da die Übersicht verloren geht. Ich hab nun trotzdem einen eingebaut, da ich die weitere Informationen auch irgend wie anzeigen möchte. Für User die einen großen Monitor haben und sich an Scrollbalken genauso stören wie ich, gibt es einen neuen Button in den Filtern.

Stretch Filter

Durch einen Klick auf das Icon werden die Horizontalen Beschränkungen der Seite aufgehoben. Man kann sie also so Breit machen wie man möchte. Es wird auch ein Flag in der Session gesetzt, so das diese Option so lange aktiv bleibt bis man sie wieder abschaltet. Wer weitere Ideen zum übersichtlichen darstellen von großen Horizontalen Tabellen im Browser hat, kann mir gern ein Kommentar hinterlassen.

Sedo Festpreis Domains

2011-02-26 - kostaki No Comments »

Die Sedo Festpreis Domainliste wurde einem Update unterzogen. Leider war es kein Erweiterung oder Verbesserung, sondern eher eine Verschlechterung. Das Abfragen der Domains war schon immer schwer, aber durch eine Anpassung von Sedo ist es jetzt noch aufwändiger, so das es sich einfach nicht mehr lohnt. Nun wollte ich die Liste einfach entfernen, aber ich habe mich irgend wie dran gewöhnt und auch schon 1-2 Schnäppchen ergattert. Deshalb bleibt die Liste, aber es werden nur noch neue Festpreisdomains eingelesen (nicht mehr alle). Das senkt den Aufwand erheblich und man bekommt trotzdem noch mit was es neues gibt. Nach einem Monat werden Domains dann aus der Liste gelöscht. Das führt zu einer gewissen Aktualität, aber ob eine Domain wirklich noch bei Sedo angeboten wird kann ich damit nicht mehr sagen.

Bots, Skripte und Proxies: Wir müssen draussen bleiben

2011-02-13 - kostaki 4 Comments »

Ab und an gibt es User die gern ihre Bots/Skripte auf Peew.de los lassen um irgend welche Listen abzugrasen oder bei den .de Domains als erster dran zu sein. Eine Zeit lang hat mich das nicht gestört, wenn sie es nicht übertrieben haben. Wenn doch, habe ich die Accounts dicht gemacht und die IP gebannt (bei dynamischen IPs natürlich sehr schwer). Besonders bei den .de Domains finde ich es aber unfair den regulären Besuchern gegenüber, da es hier ja um Geschwindigkeit geht.

Gestern/Heute gab es mal wieder so einen. Er hatte sich schon vor einiger Zeit mit einer Trash E-Mail angemeldet und wollte nun unbedingt die komplette .de Domain Liste haben. Also hat er sich ein Skript geschrieben und das über ein Proxy Netzwerk (vielleicht Tor) laufen lassen. Als ich das gestern bemerkte, habe ich den Account abgeschaltet, aber irgend wann am Abend hat er sich wieder angemeldet und weiter ging es. Wenn man dann erst mal anfängt nach solchen Pappenheimern zu suchen, findet man gleich noch mehr.

Nun habe ich keine Lust auf dieses Katz und Mausspiel und ich will auch keine zusätzliche Zeit in die Entwicklung von automatischen Sperren stecken, die ich auch in weitere Features investieren kann. Ich möchte es aber auch nicht so weiter laufen lassen, deshalb habe ich mir ein paar Anpassungen überlegt die ich in der nächsten Zeit umsetzen werde. Als erstes habe ich mal die Anmeldung abgeschaltet. Hier muss ich mir wohl eine größere Hürde als eine valide E-Mail Adresse ausdenken... Wann und ob ich diese wieder anschalte, kann ich noch nicht sagen. Wer trotzdem einen Account haben möchte, kann sich mit mir in Kontakt setzen.

Alle die schon einen Account haben, würde ich bitten eine anständige und funktionierende E-Mail Adresse zu hinterlegen. Generell habe ich nichts dagegen wenn man sich mit einer Temporär Adresse anmeldet. Man weiß ja nie ob es sich überhaupt lohnt und was die Betreiber mit den Daten machen. Findet man das Angebot aber anständig und benutzt es regelmäßig, sollte man eine normale E-Mail Adresse eintragen. Ich spamme nicht und die Adressen werden auch nicht verkauft oder weiter gegeben. Wer keine E-Mails bekommen möchte, kann dies bei der Anmeldung angeben oder jederzeit in seinen Profil Einstellungen den Hacken entfernen. Nächste Woche schalte ich alle Accounts mit Adressen von Trash/Spam/Temporär E-Mail Providern ab und da die Anmeldung auch nicht aktiv ist, sind diese User erst mal weg.

Auf der normalen Seite habe ich ja schon die Anzeige auf die letzten 24 Stunden limitiert um die Gesamtlisten Downloader los zu werden, aber bei den .de Domains sind die aktuellen natürlich eh am interessantesten. Hier werde ich wohl oder übel einen gewissen Zeitverzug für die Veröffentlichung einbauen müssen um die "Ich baue einen Bot der die Seite jede Sekunden aufruft" Leute los zu werden. Ich denke da an einen variablen Offset von ein paar Minuten. Damit haben angemeldete User einen Vorteil vor nicht angemeldeten und passen vielleicht etwas mehr auf das sie ihren Account behalten.

Ich möchte auch noch einmal betonen das mich die normalen Benutzer dieser Seite nicht stören. Einige benutzen sie stärker als andere und das finde ich vollkommen Okay. Ich habe sie ja gebaut damit sie benutzt wird. Leider machen 5% der Besucher 95% der Arbeit aus und wenn ich es schaffe die Seite für diese 5% unattraktiv zu machen, bin ich mehr als zufrieden.

Neuer Filter im Memberbereich: Deutsche Keyword Domains

2011-02-03 - kostaki 5 Comments »

Einen Wortlisten Keyword Filter wollte ich schon lange haben, aber das Thema stellte sich als aufwändiger heraus als man denken würde. Als erstes stand die Frage nach einer ausreichenden Wortliste. Die im Netz zu findenden Listen waren nicht wirklich zufriedenstellend, also habe ich alle Wörterbücher und Wortlisten die ich finden konnte, aufbereitet und zusammen gefasst. Eine weitere Quellen waren Keywordlisten. An dieser Stelle möchte ich auch weiter ansetzen, den was tatsächlich gesucht wird, ist als Domainname ja nicht schlecht. Die daraus resultierende deutsche Liste hat aktuell ca. 1,4 Millionen Einträge, die mehr oder weniger Sinnvoll sind. Da sie aber auf schon vorhandene Domains angewandt wird, gehe ich von recht guten Treffern aus. Irgend wer hat sich ja schon mal was dabei gedacht als er die Domain registriert hat.

Keyword Filter Beta

Das System läuft nun schon einige Zeit in einem Beta Test und ich bin mittlerweile mit den Ergebnissen ganz zufrieden. Deshalb habe ich es vor ein paar Minuten für alle im Memberbereich freigeschaltet. In den einzelnen Domainlisten gibt es jetzt den neuen Filter der genauso verwendet werden kann wie alle anderen auch (beim Speichern von Suchanfragen auch). Derzeit gibt es nur einen deutschen Filter, aber das System ist für weitere Sprachen vorbereitet. Ich benötige nur weitere Wortlisten.

Der Matching Prozess

Als Wort werden nur Begriffe gesehen die vier oder mehr Zeichen haben. Markiert werden nur 100% Treffer von Domain und Wort, mit einer Ausnahme. Domains mit Minus werden ebenfalls gefunden wenn der Domainname ohne Minus in der Wortliste vorkommt. Beispiel: Damendessous steht in der Wortliste. Die Domain damen-dessous.tld würde aber auch gefunden werden. Wer diese Domains nicht haben möchte, kann sie über den Bindestrichfilter entfernen.

Das Thema Partial Matching ist recht kompliziert (jedenfalls bei meinen Tests). Ich hatte testweise auch Domains mit Minus markiert, wenn alle Wortteile vier oder mehr Zeichen lang waren und in der Wortliste vorgekommen sind. Das hat die Treffer versiebenfacht, aber ich bin mir nicht sicher ob diese Domains für jemanden interessant sind. Wenn jemand zu diesem Thema eine Meinung hat, würde ich mich über ein Kommentar freuen. Auch Beispiele von Domains die nicht erkannt wurden sind interessant für mich.

Ausblick

Der Wortfilter ist als Ausgangsbasis super. Nun kann man für die kleinere Anzahl an Domains natürlich weitere Informationen einholen um die Treffer zu bewerten. Hier wird es in naher Zukunft einen Test für die Pending Delete Domainliste geben. Ich denke da an Suchvolumen, Suchtreffer, Anzahl Adwords Anzeigen, Verfügbarkeit des Domainnamens unter anderen TLDs usw.

Wege wie man mir etwas gutes tun kann

2011-01-27 - kostaki No Comments »

Ab und an werde ich von dankbaren Usern nach einer Spenden URL gefragt oder nach anderen Wegen wie man mir etwas gutes tun kann. Da ich keine Geldspenden möchte, schicke ich dann immer folgende Liste zurück:

Erzähle deinen Freunden/Bekannten oder sonst jemanden den es interessieren könnte von Peew.de. Ich freue mich wenn meine Dienste benutzt werden und um so mehr umso besser.
Schreibe einen Artikel auf deinem Blog über Peew.de und deine Erfahrungen mit Expired Domains. Einige Leute haben das schon gemacht und so mancher hat darüber seinen Weg hierher gefunden.
Setze einen Keyword Backlink. Natürlich versuche auch ich zu treffenden Keywords zu ranken. Bisher leider eher mit mäßigem Erfolg, aber vielleicht wird das ja noch. Gelöschte Domains -> www.peew.de und Expired Domains -> www.peew.de/expired-domains/
Nimm die Seite einfach in deinen Blogroll auf.

Diese Sachen würden mir echt weiterhelfen und vielleicht ist für den einen oder anderen etwas dabei. Wenn nicht auch ok.

Webinar: Demystifying ICANN Accreditation

2011-01-26 - kostaki No Comments »

Vor ein paar Tagen habe ich an einem Webinar zum Thema Demystifying ICANN Accreditation teilgenommen. Darin ging es um Fragen wie man den ICANN Mitglied werden kann, was man für Voraussetzungen erfüllen muss und was es kostet. Bei der Anmeldung musste ich zwar etwas lügen was die Anzahl an Domains angeht die ich verwalte, aber ich denke das hat da niemanden gestört. Ich möchte natürlich kein ICANN Mitglied werden, aber ich fand das gesagte trotzdem sehr interessant.

Es wurden zum Beispiel weitere Wege erklärt wie man mit seiner Mitgliedschaft neben dem normalen Domaingeschäft Geld machen kann. Stichwort: Expired Domains. Das Thema mal von einem anderen Standpunkt aus zu betrachten kann ja nicht schaden. Das Video kann man sich jetzt kostenlos ansehen. Wer also der englischen Sprache mächtig ist, einen Einblick in das Thema bekommen möchte und ca. eine Stunde Zeit hat, kann es sich hier ansehen.

PageRank Update und PageRank Check

2011-01-21 - kostaki 5 Comments »

Es haben ja sicher viele mitbekommen, aber ich möchte es hier noch einmal erwähnen. Am gestrigen Tage hat uns Google mit einem PageRank Update beglückt. Das letzte Update vor diesem war am 03.04.2010, also vor fast 9 Monaten. Was heißt das nun? Für mich ne ganze Menge, da alle Domains in der Datenbank ein Update erfahren müssen und das läuft gerade. Bei derzeit ca. 5 Millionen Domains rein auf Peew.de dauert das natürlich ein bisschen, aber ich denke morgen sollten alle Domains den aktuellen PageRank anzeigen. Ist das nun ein Bekenntnis von Google zum PageRank oder nur das letzte Update vor dem verschwinden? Who knows...

Wer seinen PageRank checken möchte kann eines der Tools aus dem SEO United Artikel zum PageRank Update benutzen oder das Sistrix PR Tool. Peew.de hat sich auch verbessert, auch wenn es nur um 1 Platz nach oben ging bin ich ganz zufrieden. Wie siehts bei euch aus?

*Update*: Alle PageRank Werte sind nun wieder aktuell. Außerdem habe ich einen eigenen PageRank Check gebaut.

DENIC gibt die neun letzten Kurzdomains frei

2010-12-15 - kostaki 3 Comments »

Die DENIC gibt am 12. Januar 2011 ab 10:00 Uhr die letzten noch verbliebenen Kurzdomains zur Registrierung frei. Es handelt sich um die 6 Einsteller e.de, f.de, g.de, x.de, y.de und z.de, sowie die 3 zweistelligen Domains dw.de, hr.de und sr.de. Alle Domains wurden vor der Vergabe letztes Jahr mit Einstweiligen Verfügungen vor der Registrierung bewahrt und kommen nun aber doch in den Umlauf. Wieder wird von "First come – first served" gesprochen, aber diesmal wird auf ein FAX System gesetzt. Wer zur richtigen Zeit ein gut lesbares FAX versendet hat also eine Chance. Der genaue Ablaufplan und die FAX Nummern stehen in der Pressemitteilung der DENIC. Auch schon beim letzten Run auf die Kurzen, konnte man per FAX registrieren. Meines Wissens nach haben dies auch einige mit aufwändigen FAX Systemen versucht sind aber nicht zum Zug gekommen. Es bleibt also spannend wer diesmal das beste System baut und wer Schlussendlich die Domains bekommen wird.
Mein Tipp: Es werden keine Enduser sein, sondern alle 9 gehen an einen oder mehrere Domainer.

*Update 12.01.2011*:
Es geht los! Den aktuellen Stand kann man auf einer Speziellen Seite der DENIC beobachten.

*Update 20.01.2011*:
Alle Domains wurden vergeben und damit ist dann alles vergeben was die .de Zone zu bieten hat. Auf DVMag gibt es die Gewinner der Aktion. Einer der Teilnehmer hat sogar 3 der 10 Domains bekommen. Außerdem gibt es einen Artikel der beschreibt was nötig war um eine der begehrten Domains zu bekommen. .de Kurzdomainvergabe: So hats geklappt

3 Buchstaben .NET/.ORG Domains bei NameJet

2010-11-28 - kostaki No Comments »

Elliot Silver hat gerade in seinem Blog einen Artikel mit dem Namen 3 Letter .NET and .ORG Names on NameJet veröffentlicht, der mein Interesse geweckt hat. Eine Suche bei NameJet zeigte dann auch so gleich 1.826 Dreistellige Buchstaben Domains in der PreRelease Liste. Darunter echte Schmuckstücke wie lkw.org/lkw.net, pkw.org, lab.org, pet.org und bug.net. Da überrascht es wenig das alle Domains schon mindestens 10 Gebote haben und viele sogar mit mehr als dem Mindestgebot von $69. Aktuelle Spitzenreiter sind 2 dreistellige .COM Domains, gefolgt von pet.org für $3777.

Etwas verwunderlich ist das diese Auktion nicht besonders angekündigt wurde... Wie auch immer. Ich habe mir ein paar für mich interessante Domains auf meine Backorder Liste gesetzt und mal sehen was passiert. Es reicht aus das Mindestgebot von $69 abzugeben um an der anschließenden Auktion teilnehmen zu können. Wer also Interesse hat, hier die komplette Liste als Textfile.

*Update 30.11.*. Die Auktionen haben begonnen. Es scheint sich um einen Portfolio Verkauf zu handeln und alle Domains haben einen Reserve Preis, der so zwischen $1500 und $2500 zu liegen scheint. Also keine wirklichen Schnäppchen.

Spaß mit Zone Files

2010-11-26 - kostaki 2 Comments »

Zonefile Access © Henry Schmitt - Fotolia.com Vor ein paar Wochen habe ich mir die Zeit genommen die Formulare für den Verisign Zone File Access auszufüllen und abzuschicken. Heute kam dann der Anruf in dem mir meine Zugangsdaten zugeteilt wurden und 5 Minuten später hatte ich das .com und .net Zone File auf meinem Server liegen. Für mich als Domainfan/Programmierer, natürlich wie Weihnachten und Ostern zusammen und so konnte ich es kaum erwarten die Geschenke auszupacken. Nach dem Extrahieren sind die Files 6,8GB und 1,1GB groß, was nicht mehr jeder Editor laden kann, aber was kann man nun tolles damit anfangen? Erstmal ein bisschen rumstöbern.

$ cat net.zone | wc -l
31.588.624

$ cat com.zone | wc -l
210.354.660

Okay 31.588.624 Zeilen für .net und 210.354.660 Zeilen im .com Zonefile. Da viele Domains mehrere Nameserver haben, stehen diese natürlich doppelt in der Datei. Außerdem gibt es am Ende der Dateien noch einen Abschnitt mit A Records von Nameservern. Also erst mal die Domainnamen raus filtern und die Datei etwas Einschrumpfen, damit die Arbeit leichter wird. Das macht man am besten direkt auf der *NIX Console, wenn man nicht Stunden warten möchte. Hier meine Einzeilerlösung:

cat net.zone | \
awk 'NR > 43' | \
awk 'split($1, x, / /) {print x[1]}' | \
grep -v '\.' | \
sed '$d' | \
sort -u > netdomains

$ cat netdomains | wc -l
13.502.688

Erklärung: Cat liest die Datei ein und gibt sie Zeile für Zeile aus. Durch das pipen (|) kann man mehrere Befehle aneinander fügen und die stdin/stdout benutzen. Der zweite Teil gibt erst alles ab Zeile 44 aus, da am Anfang noch allgemeine Informationen über das Zonefile stehen. Dann wird die Zeile an Hand des ersten Leerzeichens geteilt und nur der erste Teil wird weiter benutzt (dort steht der Domainname). Das grep -v entfernt alle Zeilen in denen ein Punkt vorkommt (das sind die Nameserverentries am Ende). sed '$d' entfernt dann noch die letzte Zeile und sort -u entfernt alle doppelten Zeilen und sortiert die Liste.

Das läuft dann 2 Minuten 30 Sekunden lang und am Ende hat man alle .net Domainnamen in einer extra Datei. Das sort -u dauert am längsten. Wenn man das nicht braucht, kann man die Ausführung um ca. 2 Minuten verkürzen. Geht sicher noch einfacher, aber ich bin auch nur ein awk Anfänger. Tipps sind Willkommen!

Hier der Aufruf für das .com Zonefile. Mit sort -u läuft dies 18 Minuten 53 Sekunden und ohne 5 Minuten 20 Sekunden.

cat com.zone | \
awk 'NR > 28' | \
awk 'split($1, x, / /) {print x[1]}' | \
grep -v '\.' | \
sed '$d' | \
sort -u > comdomains

$ cat comdomains | wc -l
91.096.948

Zurück zur Frage vom Anfang. Was macht man damit nun?

Die Daten sind super um Statistiken zu erstellen. Wie viele Domains wurden neu registriert? Wie viele wurden gelöscht? Man kann seine eigene Pending Delete Liste erstellen in dem man die aus dem Zonefile verschwundenen Domains näher betrachtet. Schaut man sich nur den Aufwand an den man bei .de Domains betreiben muss um überhaupt an diese Daten zu kommen, dann sieht man den Nutzen sehr schnell. Außerdem ist es schon sehr spannend, was Leute so alles registrieren.

Eine der ersten Funktionen die ich bauen werde ist eine Lösung um die Dateien täglich abzurufen, sie zu parsen und in eine MySQL Datenbank zu schreiben um sie weiter verwerten zu können. Dann stehen sicher die ersten Statistiken an. Stay tuned.

Previous Entries Next Entries

Peew.de