Tag Archives: Internet

Allgemein

bots, spider, crawler scannen Webseiten

bots, spider und crawler erfassen alle Webseiten

So langsam gehen mir die diversen bots und co. ganz schön auf den Geist. Dabei handelt es sich nicht nur um bots von grossen Suchmaschinen, die den Inhalt der Webseite den Anwendern zur Verfügung stellen. Das Google, Bing und Yahoo regelmäßig auf meinen Seiten vorbeischauen ist normal und natürlich auch erwünscht. Das aber inzwischen jeder kleine und große Seo-Anbieter seine eigenen bots im Internet suchen läßt geht mir, wie bereits gesagt, langsam auf den Geist.

Google bietet einige Tools, mit denen die Optimierer ihre Arbeit leichter machen konnten, inzwischen nicht mehr an. Zusätzlich verbirgt Google den Suchbegriff, mit dem der Anwender auf meine Seite gelangt ist. Damit kann ich keine Rückschlüsse mehr ziehen, welche Stichworte am häufigsten gesucht werden. Das aber inzwischen jeder kleine und große – halt, hier wiederhole ich mich ja…

Ich verstehe den Gedanken, der hinter der Maßnahme steht einen eigenen bot auf die Reise durch das Internet zu schicken. Man wird unabhängig, kann die ausgehenden Links von den Webseiten speichern und ansehen, wer durch welche Webseiten verlinkt ist. Aber nicht alle bots legen offen, wer hinter diesen crawlern steckt.

Analyse des Logfiles

Als erstes steht die Analyse des Logfiles, das eigentlich jeder Webserver anlegt. Einfach ist es bei einem Apache-Webserver, andere Webserver verstecken ihre Logfiles schon einmal. Wird der Webserver auf einem eigenen Rechner gehostet, muss evtl. noch eine Zeile in ein Konfigurationsscript eingefügt werden, damit eine Aufzeichnung der Zugriffe stattfindet. Zur Auswertung stehen eine Reihe von Tools kostenlos zur Verfügung. Ich lade mir die Logfiles von meinem Hoster in regelmäßigen Abständen herunter und werte mit dem Tool HttpLogStat aus.

In den User-Agents stehen oft Angaben zum bot:

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

Das sind die Guten 😉

Natürlich möchte ich auch, dass ganz viele Menschen diesen Blog besuchen und die Beiträge lesen, deshalb lasse ich auch gerne RSS-Crawler meine Beiträge scannen:

Feedbin feed-id:594907
feedworker/1.0 crawler (+http://www.bloggerei.de)

Suchmaschinen

Kleinen neuen Suchmaschinen lasse ich ebenfalls freien Zutritt:

Mozilla/5.0 (compatible; DeuSu/5.0.2; +https://deusu.de/robot.html)
Mozilla/5.0 (compatible; Qwantify/2.3w; +https://www.qwant.com/)/2.3w

Und kommerzielle Zugriffe sind ebenfalls erlaubt, solange ich einen freien Zutritt für eigene Auswertungen erhalte.

Böse bots

Daneben gibt es allerdings eine große Anzahl bots, die sich sehr bedeckt halten:

bots flamingosearch.comFlamingo_SearchEngine (+http://www.flamingosearch.com/bot)

Diese Webseite steht zum Verkauf und es gibt keinen Hinweis über den Zweck des crawlers. Dabei ist der crawler ziemlich aggressiv und versucht sehr häufig meine Seiten zu scannen.

ebenso verhält es sich mit

bots seoscanners.netMozilla/5.0 (compatible; seoscanners.net/1; +spider@seoscanners.net)

Diese Seite wird auf GoDaddy geparkt.

Dann gibt es noch diverse andere Abfragen, die sofort blockiert werden. Keine Ahnung, was diese bots suchen und welche internen Auswertungen dahinter stecken. Das ist mir ehrlich gesagt auch völlig egal.

Mozilla/5.0 eCairn-Grabber/1.0 (+http://ecairn.com/grabber)
Mozilla/5.0 (compatible; MojeekBot/0.6; +https://www.mojeek.com/bot.html)
magpie-crawler/1.1 (U; Linux amd64; en-GB; +http://www.brandwatch.net)

Liebe SEOs und sonstigen bots Betreiber: wenn Google sich nicht mehr in die Karten sehen lassen will, muss jetzt ja nicht jeder seinen eigenen bot durch das Internet schicken. Tut euch doch einmal zusammen und steckt etwas Geld in einen eigenen unabhängigen crawler von dem jeder Teilnehmer die Daten abfragen kann. Und lasst die kleinen Webseitenbetreiber wenigstens 20 Zugriffe pro Stunde kostenlos ausführen. Damit währe doch jedem geholfen?

Vielleicht reicht es tatsächlich in einigen Jahren für eine Suchmaschine, die den Großen etwas Traffic abnehmen kann und damit dann wieder Gled abwirft.

Auf eure Meinungen bin ich gespannt.

Freeware

Die besten freien Antivirenprogramme

Jeder PC, der mit dem Internet verbunden ist benötigt ein Antivirenprogramm. Und es gibt viele kostenlose Programme, die jeder nutzen kann. Viele große Firmen, die kommerzielle Antivirus Programme anbieten haben ebenfalls eine kostenlose Alternative, die ebenfalls vor Angriffen aus dem Internet schützt. Das Antivirenprogramm muss ständig aktiv sein ohne den Benutzer durch ständige Pop-ups zu nerven und ohne den Prozessor und den Speicher zu sehr zu belasten.

1. Avira Antivirus Free

Schnell, zuverlässig und ständig im Hintergrund bereit. Für mich ist Avira das beste freie Antivirenprogramm auf dem Markt.

Das Programm benötigt nicht viele Ressourcen auf dem PC, nervt den Anwender nicht mit ständigen falschen Warnungen und macht den PC nicht langsamer durch den Hintergrundscan. Es werden keine unnötigen und nicht gewünschte zusätzliche Tools installiert, wie zum Beispiel ein sicherer Internetbrowser, VPN und anderes. Trotzdem lassensich diese Tools nutzen, wenn man sie benötigt. Sie sind nur einen Mausklick entfernt.

Download: Avira Free Antivirus

2. AVG AntiVirus Free

Obwohl AVG bei der Installation am liebsten alle Tools auf dem PC installieren möchte, ist AVG Antivirus ein Programm mit einer klaren Oberfläche und sehr schnell im erkennen neuer Viren. In Verbindung mit einem Smartphone kann man ohne am PC zu sitzen einen Scan und sogar eine Bereinigung durchführen.

Download: AVG Antivirus Free

3. Panda Free Antivirus

Das Programm nutzt die Cloud um die Last auf dem PC zu verringern. Damit will Panda das Programm sein, dass die Ressourcen des PC am wenigsten belastet. Arbeit, die normalerweise auf dem PC erledigt wird, wird in die Cloud ausgelagert. Allerdings werden dabei Daten vom PC übertragen und dabei bin ich immer skeptisch. Panda möchte bei der Installation auch gerne die Startseite des Internetbrowsers übernehmen, deshalb aufmerksam die zusätzlichen Tools abhaken.

Download: Panda Free Antivirus

4. Comodo Free Antivirus

Comodo lehnt standardmäßig jeden Zugriff von Programmen auf das Internet ab, der nicht vom Anwender freigegeben ist. Wird der PC infiziert ist es also in erster Linie ein Fehler des Anwenders. Comodo erkennt nahezu perfekt alle neuen Viren und schützt den PC effektiv. Comodo enthält einen Game Modus, der automatisch eigene Aktivitäten einschränkt, wenn man das Maximum an Kraft der Machine benötigt.

Download: Comodo Free Antivirus

5. Avast Free Antivirus

Ein solides Antivirenprogramm, auch wenn kürzlich der Konkurrent AVG aufgekauft wurde. Beide Linien sollen parallel weiter existieren. Auch wenn es etwas mehr Ressource als andere Programme beansprucht, macht es den PC nicht spürbar langsamer. Enthalten ist die Avast SafeZone, ein sicherer Internetbrowser und ein integrierter Passwortmanager.

Download: Avast Free Antivirus

Allgemein

Netflix ermöglicht Filme und TV offline

Mit Netflix Filme und TV-Sendungen offline ansehen

Viele Menschen streamen ihre Lieblingssendungen und Filme heutzutage mit Netflix. Der Service mit mehreren Millionen Anwendern ist auf allen gängigen Plattformen verfügbar. Das macht es für die Benutzer einfach, die Sendungen überall auf jedem PC, Smartphone oder Tablet anzusehen. Solange das Internet verfügbar ist.

Das ändert sich im Dezember, ab jetzt ist es für die Benutzer von Netflix ebenso möglich die Sendungen offline ohne Internetverbindung anzusehen. Die Benutzer können ab sofort ohne zusätzliche Kosten alle Inhalte herunterladen.

Dazu ist auf der Detailseite des Films oder der TV-Sendung ein neuer Button für den Download vorhanden.

Dieser Download-Button ist allerdings nur in den Netflix-Apps für Android und iOS verfügbar. Es gibt bisher noch keinen Hinweis darauf, das der Service auch auf anderen Plattformen wie PC angeboten wird.

Natürlich muss der Anwender darauf achten, dass der Download fertig gestellt ist solange Zugriff auf eine Internetverbindung vorhanden ist. Das kann verständlicherweise lange dauern und ist abhängig von der Qualität der Internetverbindung. Zusätzlich muss genügend freier Speicher vorhanden sein um den Film oder die Serie auf dem Smartphone oder Tablet komplett zu speichern.

Also starten Sie ihren Download frühzeitig und versichern Sie sich, dass der Download nicht unterbrochen wird. Eine Wiederaufnahme des Downloads ist nicht vorgesehen.

Allgemein

Verschlüsselung wichtiger Daten

Verschlüsselung der eigenen Daten muss nicht kompliziert sein, es kommt auf das richtige Verschlüsselungsprogramm an. Sorgen Sie dafür, dass ihre Daten in der Cloud optimal gesichert sind. Dazu stelle ich Ihnen einige Verschlüsselungsprogramme vor.

Verschlüsselung der wichtigen Daten vor Upload in die Cloud

Verschlüsselung

Dabei stehen die Programme im Vordergrund, die auf dem eigenen PC benutzt werden können. Was nutzt die sicherste Cloud, wenn ich meine Daten zuerst über eine unsichere Verbindung im Internet schicken muss und sind meine Daten in der Cloud tatsächlich sicher?

VeraCrypt (Windows / Mac / Linux)

Veracrypt ist eine freie Software zur Verschlüsselung und basiert auf Truecrypt. VeraCrypt hat erweiterte Sicherheitsalgorythmen die es gegen brute-force Attacken noch besser schützen sollen. Zusätzlich sollen viele Schwachstellen und Sicherheitslücken gegenüber Truecrypt behoben sein. Das Tool wird ständig weiterentwickelt und Sicherheitsupdates werden schnell ausgeliefert.

AxCrypt (Windows)

AxCrypt ist ein freies open source und GNU GPL-lizensiertes Verschlüsselungs-Tool für Windows, das simpel, effektiv und einfach zu benutzen ist. Es ist in der Windows-Shell integriert und Files können durch einfachen Rechtsklick verschlüsselt werden. Es sind auch zeitlich konfigurierbare Verschlüsselungen möglich. Ebenso können ganze Ordner oder mehrere ausgewählte Dateien verschlüsselt werden. Es ist ein reines File-Verschlüsselungs-Tool, Partitionen oder Festplatten können damit nicht verschlüsselt werden.

GNU Privacy Guard (Windows / Mac / Linux)

GNU Privacy Guard (GnuPG) ist ein open source fork von Pretty Good Privacy (PGP). Diese Version ist command line  orientiert, es gibt aber genug Grafische Oberflächen (GUI) für den einfachen Umgang. Die offizielle Version kann alles verschlüsseln, von der E-Mail über einzelne Files bis zur kompletten Festplatte. Selbst externe Laufwerke lassen sich mit diesem Tool schützen.

7-Zip (Windows)

7-Zip ist eigentlich ein Pack- und Archivprogramm und mein Favorit für Windows. Es komprimiert und organisiert Dateien für platzsparende Archive oder um sie über das Internet zu versenden. Es ist aber ebenso ein hervoragendes Verschlüsselungs-Tool und kann mehrere Dateien oder die gesamte Platte schützen. Es ist auch für kommerzielle Anwendungen komplett frei und kostenlos. 7-Zip unterstützt selbstentpackende ausführbare Dateien die nach Eingabe des Passwortes entpackt werden. 7-Zip ist in der Windows-Shell integriert und kann damit durch einen Klick aufgerufen werden. Eine mächtige Anwendung ist auch auf der command line möglich.

7-Zip ist schnell, flexibel, kostenlos und einfach zu benutzen. Ideal und Dateien verschlüsselt in der Cloud abzulegen.

Freeware

Firefox in Version 50

Firefox Version 50

Um die Präsenz des Microsoft Internet Explorers etwas entgegenzusetzen wurde der Internetbrowser Firefox ins Leben gerufen. 2016 erscheint nun die Version 50.

Hinter Firefox stehen keine großen Konzerne wie Microsoft oder Google sondern eine gemeinnützige Stiftung. Das Ziel ist, ein freies und offenen Internet zu gewährleisten. Hier stehen die Nutzerinteressen im Vordergrund und das Projekt wird bis heute engagiert vorangetrieben.

Viele Neuerungen fliessen in diese Version ein. Das Browsen mit mehreren Tabs ist schon länger Bestandteil des Browsers, jetzt kommt eine noch bessere Bedienbarkeit hinzu. Die Synchronisation mit dem integrierten Dienst kann jetzt auch Webseitenlinks an andere Geräte weiterleiten. Ein Artikel auf dem Smartphone kann einfach auf den PC weitergeleitet werden.

Über Add-On’s läßt sich der Browser fast beliebig erweitern.

Die neue Version glänzt nicht mit wirklichen Highlights, die Neuerungen liegen eher in den Details. Viele Änderungen sind nur für wenige Anwender nützlich. Z.B.: Tabs direkt auf anderen Geräten zu öffnen spricht ausschließlich Nutzer mit aktiviertem Firefox-Sync an.

Allgemein

Internet

Im Internet gefunden werden

  • Ihr individueller, professioneller Auftritt im Internet

Nutzen Sie das Internet um mehr neue Kunden zu erreichen!

Unter Ihrer Internet-Adresse sind Sie weltweit erreichbar.
Ihr Geschäft ist unabhängig von Öffnungszeiten: 24 Stunden am Tag, 365 Tage pro Jahr Werbung und Erreichbarkeit im Internet.

Ihre Internetpräsenz ist Ihr Aushängeschild und Ihre virtuelle Visitenkarte. Nutzen Sie die Möglichkeiten dieses Mediums voll aus.

Ich kann Sie dabei unterstützen, eine individuelle Internetpräsenz zu erstellen. Pflege und Übernahme einer bestehenden Webseite sind selbstverständlich möglich.

Sie sind mit ihrem Webauftritt nicht mehr zufrieden?

Ich benutze überwiegend vorhandene Tools, und habe mit diversen CMS und WordPress die besten Erfahrungen gemacht. Vorhandene Daten können oft übernommen werden, das technische Know-How finden Sie hier.

Ich:

  • berate Sie umfassend und Herstellerneutral
  • analysiere Ihre Prozesse und bieten Ihnen Lösungen
  • gestalte professionelle Web-Auftritte nach Ihren Vorstellungen
  • leite Projekte, die Sie nicht Inhouse leiten können
  • modelliere/optimiere Datenbanken
  • kann Ihren Zielen zum Erfolg verhelfen

arbeite mit MS SQL-Servern, Oracle, MySQL, IIS, Apache, HTML, ASP, PHP, ASP.NET, VS.NET, Visual Basic, C# und den gängigen Office-Produkten.