Allgemein

bots, spider, crawler scannen Webseiten

bots, spider und crawler erfassen alle Webseiten

So langsam gehen mir die diversen bots und co. ganz schön auf den Geist. Dabei handelt es sich nicht nur um bots von grossen Suchmaschinen, die den Inhalt der Webseite den Anwendern zur Verfügung stellen. Das Google, Bing und Yahoo regelmäßig auf meinen Seiten vorbeischauen ist normal und natürlich auch erwünscht. Das aber inzwischen jeder kleine und große Seo-Anbieter seine eigenen bots im Internet suchen läßt geht mir, wie bereits gesagt, langsam auf den Geist.

Google bietet einige Tools, mit denen die Optimierer ihre Arbeit leichter machen konnten, inzwischen nicht mehr an. Zusätzlich verbirgt Google den Suchbegriff, mit dem der Anwender auf meine Seite gelangt ist. Damit kann ich keine Rückschlüsse mehr ziehen, welche Stichworte am häufigsten gesucht werden. Das aber inzwischen jeder kleine und große – halt, hier wiederhole ich mich ja…

Ich verstehe den Gedanken, der hinter der Maßnahme steht einen eigenen bot auf die Reise durch das Internet zu schicken. Man wird unabhängig, kann die ausgehenden Links von den Webseiten speichern und ansehen, wer durch welche Webseiten verlinkt ist. Aber nicht alle bots legen offen, wer hinter diesen crawlern steckt.

Analyse des Logfiles

Als erstes steht die Analyse des Logfiles, das eigentlich jeder Webserver anlegt. Einfach ist es bei einem Apache-Webserver, andere Webserver verstecken ihre Logfiles schon einmal. Wird der Webserver auf einem eigenen Rechner gehostet, muss evtl. noch eine Zeile in ein Konfigurationsscript eingefügt werden, damit eine Aufzeichnung der Zugriffe stattfindet. Zur Auswertung stehen eine Reihe von Tools kostenlos zur Verfügung. Ich lade mir die Logfiles von meinem Hoster in regelmäßigen Abständen herunter und werte mit dem Tool HttpLogStat aus.

In den User-Agents stehen oft Angaben zum bot:

Mozilla/5.0 (compatible; Googlebot/2.1; +http://www.google.com/bot.html)
Mozilla/5.0 (compatible; bingbot/2.0; +http://www.bing.com/bingbot.htm)
Mozilla/5.0 (compatible; Yahoo! Slurp; http://help.yahoo.com/help/us/ysearch/slurp)

Das sind die Guten 😉

Natürlich möchte ich auch, dass ganz viele Menschen diesen Blog besuchen und die Beiträge lesen, deshalb lasse ich auch gerne RSS-Crawler meine Beiträge scannen:

Feedbin feed-id:594907
feedworker/1.0 crawler (+http://www.bloggerei.de)

Suchmaschinen

Kleinen neuen Suchmaschinen lasse ich ebenfalls freien Zutritt:

Mozilla/5.0 (compatible; DeuSu/5.0.2; +https://deusu.de/robot.html)
Mozilla/5.0 (compatible; Qwantify/2.3w; +https://www.qwant.com/)/2.3w

Und kommerzielle Zugriffe sind ebenfalls erlaubt, solange ich einen freien Zutritt für eigene Auswertungen erhalte.

Böse bots

Daneben gibt es allerdings eine große Anzahl bots, die sich sehr bedeckt halten:

bots flamingosearch.comFlamingo_SearchEngine (+http://www.flamingosearch.com/bot)

Diese Webseite steht zum Verkauf und es gibt keinen Hinweis über den Zweck des crawlers. Dabei ist der crawler ziemlich aggressiv und versucht sehr häufig meine Seiten zu scannen.

ebenso verhält es sich mit

bots seoscanners.netMozilla/5.0 (compatible; seoscanners.net/1; +spider@seoscanners.net)

Diese Seite wird auf GoDaddy geparkt.

Dann gibt es noch diverse andere Abfragen, die sofort blockiert werden. Keine Ahnung, was diese bots suchen und welche internen Auswertungen dahinter stecken. Das ist mir ehrlich gesagt auch völlig egal.

Mozilla/5.0 eCairn-Grabber/1.0 (+http://ecairn.com/grabber)
Mozilla/5.0 (compatible; MojeekBot/0.6; +https://www.mojeek.com/bot.html)
magpie-crawler/1.1 (U; Linux amd64; en-GB; +http://www.brandwatch.net)

Liebe SEOs und sonstigen bots Betreiber: wenn Google sich nicht mehr in die Karten sehen lassen will, muss jetzt ja nicht jeder seinen eigenen bot durch das Internet schicken. Tut euch doch einmal zusammen und steckt etwas Geld in einen eigenen unabhängigen crawler von dem jeder Teilnehmer die Daten abfragen kann. Und lasst die kleinen Webseitenbetreiber wenigstens 20 Zugriffe pro Stunde kostenlos ausführen. Damit währe doch jedem geholfen?

Vielleicht reicht es tatsächlich in einigen Jahren für eine Suchmaschine, die den Großen etwas Traffic abnehmen kann und damit dann wieder Gled abwirft.

Auf eure Meinungen bin ich gespannt.

OpenSource

LibreOffice: eine gute Alternative zu Microsoft Office

LibreOffice als Alternative zu Microsoft Office

LibreOffice mit Tools für Texte, Präsentationen, Tabellenkalkulation, Grafiken und Charts. Mit der klaren Oberfläche und den mächtigen Werkzeuge werden Sie Ihre Kreativität entfalten und Ihre Produktivität steigern.

LibreOffice ist eine komplettes Programmpaket mit Officesoftware die einfach Microsoft Office auf Ihrem PC ersetzen kann. Sie enthält alle Programme für Textverarbeitung, Tabellenkalkulation, Präsentationen, Datenbanken, Flowcharts und ist als Open Source komplett kostenlos. Den Sourcecode kann sich jeder herunterladen und an der weiteren Entwicklung teilhaben.

Das Programm ist voll kompatibel mit allen Fileformaten von Office. Es gibt keine Probleme beim öffnen und bearbeiten von Office-Dokumenten. Die Programmierer haben dafür gesorgt, dass die Dokumente auch wieder im Officeformat gespeichert werden können.

Das freie Officepaket ist eine der besten Programme, die man heutzutage herunterladen kann. Es wird bereits seit einigen Jahren entwickelt und es gibt eine aktive Community, die Verbesserungen und Fehlerbeseitigung sehr schnell mit regelmäßigen Updates herausgibt. Neue Funktionen kann man sich hier ansehen.

Im Programmpaket von Libre-Office gibt es sehr ähnliche Teile wie im Office von Microsoft, der Lernaufwand und die Umgewöhnungsphase sind damit sehr kurz. Alles funktioniert wie gewohnt, sogar die Tastenkürzel sind die Gleichen. Damit sollte jeder schnell zu befriedigenden Erfolgen kommen.

Für LibreOffice gibt es viele Erweiterungen, die separat heruntergeladen werden können. Viele Wörterbücher für verschiedene Sprachen, Vorlagen für Briefe und Tabellen, Cliparts und erweiterete Features wie OCR.

Wer ein neues Officepaket für einen neuen PC benötigt, sollte sich auf alle Fälle LibreOffice ansehen. Ich bin sicher Sie werden positiv überrascht sein.

Zur Downloadseite.

Downloads&Updates Freeware

Ashampoo Burning Studio kostenlos

Ashampoo Burning Studio 2017 kostenlos herunterladen

Ashampoo Burning Studio 2017 ist eine mächtige Brennsoftware die verschiedenste Bereiche abdeckt.

Ob Daten, Musik oder Videos, alles läßt sich sehr einfach und intuitiv mit diesem Programm auf CDs, DVDs oder Blu-ray brennen. Darüber hinaus gibt es eine Backup-Funktion die auch für externe Geräte wie Flashdrives, USB-Sticks und Smartphones genutzt werden kann.

Die Datensicherung kann auf einer oder mehreren CDs, DVDs oder Blu-ray Discs gespeichert werden. Mit dem sog. Disc-Spanning werden auch große Datenmengen auf mehrere Rohlinge verteilt, praktisch z.B. für Medien-Sammlungen. Auch eine dauerhafte Archivierung auf M-DISC ist enthalten.

Ein integrierter Covereditor hilft beim Designen von individuellen Covern und Booklets und unterstützt mit vielen fertigen Vorlagen für schnelle Erfolge.

Rippen / Brennen von CD-, DVD- oder Blu-ray Discs und das Erstellen von Audio CDs und MP3/WMA Discs ist natürlich ebenfalls möglich.

Ein upgrade auf Ashampoo Burning Studio 18 ist von dieser Version möglich.

Download hier.

Allgemein

Google Play Store bereinigen

Ungenutzte Smartphones und Tablets aus dem Google Play account löschen

Benutzt man Google Play auf dem Computer, kann man Apps auf alle Geräte installieren die man benutzt. Geht man auf „Installieren“, kann man aus seinen Geräten wählen auf welchem die Apps installiert werden sollen.

Mit der Zeit hat man sicher eine Menge Android Geräte benutzt die alle in der Liste auftauchen obwohl einige davon bereits entsorgt sind. Warum also nicht die alten Geräte aus der Liste entfernen, das macht das Leben etwas einfacher.

Benutzt man Google Play auf seinem Computer sieht man in den Einstellungen „Meine Geräte“. Das funktioniert allerdings nur auf dem PC, vom Smartphone oder Tablet lassen sich die Einstellungen nicht anzeigen. Möglicherweise werden nicht zu allen Geräten die Namen richtig angezeigt, bei einigen wird dort nur „Unbekanntes Gerät“ angezeigt.

Google Play

Google listet in der Anzeige den Hersteller und das Modell des Gerätes auf. Ist das für einen selbst nicht Hilfreich, läßt sich das hier in der Anzeige bearbeiten und man vergibt einen eindeutigen Namen für sein Gerät.

In dieser Liste gibt es aber noch mehr hilfreiche Einstellungen für die Anzeige im Play Store.

Geräte die nicht mehr benutzt werden, lassen sich durch den Haken bei „In Menüs anzeigen“ aus der Liste entfernen. Geräte komplett aus dieser Liste zu entfernen ist leider immer noch nicht möglich. Damit stehen die unmarkierten Geräte bei der nächsten Auswahl zu installierender Apps nicht mehr zur Verfügung.

Freeware

Die besten freien Antivirenprogramme

Jeder PC, der mit dem Internet verbunden ist benötigt ein Antivirenprogramm. Und es gibt viele kostenlose Programme, die jeder nutzen kann. Viele große Firmen, die kommerzielle Antivirus Programme anbieten haben ebenfalls eine kostenlose Alternative, die ebenfalls vor Angriffen aus dem Internet schützt. Das Antivirenprogramm muss ständig aktiv sein ohne den Benutzer durch ständige Pop-ups zu nerven und ohne den Prozessor und den Speicher zu sehr zu belasten.

1. Avira Antivirus Free

Schnell, zuverlässig und ständig im Hintergrund bereit. Für mich ist Avira das beste freie Antivirenprogramm auf dem Markt.

Das Programm benötigt nicht viele Ressourcen auf dem PC, nervt den Anwender nicht mit ständigen falschen Warnungen und macht den PC nicht langsamer durch den Hintergrundscan. Es werden keine unnötigen und nicht gewünschte zusätzliche Tools installiert, wie zum Beispiel ein sicherer Internetbrowser, VPN und anderes. Trotzdem lassensich diese Tools nutzen, wenn man sie benötigt. Sie sind nur einen Mausklick entfernt.

Download: Avira Free Antivirus

2. AVG AntiVirus Free

Obwohl AVG bei der Installation am liebsten alle Tools auf dem PC installieren möchte, ist AVG Antivirus ein Programm mit einer klaren Oberfläche und sehr schnell im erkennen neuer Viren. In Verbindung mit einem Smartphone kann man ohne am PC zu sitzen einen Scan und sogar eine Bereinigung durchführen.

Download: AVG Antivirus Free

3. Panda Free Antivirus

Das Programm nutzt die Cloud um die Last auf dem PC zu verringern. Damit will Panda das Programm sein, dass die Ressourcen des PC am wenigsten belastet. Arbeit, die normalerweise auf dem PC erledigt wird, wird in die Cloud ausgelagert. Allerdings werden dabei Daten vom PC übertragen und dabei bin ich immer skeptisch. Panda möchte bei der Installation auch gerne die Startseite des Internetbrowsers übernehmen, deshalb aufmerksam die zusätzlichen Tools abhaken.

Download: Panda Free Antivirus

4. Comodo Free Antivirus

Comodo lehnt standardmäßig jeden Zugriff von Programmen auf das Internet ab, der nicht vom Anwender freigegeben ist. Wird der PC infiziert ist es also in erster Linie ein Fehler des Anwenders. Comodo erkennt nahezu perfekt alle neuen Viren und schützt den PC effektiv. Comodo enthält einen Game Modus, der automatisch eigene Aktivitäten einschränkt, wenn man das Maximum an Kraft der Machine benötigt.

Download: Comodo Free Antivirus

5. Avast Free Antivirus

Ein solides Antivirenprogramm, auch wenn kürzlich der Konkurrent AVG aufgekauft wurde. Beide Linien sollen parallel weiter existieren. Auch wenn es etwas mehr Ressource als andere Programme beansprucht, macht es den PC nicht spürbar langsamer. Enthalten ist die Avast SafeZone, ein sicherer Internetbrowser und ein integrierter Passwortmanager.

Download: Avast Free Antivirus

Allgemein

Netflix ermöglicht Filme und TV offline

Mit Netflix Filme und TV-Sendungen offline ansehen

Viele Menschen streamen ihre Lieblingssendungen und Filme heutzutage mit Netflix. Der Service mit mehreren Millionen Anwendern ist auf allen gängigen Plattformen verfügbar. Das macht es für die Benutzer einfach, die Sendungen überall auf jedem PC, Smartphone oder Tablet anzusehen. Solange das Internet verfügbar ist.

Das ändert sich im Dezember, ab jetzt ist es für die Benutzer von Netflix ebenso möglich die Sendungen offline ohne Internetverbindung anzusehen. Die Benutzer können ab sofort ohne zusätzliche Kosten alle Inhalte herunterladen.

Dazu ist auf der Detailseite des Films oder der TV-Sendung ein neuer Button für den Download vorhanden.

Dieser Download-Button ist allerdings nur in den Netflix-Apps für Android und iOS verfügbar. Es gibt bisher noch keinen Hinweis darauf, das der Service auch auf anderen Plattformen wie PC angeboten wird.

Natürlich muss der Anwender darauf achten, dass der Download fertig gestellt ist solange Zugriff auf eine Internetverbindung vorhanden ist. Das kann verständlicherweise lange dauern und ist abhängig von der Qualität der Internetverbindung. Zusätzlich muss genügend freier Speicher vorhanden sein um den Film oder die Serie auf dem Smartphone oder Tablet komplett zu speichern.

Also starten Sie ihren Download frühzeitig und versichern Sie sich, dass der Download nicht unterbrochen wird. Eine Wiederaufnahme des Downloads ist nicht vorgesehen.

Allgemein

Verschlüsselung wichtiger Daten

Verschlüsselung der eigenen Daten muss nicht kompliziert sein, es kommt auf das richtige Verschlüsselungsprogramm an. Sorgen Sie dafür, dass ihre Daten in der Cloud optimal gesichert sind. Dazu stelle ich Ihnen einige Verschlüsselungsprogramme vor.

Verschlüsselung der wichtigen Daten vor Upload in die Cloud

Verschlüsselung

Dabei stehen die Programme im Vordergrund, die auf dem eigenen PC benutzt werden können. Was nutzt die sicherste Cloud, wenn ich meine Daten zuerst über eine unsichere Verbindung im Internet schicken muss und sind meine Daten in der Cloud tatsächlich sicher?

VeraCrypt (Windows / Mac / Linux)

Veracrypt ist eine freie Software zur Verschlüsselung und basiert auf Truecrypt. VeraCrypt hat erweiterte Sicherheitsalgorythmen die es gegen brute-force Attacken noch besser schützen sollen. Zusätzlich sollen viele Schwachstellen und Sicherheitslücken gegenüber Truecrypt behoben sein. Das Tool wird ständig weiterentwickelt und Sicherheitsupdates werden schnell ausgeliefert.

AxCrypt (Windows)

AxCrypt ist ein freies open source und GNU GPL-lizensiertes Verschlüsselungs-Tool für Windows, das simpel, effektiv und einfach zu benutzen ist. Es ist in der Windows-Shell integriert und Files können durch einfachen Rechtsklick verschlüsselt werden. Es sind auch zeitlich konfigurierbare Verschlüsselungen möglich. Ebenso können ganze Ordner oder mehrere ausgewählte Dateien verschlüsselt werden. Es ist ein reines File-Verschlüsselungs-Tool, Partitionen oder Festplatten können damit nicht verschlüsselt werden.

GNU Privacy Guard (Windows / Mac / Linux)

GNU Privacy Guard (GnuPG) ist ein open source fork von Pretty Good Privacy (PGP). Diese Version ist command line  orientiert, es gibt aber genug Grafische Oberflächen (GUI) für den einfachen Umgang. Die offizielle Version kann alles verschlüsseln, von der E-Mail über einzelne Files bis zur kompletten Festplatte. Selbst externe Laufwerke lassen sich mit diesem Tool schützen.

7-Zip (Windows)

7-Zip ist eigentlich ein Pack- und Archivprogramm und mein Favorit für Windows. Es komprimiert und organisiert Dateien für platzsparende Archive oder um sie über das Internet zu versenden. Es ist aber ebenso ein hervoragendes Verschlüsselungs-Tool und kann mehrere Dateien oder die gesamte Platte schützen. Es ist auch für kommerzielle Anwendungen komplett frei und kostenlos. 7-Zip unterstützt selbstentpackende ausführbare Dateien die nach Eingabe des Passwortes entpackt werden. 7-Zip ist in der Windows-Shell integriert und kann damit durch einen Klick aufgerufen werden. Eine mächtige Anwendung ist auch auf der command line möglich.

7-Zip ist schnell, flexibel, kostenlos und einfach zu benutzen. Ideal und Dateien verschlüsselt in der Cloud abzulegen.

Freeware

Firefox in Version 50

Firefox Version 50

Um die Präsenz des Microsoft Internet Explorers etwas entgegenzusetzen wurde der Internetbrowser Firefox ins Leben gerufen. 2016 erscheint nun die Version 50.

Hinter Firefox stehen keine großen Konzerne wie Microsoft oder Google sondern eine gemeinnützige Stiftung. Das Ziel ist, ein freies und offenen Internet zu gewährleisten. Hier stehen die Nutzerinteressen im Vordergrund und das Projekt wird bis heute engagiert vorangetrieben.

Viele Neuerungen fliessen in diese Version ein. Das Browsen mit mehreren Tabs ist schon länger Bestandteil des Browsers, jetzt kommt eine noch bessere Bedienbarkeit hinzu. Die Synchronisation mit dem integrierten Dienst kann jetzt auch Webseitenlinks an andere Geräte weiterleiten. Ein Artikel auf dem Smartphone kann einfach auf den PC weitergeleitet werden.

Über Add-On’s läßt sich der Browser fast beliebig erweitern.

Die neue Version glänzt nicht mit wirklichen Highlights, die Neuerungen liegen eher in den Details. Viele Änderungen sind nur für wenige Anwender nützlich. Z.B.: Tabs direkt auf anderen Geräten zu öffnen spricht ausschließlich Nutzer mit aktiviertem Firefox-Sync an.

Allgemein

Internet

Im Internet gefunden werden

  • Ihr individueller, professioneller Auftritt im Internet

Nutzen Sie das Internet um mehr neue Kunden zu erreichen!

Unter Ihrer Internet-Adresse sind Sie weltweit erreichbar.
Ihr Geschäft ist unabhängig von Öffnungszeiten: 24 Stunden am Tag, 365 Tage pro Jahr Werbung und Erreichbarkeit im Internet.

Ihre Internetpräsenz ist Ihr Aushängeschild und Ihre virtuelle Visitenkarte. Nutzen Sie die Möglichkeiten dieses Mediums voll aus.

Ich kann Sie dabei unterstützen, eine individuelle Internetpräsenz zu erstellen. Pflege und Übernahme einer bestehenden Webseite sind selbstverständlich möglich.

Sie sind mit ihrem Webauftritt nicht mehr zufrieden?

Ich benutze überwiegend vorhandene Tools, und habe mit diversen CMS und WordPress die besten Erfahrungen gemacht. Vorhandene Daten können oft übernommen werden, das technische Know-How finden Sie hier.

Ich:

  • berate Sie umfassend und Herstellerneutral
  • analysiere Ihre Prozesse und bieten Ihnen Lösungen
  • gestalte professionelle Web-Auftritte nach Ihren Vorstellungen
  • leite Projekte, die Sie nicht Inhouse leiten können
  • modelliere/optimiere Datenbanken
  • kann Ihren Zielen zum Erfolg verhelfen

arbeite mit MS SQL-Servern, Oracle, MySQL, IIS, Apache, HTML, ASP, PHP, ASP.NET, VS.NET, Visual Basic, C# und den gängigen Office-Produkten.

Downloads&Updates

Virenscanner

Avast Free Antivirus 2015

bietet den Schutz für Deinen Computer, der Dich vor Hackern und Malware schützt. Neben dem besten Antivirus- und Malwareschutz die möglich ist, kann der Virenscanner auch das Heimnetzwerk auf Probleme überprüfen. Ein Browser-Reiniger kann nervende Plugins entfernen und einzelne Dateien lassen sich mit einem Mausklick scannen.

Heimnetzwerk Sicherheit: Scanne Dein Netzwerk und Router auf mögliche Risiken und vermeide Angriffe. Jeden Tag werden die aktuellen Viren-Signaturen bereitgestellt und automatisch im Virenscanner geladen.

Internetexplorer Check: Avast entfernt nervige Toolbars und Suchmaschineneinstellungen und Du kannst nach Deinem Geschmack Deine Einstellungen wählen.

Mit einem Klick auf Viren überprüfen, auf Softwareupdates prüfen, Netzwerkprobleme und Performaceprobleme erkennen.
read more »