[PYTHON] Verwendung und Integration von "Shodan"

In diesem Artikel werde ich über ** "Shodan" ** sprechen, wie es funktioniert und wie man es in Tools und Skripte integriert.

• Dieser Blog ist eine Übersetzung aus der englischen Version. Sie können das Original von [hier] überprüfen (https://www.alibabacloud.com/blog/shodan-and-python-api_594919). Einige maschinelle Übersetzungen werden verwendet. Wir würden uns freuen, wenn Sie auf Übersetzungsfehler hinweisen könnten. * *

Was Shodan kann

Shodan erkennt Geräte, die zu einem bestimmten Zeitpunkt mit dem Internet verbunden sind, den Standort dieser Geräte und den aktuellen Benutzer. Solche Geräte können in nahezu jeder Art von System vorhanden sein, einschließlich Unternehmensnetzwerken, Überwachungskameras, industriellen Steuerungssystemen (ICS) und Smart Homes. Shodan ist der erste wichtige Schritt beim Testen von Eindringlingen, da der Versuch, das Systembanner direkt abzurufen, dabei hilft, das anfällige System zu identifizieren. Er kann auch mehr tun, indem er den Booleschen Operator unterstützt und Filter zur Verbesserung der Sucheffizienz bereitstellt. Die Suchmaschine bietet 50 kostenlose Ergebnisse und kostenpflichtige Abonnements für eine größere Auswahl an Ergebnissen.

Wie es funktioniert

Es gibt drei Möglichkeiten, Shodan zu verwenden.

• Webschnittstelle
• CLI
• Mit Tools und Skripten Dieses Mal werden wir uns ansehen, wie Shodan mit allen drei Methoden verwendet wird.

Für dieses Tutorial verwenden wir die Alibaba Cloud Elastic Compute Service (ECS). Um die Instanz zu sichern, müssen Sie sie entsprechend konfigurieren.

--Erstellen Sie Regeln, um Datenverkehr in und aus Sicherheitsgruppen zuzulassen --Erstellen Sie eine Pen-Test-Genehmigung Wir werden die Servereinstellungen hier nicht behandeln, aber weitere Informationen finden Sie in der ECS-Dokumentation (https://www.alibabacloud.com/help/ja/product/25365.htm).

Nachdem Sie die beiden oben genannten Einstellungen vorgenommen haben, können Sie Apache auf ECS installieren und mit einem Webbrowser darauf zugreifen, um es zu testen.

Shodan Webinterface

Auf Shodan kann wie auf die meisten anderen Suchmaschinen zugegriffen werden, indem Sie mit einem Webbrowser auf shodan.io zugreifen. Ich kann.

Ich würde gerne wissen, wie viele Server Apache weltweit verwenden. Geben Sie einfach das Schlüsselwort "Apache" ein.

Wie Sie im Bild sehen können, zeigen die Ergebnisse, dass 25.544.783 Server im Internet ausgeführt werden.

Shodan hat viele andere Funktionen, aber Sie müssen sich registrieren, um sie nutzen zu können. Beim Versuch, eine gründliche Analyse ohne Konto durchzuführen, ist ein Fehler aufgetreten (siehe unten).

Angenommen, Sie haben erfolgreich ein Konto erstellt und sich angemeldet. Eine von Shodans Funktionen ist der Filter, aber mal sehen, was Sie damit machen können.

Filter sind spezielle Schlüsselwörter, mit denen Shodan Suchergebnisse basierend auf Dienst- oder Gerätemetadaten filtert. Das Format für die Eingabe des Filters ist

filtername:value

Zum Beispiel

• product : "apache tomcat" --country: Bestimmte Länder filtern --city: Filtert bestimmte Städte --geo: Nach Koordinaten filtern --hosthost: Finde einen passenden Hostnamen --net: Beschränkt auf IP --os: Filter basierend auf dem Betriebssystem --port: Filterbasis für offene Ports

Angenommen, Sie möchten eine genaue Suche durchführen, indem Sie alle Apache-Server mit Tomcat durchsuchen.

Das Schlüsselwort lautet "product:" apache to mcat "". Die Ergebnisse sind im folgenden Screenshot dargestellt.

Als Ergebnis haben wir festgestellt, dass es weltweit 1.445.150 Server gibt, auf denen Apache Tomcat ausgeführt wird.

Sie können Ihre Forschung weiter verfeinern, indem Sie nach allen Apache Tomcat-Servern in China suchen.

Product:"apache tomcat" country:cn

Ich habe Shodan gebeten, in Tomcat in China nach einem Apache-Server zu suchen.

Die Ergebnisse zeigen, dass es in China 409.609 Apache-Server mit Tomcat gibt.

Angenommen, Sie führen einen Dienst auf einem der ECS aus und möchten sehen, was gerade passiert. In meinem Fall verwende ich Alibaba ECS als Beispiel, wie oben erwähnt.

Um die Aufgabe zu erledigen, müssen wir einen Netzfilter verwenden und der Wert ist unsere IP-Adresse.

Netz: IP-Adresse

Angenommen, Sie haben Apache installiert, da Ihre Sicherheitsgruppe keine Regel zum Zulassen des Datenverkehrs erstellt hat. Wenn ich versuche, durch Eingabe meiner IP-Adresse im Navigator darauf zuzugreifen, wird nichts angezeigt, da Alibaba Cloud den Datenverkehr standardmäßig einschränkt. Dies dient dazu, die Sicherheit des ECS-Servers zu gewährleisten, auch wenn Sie keine Regeln für die Sicherheitsgruppe erstellt haben.

Wie Sie in diesem Bild sehen können, läuft der Server auf Alibaba und das IPS ist Aliyun Computing. Da wir zwei Ports (80.443) verwenden, werden zwei Dienste auf dem Server ausgeführt, und die verwendete Webtechnologie ist jQuery. Dies ist Teil der Informationen, die Hacker über den Server sammeln, um festzustellen, ob dieser anfällig ist, z. B. eine SSL-Version. ..

Nun wollen wir sehen, wie Shodan über die Befehlszeilenschnittstelle (CLI) verwendet wird.

Shodan-Befehlszeilenschnittstelle

Shodans Command Line Interface (CLI) ist in der offiziellen Python-Bibliothek für Shodan enthalten. Um ein neues Tool zu installieren, führen Sie es einfach aus.

$ easy_install shodan

Nach der Installation des Tools müssen Sie es mit dem API-Schlüssel initialisieren.

$ shodan init YOUR_API_KEY

An https://account.shodan.io Rufen Sie den API-Schlüssel für Ihr Konto ab. Es wird in der oberen rechten Ecke der Schaltfläche Mein Konto angezeigt. Sobald API_KEY initialisiert ist, können Sie Shodans Befehle verwenden.

Sie können die Kontoinformationen überprüfen.

Stellen Sie sich nun vor, Sie befinden sich in einer Instanz von ECS und möchten wissen, wie Ihre öffentliche IP-Adresse lautet. Mit ifconfig schützt Alibaba Cloud den Dienst standardmäßig, sodass Sie nur die private IP-Adresse kennen. Wenn Sie Ihre öffentliche IP-Adresse wissen möchten, geben Sie einfach den Befehl Shodan my ip ein.

$ shodan myip

Das Ergebnis zeigt meine öffentliche IP 47.89.249.0.

Wenn Sie Informationen zu einem Host haben möchten, können wir jetzt Shodan verwenden, z. B. wo sich ein solcher Host befindet, welcher Port offen ist, welche Organisation die IP besitzt und so weiter. Angenommen, 42.120.226.13 ist unser Server und wir möchten ihn testen, um zu sehen, was läuft.

$ shodan host 42.120.226.13

Unser Server befindet sich in China, zuletzt aktualisiert am 21.01.2019, 2 Ports funktionieren (80, 443). Das Ergebnis ergab mehrere Versionen. Überprüfen Sie daher die SSL-Version müssen es tun.

Die CLI verfügt über weitere Funktionen wie Netzwerkanalyse, Maltego-Add-Ons und Browser-Plug-Ins. Sie müssen jedoch Ihr Plan-Konto aktualisieren, um diese nutzen zu können.

Shodan des Drehbuchs

Shodan bietet eine Entwickler-API für den programmgesteuerten Zugriff auf die gesammelten Informationen. Alle Websites und Tools, einschließlich der Hauptwebsite von Shodan, verwenden diese API. Alles, was Sie über eine Website tun können, können Sie mit Ihrem eigenen Code erreichen.

Die API ist in zwei Teile unterteilt. "REST API" und "Streaming API". Die REST-API bietet eine Vielzahl von Dienstprogrammmethoden, um Shodan zu finden, Hosts zu suchen, zusammenfassende Informationen für Abfragen abzurufen und die Entwicklung zu erleichtern. Die Streaming-API bietet einen rohen Echtzeit-Feed der Daten, die Shodan derzeit sammelt. Es gibt mehrere Feeds, die Sie abonnieren können, aber Sie können nicht nach Daten suchen oder auf andere Weise damit interagieren.

Nutzungsbeschränkungen

Es gibt drei API-Methoden, die durch den API-Plan eingeschränkt sind.

1, ** Suchen **: Shodan verwendet Abfrage-Credits, um die Anzahl der Suchvorgänge zu begrenzen, die in einem Monat durchgeführt werden können. Credits mit einer Abfrage werden verwendet, wenn Sie eine Suche mit einem Filter durchführen oder wenn Sie die erste Seite übergeben. Wenn Sie beispielsweise nach "Apache" suchen, werden keine Abfrageguthaben verwendet. Wenn Sie nach "Apache-Land: USA" suchen, wird 1 Abfrageguthaben verwendet. Wenn Sie auf der zweiten Seite mit "Apache" nach Suchergebnissen suchen, verwenden Sie ebenfalls 1 Abfrageguthaben. Schließlich verwendet die Suchabfrage auf der zweiten Seite von "Apache Country: US" auch 1 Abfrageguthaben.

2, ** Scannen **: Die On-Demand-Scan-API verwendet Scan-Credits, um die Anzahl der Hosts zu begrenzen, die Shodan jeden Monat zum Scannen anfordern kann. Ziehen Sie 1 Scan-Guthaben für alle Hosts ab, für die Sie einen Shodan-Scan anfordern.

3, ** Netzwerkwarnungen **: Die Anzahl der IPs, die mithilfe von Warnungen überwacht werden können, ist abhängig von Ihrem API-Abonnement begrenzt. Nur bezahlte Kunden können auf diese Funktion zugreifen. Sie können auch nicht mehr als 100 Benachrichtigungen für Ihr Konto erstellen.

** Hinweis **: Abfrage- und Scan-Credits werden zu Beginn eines jeden Monats zurückgesetzt.

Führen Sie den folgenden Befehl aus, um die Shodan-Bibliothek für Python zu installieren:

$ easy_install shodan

Wenn Sie es bereits installiert haben und auf die neueste Version aktualisieren möchten.

$ easy_install -U shodan

Als erstes müssen Sie das Shodan-API-Objekt initialisieren.

import shodan
api = shodan.Shodan('YOUR API KEY')

Hier ist Ihr API-Schlüssel der API-Schlüssel für Ihr Konto und kann bezogen werden von: https://account.shodan.io

Nachdem Sie alle APIs haben, können Sie mit einem kleinen Skript suchen.

Wie Sie in diesem Bild sehen können, schreiben wir ein kleines Skript, das versucht, das Internet nach Servern und Abfragen zu durchsuchen. Der Code ist in Python3 geschrieben.

Wenn Sie das Skript mit einem Parameter namens Apache ausführen, scannt Shodan das Internet und stellt Ihnen alle Informationen zum Apache-Server zur Verfügung.

Lassen Sie uns das Skript ausführen und sehen, ob es funktioniert und was das Ergebnis sein wird.

Das Ergebnis des Skripts sieht wie oben aus. Wie Sie sehen können, wird der Apache-Server unter der IP-Adresse ausgeführt.

Fazit

Während sich die Technologie weiterentwickelt, müssen wir auf dem neuesten Stand sein, um sicherzustellen, dass unsere Sicherheit nicht beeinträchtigt wird. Insbesondere in IoT-Anwendungen, in denen mehrere Geräte dem Web ausgesetzt sind, ist Sicherheit nicht nur wichtig, um das ordnungsgemäße Funktionieren von Assets sicherzustellen, sondern auch, um die Privatsphäre zu schützen. Eines der mächtigsten Werkzeuge dafür ist Shodan. Aber wie alle guten Werkzeuge kann Shodan auch ein zweischneidiges Schwert sein. Es kann leicht von Hackern ausgenutzt werden, hilft Ihnen aber auch dabei, Ihr Netzwerk besser zu verstehen. Es ist nicht das Werkzeug selbst, das gefährlich ist, sondern die Person, die es benutzt.

• Alibaba Cloud ist der Cloud-Infrastrukturbetreiber Nr. 1 (2019 Gartner) im asiatisch-pazifischen Raum mit zwei Rechenzentren in Japan und mehr als 60 Verfügbarkeitszonen weltweit. Klicken Sie hier, um weitere Informationen zu Alibaba Cloud zu erhalten. Offizielle Seite von Alibaba Cloud Japan *