In den letzten zehn Jahren hat sich maschinelles Lernen von wissenschaftlichen Forschungslabors zu allt?glichen Web- und mobilen Anwendungen gewechselt. Maschinelles Lernen erm?glicht es Ihrer Anwendung, bisher schwierige Aufgaben auszuführen, z. B. das Erkennen von Objekten und Gesichtern in Bildern, das Erkennen von Spam- und Hassreden sowie das Generieren intelligenter Antworten für E -Mail- und Nachrichtenanwendungen.

unterscheidet sich jedoch grundlegend von der klassischen Programmierung. In diesem Artikel lernen Sie die Grundlagen des maschinellen Lernens und erstellen ein Basismodell, das Blumenarten basierend auf Blumenmessungen vorhersagen kann.

Schlüsselpunkte

• maschinelles Lernen hat sich von einem wissenschaftlichen Forschungslabor zu allt?glichen Web- und mobilen Anwendungen entwickelt, wodurch Anwendungen die bisher schwer zu programmierenden Aufgaben ausführen k?nnen.
• maschinelles Lernen stützt sich auf Erfahrung, trainiert Modelle anhand von Beispielen, anstatt ihnen Regeln zu liefern. Es gibt verschiedene Kategorien von Algorithmen für maschinelles Lernen, von denen jedes spezifische Probleme l?sen kann: überwachendes Lernen, unbeaufsichtigtes Lernen und Verst?rkungslernen.
• Python ist aufgrund seiner Einfachheit, Lesbarkeit und eines breiten ?kosystems, einschlie?lich Bibliotheken und Frameworks wie Scikit-Learn, Tensorflow und Pytorch, zu einer beliebten Sprache für maschinelles Lernen geworden. Das Verst?ndnis der grundlegenden Konzepte der Python -Programmierung, Bibliotheken wie Numpy, Pandas und Matplotlib sowie Statistik und Wahrscheinlichkeit ist jedoch eine Voraussetzung.
• Der Prozess der Implementierung eines maschinellen Lernmodells umfasst das Definieren von Problemen, das Sammeln von Daten, die Aufteilung des Datensatzes in Trainings- und Tests?tze, das Erstellen des Modells und die Bewertung seiner Leistung. Techniken wie die Aufteilung des Kreuzvalidations- und Trainingstests sowie Indikatoren wie Genauigkeit, Genauigkeit, Rückruf und F1-Score k?nnen verwendet werden, um die Leistung des Modells zu überprüfen.

Wie funktioniert maschinelles Lernen?

klassische Programmierung basiert auf gut definierten Problemen, die in verschiedene Klassen, Funktionen und IF-ELSE-Befehle unterteilt werden k?nnen. Das maschinelle Lernen hingegen beruht auf der Entwicklung seines Verhaltens auf der Grundlage der Erfahrung. Anstatt Regeln für maschinelle Lernmodelle bereitzustellen, trainieren Sie sie anhand von Beispielen.

Es gibt verschiedene Kategorien von Algorithmen für maschinelles Lernen, von denen jede spezifische Probleme l?sen kann.

beaufsichtigtes Lernen

überwachtes Lernen eignet sich für Fragen, die Sie von Eingabedaten zum Ergebnis erhalten m?chten. Ein gemeinsames Merkmal aller beaufsichtigten Lernprobleme ist die Existenz einer realen Situation, mit der das Modell getestet werden kann, z. B. markierte Bilder oder historische Verkaufsdaten.

überwachte Lernmodelle k?nnen Regressions- oder Klassifizierungsprobleme l?sen. Das Regressionsmodell prognostiziert die Menge (z. B. die Menge der verkauften Waren oder den Preis für Aktien), w?hrend das Klassifizierungsproblem versucht, die Kategorien der Eingabedaten zu bestimmen (z. B. Katzen/Hund/Fisch/Vogel, Betrug/Nicht-Auseinandersetzung).

Bildklassifizierung, Gesichtserkennung, Aktienkursvorhersage und Umsatzvorhersage sind Beispiele für Probleme, die das überwachte Lernen l?sen kann.

Einige beliebte überwachte Lernalgorithmen sind lineare Regression und logistische Regression, Unterstützung von Vektormaschinen, Entscheidungsb?umen und künstlichen neuronalen Netzwerken.

unbeaufsichtigtes Lernen

unbeaufsichtigtes Lernen eignet sich für Probleme, bei denen Sie Daten haben, aber keine Ergebnisse, sondern nach Mustern suchen. Zum Beispiel m?chten Sie sie m?glicherweise in Segmenten gruppieren, die auf Ihrer ?hnlichkeit basieren. Dies wird als Clustering im unbeaufsichtigten Lernen bezeichnet. Alternativ m?chten Sie m?glicherweise einen b?swilligen Netzwerkverkehr erkennen, der von den normalen Aktivit?ten Ihres Unternehmens abweicht. Dies wird als Anomalie -Erkennung bezeichnet, was eine weitere unbeaufsichtigte Lernaufgabe ist. Unüberwachtes Lernen kann auch zur Reduzierung der Dimensionalit?t verwendet werden, eine Technik zur Vereinfachung des maschinellen Lernens durch Entfernen irrelevanter Merkmale.

Einige beliebte unbeaufsichtigte Lernalgorithmen sind K-Mean-Clustering und Hauptkomponentenanalyse (PCA).

Verst?rkungslernen

Verst?rkungslernen ist ein Zweig des maschinellen Lernens, in dem Agenten versuchen, ihre Ziele zu erreichen, indem sie mit ihrer Umgebung interagieren. Das Verst?rkungslernen beinhaltet Aktionen, Status und Belohnungen. Untrainierte Verst?rkungslernmittel beginnen mit zuf?lliger Wirkung. Jede Aktion ver?ndert den Umweltzustand. Wenn sich der Agent im gewünschten Zustand befindet, erh?lt er eine Belohnung. Der Agent versucht, die Abfolge von Aktionen und Zust?nden zu finden, die die meisten Belohnungen erzeugen.

Verst?rkungslernen wird in Empfehlungssystemen, Robotik und Gaming -Robotern wie Alphago und Alphastar von Google verwendet.

Einrichten der Python -Umgebung

In diesem Artikel werden wir uns auf das überwachte Lernen konzentrieren, da es der beliebteste Zweig des maschinellen Lernens ist und seine Ergebnisse leichter zu bewerten sind. Wir werden Python verwenden, da es viele Funktionen und Bibliotheken enth?lt, die Anwendungen für maschinelles Lernen unterstützen. Das allgemeine Konzept kann jedoch auf jede Programmiersprache mit ?hnlichen Bibliotheken angewendet werden.

(Wenn Sie mit Python nicht vertraut sind, bietet FreecodeCamp einen gro?artigen Crashkurs, um Ihnen den Einstieg zu erleichtern.)

Eine der Python-Bibliotheken, die üblicherweise in Datenwissenschaft und maschinellem Lernen verwendet werden, ist Scikit-Learn, das Implementierungen popul?rer Algorithmen für maschinelles Lernen bietet. Scikit-Learn ist nicht Teil einer grundlegenden Python-Installation, Sie müssen sie manuell installieren.

macOS und Linux sind mit Python vorinstalliert. Um die Scikit-Learn-Bibliothek zu installieren, geben Sie den folgenden Befehl im Terminalfenster ein:

<code>pip install scikit-learn</code>

oder für Python 3:

<code>python3 -m pip install scikit-learn</code>

Auf Microsoft Windows müssen Sie zuerst Python installieren. Sie k?nnen die neueste Version von Windows Python 3 Installer von der offiziellen Website erhalten. Geben Sie nach der Installation von Python den folgenden Befehl in das Befehlszeilenfenster ein:

<code>python -m pip install scikit-learn</code>

Alternativ k?nnen Sie das Anaconda-Framework installieren, das eigenst?ndige Python 3 sowie Scikit-Learn und viele andere Bibliotheken für Datenwissenschaft und maschinelles Lernen umfasst, wie numpy , scipy > und Matplotlib . Die Installationsanweisungen für die kostenlose pers?nliche Version von Anaconda finden Sie auf der offiziellen Website.

Schritt 1: Definieren Sie das Problem

Der erste Schritt in jedem Projekt für maschinelles Lernen besteht darin, das Problem zu verstehen, das Sie l?sen m?chten. Das Definieren einer Frage hilft Ihnen, die Art der Daten zu ermitteln, die Sie sammeln müssen, und geben Sie eine Vorstellung davon, welchen Algorithmus für maschinelles Lernen Sie verwenden müssen.

In unserem Beispiel m?chten wir ein Modell erstellen, das die Art der Blume vorhersagt, die auf Messungen von Blütenbl?ttern und Sepall?nge und Breite basiert.

Dies ist ein Problem mit der überwachungsklassifizierung. Wir müssen eine Liste von Messungen verschiedener Blütenproben und ihrer entsprechenden Arten sammeln. Wir werden diese Daten dann verwenden, um ein maschinelles Lernmodell zu trainieren und zu testen, das Messungen an Arten abbilden kann.

Schritt 2: Daten sammeln

Einer der schwierigsten Teile des maschinellen Lernens ist das Sammeln von Daten, um Ihr Modell zu trainieren. Sie müssen eine Quelle finden, die die Datenmenge sammeln kann, die zum Training des Modells erforderlich ist. Sie müssen auch die Qualit?t Ihrer Daten überprüfen, sicherstellen, dass es die verschiedenen Situationen darstellt, die das Modell behandelt, und vermeiden Sie das Sammeln von Daten, die versteckte Verzerrungen enthalten.

Zum Glück enth?lt Scikit-Learn mehrere Spielzeugdatens?tze, mit denen verschiedene Algorithmen für maschinelles Lernen ausprobieren k?nnen. Der "Iris -Datensatz" enth?lt zuf?llig die genauen Daten für unsere Frage. Wir müssen es nur aus der Bibliothek laden.

Der folgende Code l?dt den Wohnungsdatensatz:

<code>pip install scikit-learn</code>

Der IRIS -Datensatz enth?lt 150 Beobachtungen mit jeweils vier Messungen (Iris.Data) und Zielblumspezies (Iris.Target). Sie k?nnen den Namen der Datenspalte in iris.feature_names:

sehen:

<code>python3 -m pip install scikit-learn</code>

iris.target enth?lt einen numerischen Index (0-2) einer der drei im Datensatz registrierten Blumenarten. Die Namen der Blumenarten sind in Iris.Target_Names:

<code>python -m pip install scikit-learn</code>

zu finden

Schritt 3: Teilen Sie den Datensatz

auf

Bevor Sie mit dem Training beginnen, müssen Sie die Daten in einen Trainingssatz und einen Testsatz aufteilen. Sie werden den Trainingssatz verwenden, um ein maschinelles Lernmodell zu trainieren und den Testsatz zu überprüfen, um seine Genauigkeit zu überprüfen.

Dies geschieht, um sicherzustellen, dass Ihr Modell die Trainingsdaten nicht übertitelt. überanpassung ist, wenn Ihr maschinelles Lernmodell bei Trainingsbeispielen gut abschneidet, jedoch nicht in unsichtbaren Daten. überanpassung kann durch die Auswahl eines falschen Algorithmus für maschinelles Lernen, das Missverst?ndnis des Modells, schlechte Trainingsdaten oder zu wenige Trainingsbeispiele verursacht werden.

Abh?ngig von der Art des Problems, das Sie l?sen, und die Datenmenge, die Sie haben, müssen Sie die Datenmenge bestimmen, die Sie dem Testsatz zuweisen m?chten. Wenn Sie viele Daten haben (etwa Zehntausende von Beispielen), reichen normalerweise nur etwa 1% der kleinen Proben aus, um Ihr Modell zu testen. Für den IRIS-Datensatz mit insgesamt 150 Datens?tzen werden wir die 75-25-Segmentierung ausw?hlen.

scikit-larn hat eine train_test_split-Funktion, die den Datensatz in einen Trainingsdatensatz und einen Testdatensatz aufteilt:

<code>from sklearn.datasets import load_iris

iris = load_iris()
</code>

train_test_split ruft die Daten- und Zieldatens?tze ab und gibt zwei für das Training verwendete Datens?tze (x_train und y_train) und test (x_test und y_test) zurück. Der Parameter test_size bestimmt den Prozentsatz der Daten, die dem Test zugeordnet werden sollen (zwischen 0 und 1). Der Stratify -Parameter stellt sicher, dass das Trainingsarray und das Testarray die Anzahl der ausgewogenen Proben aus jeder Kategorie enthalten. Die Random_State-Variable existiert in vielen Funktionen von Scikit-Learn und wird verwendet, um den Zufallszahlengenerator zu steuern und Wiederholbarkeit zu erreichen.

Schritt 4: Erstellen Sie das Modell

Jetzt, da unsere Daten fertig sind, k?nnen wir ein maschinelles Lernmodell erstellen und es am Trainingssatz trainieren. Es gibt viele verschiedene Algorithmen für maschinelles Lernen, die das Klassifizierungsproblem l?sen k?nnen, mit dem wir uns befassen. In unserem Fall werden wir den Algorithmus "Logistische Regression" verwenden, der sehr schnell ist und für einfache Klassifizierungsprobleme geeignet ist, die nicht zu viele Dimensionen enthalten.

Scikit-Learns LogisticRegressionsklasse implementiert diesen Algorithmus. Nachdem wir es instanziiert haben, trainieren wir es in unserem Trainingssatz (x_train und y_train), indem wir die Anpassungsfunktion aufrufen. Dadurch wird die Parameter des Modells angepasst, um die Zuordnung zwischen den gemessenen Werten und den Blütenspezies zu finden.

<code>pip install scikit-learn</code>

Schritt 5: Bewerten Sie das Modell

Jetzt, da wir das Modell geschult haben, wollen wir seine Genauigkeit messen. Die LogisticRegression -Klasse hat eine Score -Methode, die die Genauigkeit des Modells zurückgibt. Erstens werden wir die Genauigkeit des Modells auf den Trainingsdaten messen:

<code>python3 -m pip install scikit-learn</code>

Dies wird ungef?hr 0,97 zurückgeben, was bedeutet, dass das Modell 97% der Trainingsbeispiele genau vorhersagt, was ziemlich gut ist, wenn man bedenkt, dass wir nur etwa 37 Trainingsbeispiele pro Arten haben.

Als n?chstes werden wir die Genauigkeit des Modells im Testsatz überprüfen:

<code>python -m pip install scikit-learn</code>

Dies gibt uns etwa 95% der Ergebnisse, etwas unterhalb der Trainingsgenauigkeit, was natürlich ist, da dies Beispiele sind, die das Modell noch nie zuvor gesehen hat. Durch das Erstellen gr??erer Datens?tze oder durch den Versuch eines anderen Algorithmus für maschinelles Lernen (z. B. Support Vector -Maschinen) k?nnen wir m?glicherweise die Genauigkeit unserer Modelle weiter verbessern und die Lücke zwischen Training und Testleistung überbrücken.

Schlie?lich m?chten wir sehen, wie das Modell, das wir auf dem neuen Beispiel ausgebildet haben, verwenden. Die LogisticRegression -Klasse hat eine Vorhersagefunktion, die eine Reihe von Beobachtungen als Eingabe nimmt und die vorhergesagte Kategorie zurückgibt. Im Fall unseres Blumenklassifikatormodells müssen wir es mit einer Reihe von vier Messungen (Sepall?nge, Sepalbreite, Blütenblattl?nge, Blütenbreite) bereitstellen, die eine Ganzzahl zurückgeben, die die Kategorie der Blume darstellt:

<code>from sklearn.datasets import load_iris

iris = load_iris()
</code>

Herzlichen Glückwunsch! Sie haben Ihr erstes maschinelles Lernmodell erstellt. Wir k?nnen es jetzt zu einer App kombinieren, die den Benutzer messen und die Blumenarten zurückgibt:

<code>print(iris.feature_names)
'''
['sepal length (cm)',
 'sepal width (cm)',
 'petal length (cm)',
 'petal width (cm)']
'''
</code>

Ich hoffe, dies ist Ihr erster Schritt, um ein Meister des maschinellen Lernens zu werden. Von hier aus k?nnen Sie weiterhin andere Algorithmen für maschinelles Lernen lernen, mehr über die grundlegenden Konzepte des maschinellen Lernens erfahren und weiter fortgeschrittenere Themen wie neuronale Netzwerke und tiefes Lernen lernen. Mit einigen Lernen und Praxis k?nnen Sie au?ergew?hnliche Anwendungen erstellen, mit denen Objekte in Bildern erkennen, Sprachbefehle verarbeiten und Gespr?che mit Benutzern führen k?nnen.

FAQ für maschinelles Lernen mit Python (FAQ)

Was sind die Voraussetzungen für das Lernen, Python für maschinelles Lernen zu verwenden?

Um zu lernen, Python für maschinelles Lernen zu verwenden, ben?tigen Sie ein grundlegendes Verst?ndnis der Python -Programmierung. Es ist auch vorteilhaft, mit Bibliotheken wie Numpy, Pandas und Matplotlib vertraut zu sein. Darüber hinaus ist ein grundlegendes Verst?ndnis von Statistiken und Wahrscheinlichkeit entscheidend, da sie den Kern von Algorithmen für maschinelles Lernen bilden.

Wie vergleicht Python mit anderen maschinellen Lernsprachen?

Python ist aufgrund seiner Einfachheit und Lesbarkeit eine der beliebtesten Sprachen für maschinelles Lernen. Es verfügt über eine breite Palette von Bibliotheken und Frameworks wie Scikit-Learn, Tensorflow und Pytorch, die die Entwicklung maschineller Lernmodelle vereinfachen. Andere Sprachen wie R und Java werden ebenfalls im maschinellen Lernen verwendet, aber Pythons umfangreiches ?kosystem macht es für viele die erste Wahl.

Welche allgemeinen Algorithmen für maschinelles Lernen kann ich mit Python implementieren?

Die Scikit-Learn-Bibliothek von Python bietet Implementierungen verschiedener Algorithmen für maschinelles Lernen. Einige h?ufig verwendete Algorithmen sind lineare Regression, logistische Regression, Entscheidungsb?ume, zuf?llige W?lder, Stützvektormaschinen und K-Nearest-Nachbarn. Für Deep Learning k?nnen Sie Bibliotheken wie TensorFlow und Pytorch verwenden.

Wie kann ich die Leistung meines Python -Modells für maschinelles Lernen überprüfen?

Sie k?nnen Techniken wie Cross-Validation- und Trainingstestaufteilung verwenden, um die Leistung Ihres Modells zu überprüfen. Die Scikit-Learn-Bibliothek von Python bietet dafür Funktionen. Darüber hinaus k?nnen Sie Metriken wie Genauigkeit, Genauigkeit, Rückruf und F1 -Score verwenden, um Probleme zu klassifizieren und mittlere quadratische Fehler oder R -Quadrat für Regressionsprobleme zu verwenden.

Kann ich Python für überwachtes und unbeaufsichtigtes Lernen verwenden?

Ja, Python unterstützt überwachtes Lernen und unbeaufsichtigtes Lernen. Bibliotheken wie Scikit-Learn k?nnen verwendet werden, um überwachte Lernalgorithmen wie Regression und Klassifizierung zu implementieren. Für unbeaufsichtigtes Lernen k?nnen Sie Clustering-Algorithmen wie K-Means, hierarchisches Clustering und DBSCAN verwenden.

Wie kann man mit überanpassung in maschinellem Lernmodellen umgehen?

Techniken wie Regularisierung, frühes Stoppen und neuronales Netzwerktrackout k?nnen verwendet werden, um eine überanpassung zu bew?ltigen. Sie k?nnen auch integrierte Methoden wie das Absacken und Anleihen verwenden, um die überanpassung zu reduzieren.

Welche Rolle spielt die Datenvorverarbeitung im maschinellen Lernen mit Python?

Datenvorverarbeitung ist ein wichtiger Schritt im maschinellen Lernen. Es umfasst die Reinigung von Daten, die Verarbeitung fehlender Werte, kodierende kategoriale Variablen und Skalierungsfunktionen. Python bietet Bibliotheken wie Pandas und Scikit-Learn, die eine effiziente Datenvorverarbeitung durchführen k?nnen.

Wie kann man Python verwenden, um die Leistung von Modellen für maschinelles Lernen zu visualisieren?

Sie k?nnen Bibliotheken wie Matplotlib und Seeborn verwenden, um die Leistung Ihres Modells zu visualisieren. Diese Bibliotheken bieten Funktionen für Diagramme wie Verwirrungsmatrix, ROC -Kurve und Lernkurve.

Kann ich Python für die Verarbeitung natürlicher Sprache (NLP) verwenden?

Ja, Python bietet Bibliotheken wie NLTK und Spacy für die Verarbeitung natürlicher Sprache. Diese Bibliotheken liefern Funktionen wie Tokenisierung, Annotation der Speech, die genannte Entit?tserkennung und Stimmungsanalyse.

Wie bereitet ich ein mit Python erstellter Modell für maschinelles Lernen ein?

Sie k?nnen Web -Frameworks wie Flask oder Django verwenden, um maschinelle Lernmodelle bereitzustellen. Für gro? angelegte Bereitstellungen k?nnen Sie Cloud-Plattformen wie AWS, Google Cloud oder Azure verwenden. Sie bieten Dienste für die Modellbereitstellung, Skalierung und überwachung an.

Das obige ist der detaillierte Inhalt vonEine Grundierung auf maschinelles Lernen mit Python. Für weitere Informationen folgen Sie bitte anderen verwandten Artikeln auf der PHP chinesischen Website!