{ "cells": [ { "cell_type": "markdown", "metadata": {}, "source": [ "# Datahåndtering IV: Maskinlæring\n", "\n", "```{admonition} Læringsutbytte\n", "Etter å ha arbeidet med dette temaet, skal du kunne:\n", "1. gjør rede for hva som menes med maskinlæring\n", "2. lage, teste og evaluere enkle modeller ved hjelp av maskinlæring\n", "```\n", "\n", "Når et barn har sett en hund som har blitt omtalt som en hund, generaliserer det ofte slik at det oppfatter alle dyr som hund. Men ettersom barnet ser flere ulike hunder og andre dyr, klarer det etter hvert å skille hund som en egen kategori. Vi danner oss forestillinger og generaliseringer basert på observasjoner i virkeligheten. Dette kalles _induksjon_. Slutningene vi tar, følger ikke med nødvendighet, men med sannsynlighet. Og ganske ofte kan vi ta feil. Men desto flere uttrykk vi utsettes for, desto større sannsynlighet er det som regel at vi har rett.\n", "\n", "Vi kan bruke induktiv læring på datamaskinen også. Da kaller vi det _maskinlæring_. Med de store mengdene digitale data vi omgir oss med, kan datamaskinen lære og trekke slutninger om verden rundt oss. Så istedenfor å eksplisitt kode alle valg en datamaskin kan ta, lar vi datamaskinen lære fra data og trekke slutninger selv.\n", "\n", "I dette kapitlet skal vi se på hvordan vi kan benytte biblioteket _scikit-learn_ og _keras_, som er en del av _tensorflow_. Disse bibliotekene må installeres først – du kan skrive for eksempel _pip install scikit-learn tensorflow_ i et terminalvindu for å gjøre dette. Bibliotekene fungerer svært godt sammen med Pandas med Jupyter Notebook som programmeringsplattform, så vi kommer til å benytte dette her.\n", "\n", "Vi vender atter tilbake til pingvinene våre. Vi skal her lage en maskinlæringsmodell for å artsbestemme ringpingviner, bøylepingviner og adeliepingviner.\n", "\n", "\n", "\n", "\n", "\n", "## Steg 1: Les av og utforsk dataene" ] }, { "cell_type": "code", "execution_count": 1, "metadata": {}, "outputs": [ { "data": { "text/html": [ "
\n", "\n", "\n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", " \n", "
speciesislandbill_length_mmbill_depth_mmflipper_length_mmbody_mass_gsex
0AdelieTorgersen39.118.7181.03750.0MALE
1AdelieTorgersen39.517.4186.03800.0FEMALE
2AdelieTorgersen40.318.0195.03250.0FEMALE
3AdelieTorgersenNaNNaNNaNNaNNaN
4AdelieTorgersen36.719.3193.03450.0FEMALE
\n", "
" ], "text/plain": [ " species island bill_length_mm bill_depth_mm flipper_length_mm \\\n", "0 Adelie Torgersen 39.1 18.7 181.0 \n", "1 Adelie Torgersen 39.5 17.4 186.0 \n", "2 Adelie Torgersen 40.3 18.0 195.0 \n", "3 Adelie Torgersen NaN NaN NaN \n", "4 Adelie Torgersen 36.7 19.3 193.0 \n", "\n", " body_mass_g sex \n", "0 3750.0 MALE \n", "1 3800.0 FEMALE \n", "2 3250.0 FEMALE \n", "3 NaN NaN \n", "4 3450.0 FEMALE " ] }, "execution_count": 1, "metadata": {}, "output_type": "execute_result" } ], "source": [ "import seaborn as sns\n", "import pandas as pd\n", "import numpy as np\n", "import matplotlib.pyplot as plt\n", "\n", "pingvindata = pd.read_csv(\"data/penguins.txt\", delimiter = \",\")\n", "pingvindata.head()" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Når vi har lest inn fila, kan det være lurt å visualisere ulike sammenhenger i datasettet. Vi skal bestemme oss for hvilke _kriterier_ eller _attributter_ (\"features\") vi ønsker å legge til grunn for å plassere pingvinen i en eller kategori (\"label\"). Vi velger her å lage en modell som skal forutsi hvilken pingvinart vi har med å gjøre gitt bestemte verdier av et utvalg variabler. Her er det nyttig å visualisere sammenhenger slik at du har en formening om hvilke kategorier som er mest egnet til en bestemmelsesnøkkel.\n", "\n", "```{admonition} Underveisoppgave\n", ":class: tip\n", "Bruk pairplot-funksjonen til seaborn-biblioteket til å lage noen hypoteser på hvilke kriterier som er mest avgjørende for å bestemme hva slags art vi har med å gjøre.\n", "```" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Siden det mangler noen verdier (NaN), må vi gjøre noe med dem. Enten kan vi bytte dem ut med for eksempel medianverdien eller gjennomsnittet, eller så kan vi fjerne alle pingvinene med NaN-verdier. Sistnevnte er ganske drastisk, men går ofte greit dersom datasettet er stort. Vi gjør det slik for enkelhets skyld:" ] }, { "cell_type": "code", "execution_count": 18, "metadata": {}, "outputs": [], "source": [ "pingvindata.dropna(inplace=True)" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "## Steg 2: Velge treningssett og testsett\n", "For å lage en modell som skal forutsi pingvinarten, må vi først importere noen nyttige funksjoner fra scikit-learn-biblioteket. Vi skal gradvis se hva disse funksjonene gjør." ] }, { "cell_type": "code", "execution_count": 13, "metadata": {}, "outputs": [], "source": [ "from sklearn.model_selection import train_test_split, cross_val_score\n", "from sklearn import tree\n", "from sklearn.metrics import accuracy_score, confusion_matrix" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Nå er vi klare for litt maskinlæring. Grunnprinsippene er som følger:\n", "1. Bestem hvilke kriterier som skal ligge til grunn for kategorien vi ønskerat maskinlæringsalgoritmen skal sortere etter.\n", "2. Velg ut en del av datasettet som datamaskinen skaltrenepå og en avdatasettet vi skaltestemed til slutt. Datamaskinen ser på kriteriene ogde tilhørende kategoriene, og bestemmer en sannsynlighet for sammen-hengen mellom ulike kriterier og kategorier.\n", "3. Lag en modell. Dette gjør vi ved å bruke ferdige algoritmer fra et ma-skinlæringsbibliotek.\n", "4. Tren modellen med treningssettet. Nå har du lagd en modell som ertilpasset det vi ønsket.\n", "5. Valider modellen ved å bruke testsettet.\n", "6. Analyser modellen og gjør eventuelle endringer slik at forutsigelsene mo-dellen gjør, blir så gode som mulig" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Først velger vi altså ut kriterier og bestemmer kategorier. La oss bare begynne med to kriterier: nebblengde og nebbdybde." ] }, { "cell_type": "code", "execution_count": 19, "metadata": {}, "outputs": [], "source": [ "kriterier = pingvindata[['bill_length_mm', 'bill_depth_mm']] # features\n", "kategorier = pingvindata['species'] # labels" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Legg merke til at det er dobbel klammeparentes i første linje. Dette gir et objekt med to kolonner. Maskinlæringsalgoritmene krever et objekt (en array eller dataramme) som består av både kolonner og rader, derfor er disse doble klammeparentesene alltid nødvendig.\n", "\n", "La oss nå velge ut hvor stor andel av datasettet vi skal trene med. Det er ofte lurt å trene med 70–80 \\% av datasettet, og bruke resten til å teste med. Det finnes en funksjon som gjør dette automatisk, nemlig _train\\_test\\_split_:" ] }, { "cell_type": "code", "execution_count": 20, "metadata": {}, "outputs": [], "source": [ "# Velge ut data til trening og testing\n", "treningsandel = 0.8 # Velger 80 prosent av datasettet til trening\n", "ml_data = train_test_split(kriterier, kategorier, train_size=treningsandel, random_state=42)\n", "\n", "treningskriterier = ml_data[0]\n", "testkriterier = ml_data[1]\n", "treningskategorier = ml_data[2]\n", "testkategorier = ml_data[3]" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Det funksjonen ovenfor gjør, er å velge ut 80 \\% av dataene fra tilfeldige steder i datasettet til trening og 20 \\% til testing. Vi lagrer kriterier (lengden og dypbden til pingvinnebbet) og tilsvarende kategori (art) i variabelen _ml\\_data_. Denne består nå av fire separate elementer, som vi sorterer i linjene nederst i fire ulike variabler: kategorielementene (altså verdien til nebbdybde og nebblengde) og de tilsvarende kategoriene (hvilken art det tilsvarer) som ble valgt ut til trening, og tilsvarende for testing.\n", "\n", "En litt merkelig parameter er _random\\_state_. Den er ikke nødvendig for å dele opp datasettet, men den er nyttig. Hvis vi velger et tilfeldig tall her, låser vi algoritmen slik at den plukker ut de samme tallene hver gang vi kjører programmet. Det kan være en fordel dersom vi ønsker å teste og tilpasse modellen, men ønsker å ha det samme utvalget av datasettet hver gang. Hvis vi ikke velger et fast utvalg, vil modellen gi ulike resultater hver gang vi kjører programmet.\n", "\n", "```{admonition} Underveisoppgave\n", "Skriv ut de ulike kategoriene og kriteriene for å se hva programmet har generert så langt. Prøv å bytte ut eller fjerne random\\_state-parameteren og kjør programmet flere ganger. Observer hva som skjer.\n", "\n", "\n", "```" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "## Steg 3: Lag modellen\n", "Nå kan vi velge en algoritme som grunnlag for modellen vår. Det finnes mange ulike algoritmer, og de benytter statistikk og lineær algebra til å optimere ulike parametre. Vi skal ikke se på algoritmene her, men heller fokusere på å forstå hvordan de fungerer. Derfor starter vi med en enkel beslutningstrealgoritme. Denne fungerer som et slags valgtre, der hvert valg utføres fra et gitt kriterium (for eksempel nebblengde mindre enn 40 mm), og som brukes til å sannsynliggjøre hvilken art vi har med å gjøre.\n", "\n", "Vi lager og trener modellen slik:" ] }, { "cell_type": "code", "execution_count": 21, "metadata": {}, "outputs": [ { "data": { "text/plain": [ "DecisionTreeClassifier()" ] }, "execution_count": 21, "metadata": {}, "output_type": "execute_result" } ], "source": [ "modell = tree.DecisionTreeClassifier() # Lager modellen\n", "modell.fit(treningskriterier, treningskategorier) # Trener modellen" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Nå har vi (eller datamaskinen) faktisk lagd modellen vår, og vi har brukt treningsdataene til å trene modellen slik at den best mulig kan forutsi kategorier basert på gitte kriterier." ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "## Steg 4: Test og evaluer modellen\n", "Vi skal nå teste og evaluere modellen vår:" ] }, { "cell_type": "code", "execution_count": 22, "metadata": {}, "outputs": [ { "data": { "text/plain": [ "0.9402985074626866" ] }, "execution_count": 22, "metadata": {}, "output_type": "execute_result" } ], "source": [ "forutsigelser = modell.predict(testkriterier)\n", "accuracy_score(testkategorier, forutsigelser)" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Her bruker vi altså testkriteriene og lar modellen forutsi hvilke kategorier dette tilsvarer (forutsigelser). Så sammenlikner vi dette med de faktiske kategoriene (testkategorier) med funksjonen \\texttt{accuracy\\_score}. I dette tilfellet får vi en treffsikkerhet på ca. 94 \\%. Det betyr at modellen vår gir riktig pingvinart 94 \\% av gangene. Det er ikke verst!" ] }, { "cell_type": "code", "execution_count": null, "metadata": {}, "outputs": [], "source": [] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Vi kan også bruke modellen til å forutsi en art gitt helt nye data, for eksempel slik:" ] }, { "cell_type": "code", "execution_count": 26, "metadata": {}, "outputs": [ { "data": { "text/plain": [ "array(['Adelie'], dtype=object)" ] }, "execution_count": 26, "metadata": {}, "output_type": "execute_result" } ], "source": [ "nebblengde = 35\n", "nebbdybde = 15\n", "modell.predict([[nebblengde, nebbdybde]]) # Husk to klammer her!" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Dette betyr at en pingvin med nebblengde 35 mm og nebbdybde 15 mm mest sannsynlig er en Adelie-pingvin." ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "## Steg 5: Videre analyse\n", "Noen ganger blir modellen ganske dårlig, og da kan det hende du bør gå tilbake og velge andre, eller flere attributter (kriterier) for modellen. For å analysere videre hva modellen feiler på, kan det være fint å lage en forvirringsmatrise(også kalt feilmatrise). Tallene for forvirringsmatrisen kan vi lage med en funksjon som heter _confusion\\_matrix_, og selve matrisen kan vi lage med heatmap-funksjonen til seaborn-biblioteket:" ] }, { "cell_type": "code", "execution_count": 34, "metadata": {}, "outputs": [ { "data": { "image/png": "iVBORw0KGgoAAAANSUhEUgAAAWgAAAEGCAYAAABIGw//AAAAOXRFWHRTb2Z0d2FyZQBNYXRwbG90bGliIHZlcnNpb24zLjQuMSwgaHR0cHM6Ly9tYXRwbG90bGliLm9yZy/Z1A+gAAAACXBIWXMAAAsTAAALEwEAmpwYAAAjJUlEQVR4nO3deZxcVZn/8c+3E5CEsIVAgEAICQEEfhAlLIKyC4jsojEyuAAGFdlGZ0BBRR0BdXBcgkowrAIDDIsRhyVC2BlDEgiERCCySGJCCInsIUn38/vj3oYidHfdrq5bdbvq+3697quqbt17zlO3k6dPnzrnXEUEZmZWPC31DsDMzDrmBG1mVlBO0GZmBeUEbWZWUE7QZmYF1bfeAXSmbeFWHl6SswM32bHeIZhVxeS269XTMrqTc1o2eqrH9WVR2ARtZlZLbbRlPrZWXQ9O0GZmQGtkT9C1SpxO0GZmQBvF61V1gjYzo3tdHLXiBG1mBqzoRhdHrThBm5kBre7iMDMrJvdBm5kVVGsBV/Z0gjYzgwJ+RegEbWYGuA/azKywVhQvPztBm5kBtFKT5TW6xQnazAxocwvazKyY3II2MysoJ2gzs4JaEcW7f4kTtJkZ0FrAG0w5QZuZAW3hLg4zs0JyH7SZWUG1ug/azKyY2twHbWZWTMujT71DeB8naDMzoM190GZmxeRhdmZmBeUvCc3MCqqIXxIWLyIzszpoDWXeuiJpM0lTJM2W9ISkU9P950iaL+nRdDu4XExuQZuZASuiaulwJfCNiJghaS1guqTJ6Xv/FRH/mbUgJ2gzM6r3JWFELAAWpM9fkzQHGFJJWe7iMDOje10cksZJmlayjeuoTEnDgA8Bf0l3fV3SY5IukbReuZicoM3MSL4kzLpFxISIGF2yTVi1PEkDgBuA0yLiVeA3wAhgFEkL+4JyMbmLowILFsGZP4KXlwKCzxwKnz8a/joXzrkA3nwLhmwEP/0ODFiz3tE2jtEHjuJrP/8SLX1auHXinVz745vrHVLDaeZrXM1hdpJWI0nOV0XEjQAR8WLJ+xcDt5Qrxy3oCvTpA/9+EtxyBVz7G7j6Jpj7HHznJ/CvJ8Kky2D/j8HE/653pI2jpaWFk8cfz7cP/hEnbHc6+3x2D4Z+cNN6h9VQmv0ar4g+mbeuSBIwEZgTET8r2b9xyWFHArPKxeQEXYEN14fttkqer9kfRmwOL74Ez82DnXdM9u++M0y+p34xNpqtd9mSf8xdyMJnF7FyxUruvvYBdj98dL3DaijNfo1bacm8lbEHcCyw7ypD6n4i6XFJjwH7AKeXK8hdHD00fwHMeRp23Ba2HAZ33p+0nm+fknSFWHUMGjKQl+a9/M7rxfOWsM2uI+sYUeNp9mtcrQX7I+J+6HBhj//tblm5taCV+BdJ301fD5W0S1711cMbb8Ip34UzT076mn90BlxzM3zqy/DGW7DaavWO0MyyqmILumryrOnXwEeAsenr14ALuzqhdOjKhCtfyTG0nluxEk79Lhy6PxywZ7Jv+OYw8QK44WI4eD8Yukl9Y2wki+cvYYNN13/n9aBNB7J4/stdnGHd1ezXuC1aMm+1kmdNu0bEScAygIhYCqze1QmlQ1fGHbtOjqH1TASc/eMkIX9xzLv7X16aPLa1wW+vgDGH1Se+RvTkw3MZMnJjNhq2IX1X68veY/bgoUnT6h1WQ2n2a9yKMm+1kmcf9ApJfYAAkLQB0JZjfTUz43GYdIfYanhw5PHJvtO+DM/PS0Z0AHx8Tziq7Ex7y6qttY3xJ0/kvNvOoqVPC7dfOoXnZ8+rd1gNpdmvcbnRGfWgiMinYOkYYAzwYeBy4Gjg7Ii4Psv5bQu3yicwe8eBm+xY7xDMqmJy2/U9btb+6IlDMuecs7a7pSbN6Nxa0BFxlaTpwH4k32geERFz8qrPzKwnmmI9aElrR8SrkgYCi4BrSt4bGBFLql2nmVlPNcstr64GDgGmk/Q/a5XH4TnUaWbWI03Rgo6IQ9LHLapdtplZXqo1UaWa8uji+HBX70fEjGrXaWbWU0UcxZFHF0dXS+gFsG8OdZqZ9UgR70mYRxfHPtUu08wsb+XuNVgPea7F0V/S2ZImpK9HSjokr/rMzHqiLZR5q5U82/SXAsuB3dPX84H/yLE+M7OKFXEtjjyneo+IiDGSxgJExJvpQtZmZoWzohmG2ZVYLqkf767FMQJ4O8f6zMwqVsuWcVZ5JujvAbcBm0m6iuQuA1/MsT4zs4o1y0xCACJisqQZwG4kswhPjYjFedVnZtYTRRzFUYuJKgvSx6GShnqiipkVUbN0cbRPVFkDGA3MJGlB7wBMI7nLiplZoTTFVO/2iSqSbgQ+HBGPp6+3B86pdn1mZtWwskla0O22bk/OABExS9IHc6zPzKxizdLF0e4xSb8Dfp++Poaku8PMrHCaooujxJeArwKnkPRBTwe8BKmZFVKzDbNbJuluYBPgM8C6wA151Wdm1hNN0YKWtBUwNt0WA9eCV7kzs2JrigQN/BW4DzgkIuYCSDo9h3rMzKpmZVvxviTMI6KjSCanTJF0saT2u3qbmRVWG8q81UrVE3RE3BwRnwW2AaYApwEbSvqNpAOqXZ+ZWTU01XrQEfFGRFwdEYcCmwKPAGfkVZ+ZWU9UK0FL2kzSFEmzJT0h6dR0/0BJkyU9nT6uVy6mmnS6RMTSiJgQEfvVoj4zs+6qYgt6JfCNiNiWZLG4kyRtC5wJ3BkRI4E709ddynMctJlZr9FapS8JI2IB6SJxEfGapDnAEOBwYO/0sMuBuynTq1C8ry3NzOqgO18SShonaVrJNq6jMiUNAz4E/AUYnCZvgIXA4HIxuQVtZkb3xkFHxARgQlfHSBpAMjnvtIh4tfSOfxERkqJcPU7QZmZAVHF0hqTVSJLzVRFxY7r7RUkbR8QCSRsDi8qV4y4OMzOqOopDwERgTkT8rOStScAX0udfAP5QLia3oM3MqGoLeg/gWOBxSY+m+74NnA9cJ+l44HmSNYq6VNgE/cmdDqx3CA1v/reH1zuEpjD0l4/VOwTLoLWtOgk6Iu6n89nT3RpqXNgEbWZWS0213KiZWW9SzS8Jq6XLLwkl9ZE0pVbBmJnVS69biyMiWoE2SevUKB4zs7qIyL7VSpYujtdJvo2cDLzRvjMiTsktKjOzGitiF0eWBH1jupmZNaxqrcVRTWUTdERcLqkfMDQinqxBTGZmNVfLrousyv7KkHQo8ChwW/p6lKRJOcdlZlZTEcq81UqWNv05wC7APwEi4lHAMxzMrKEUMUFn6YNeERGvlK7EBLTlFI+ZWV0UsIcjU4J+QtLngD6SRgKnAA/mG5aZWW1FlaZ6V1OWLo6Tge2At4FrgFdJbgRrZtYwemUXR0S8CZyVbmZmDamIozg6TdCSfh4Rp0n6Ix10z0TEYblGZmZWQ71tosqV6eN/1iIQM7O66k0JOiKmp4/31C4cM7P66G1dHI/TxciTiNghl4jMzOqgiKM4uuriOCR9PCl9bO/y+BeKOWTQzKxyBcxqXXVxPA8g6eMR8aGSt86QNAM4M+/gzMxqpYhfEmYZBy1Je5S82D3jeWZmvUd0Y6uRLDMJjwMuLVm0/5/pPjOzBlK8FnSXCVpSH2CviNixPUFHxCs1iczMrJYKuMJQlltejU2fv+LkbGYNK5R9q5EsXRwPSBoPXMt7b3k1I7eozMxqrFeNgy4xKn38Qcm+APatejRmZvXSGxN0ROxTi0DMzOqqNw6zkzRY0kRJt6avt5V0fP6hmZnVjiL7VitZxjNfBtwObJK+fgqvB21mjaZN2bcayZKgB0XEdaSDUCJiJdCaa1RmZrVWxYkqki6RtEjSrJJ950iaL+nRdDu4XDlZEvQbktZvD0vSboCH25lZY6nuTMLLgIM62P9fETEq3f63XCFZRnF8A5gEjJD0ALABcHSmEM3Meosq9i1HxL2ShvW0nCyjOKZL2gvYmmQu5JMRsaKnFTeKQZusyzd/cSzrDVqLCLj1qgf4w0QvoV0N/3Hkx9lr6+EseeNNDv9VspjiNw/8GHtvM5wVra28sOQVzrrxDl5b9nadI20Mp194HLsetCP/fOlVvrLbd+odTu11YxSHpHHAuJJdEyJiQoZTvy7p88A04BsRsbSrg7OM4ngM+HdgWUTMcnJ+r9aVbVz8/Zs4cZ9zOf3QCzjki3sydORG9Q6rIdz0yGzGXX7Te/Y9+LfnOfxXV3Dk+N/z3OKlfHnPnesUXeOZfNX9nH3Uz+odRt10ZxRHREyIiNElW5bk/BtgBMnckgXABeVOyNIHfSiwErhO0sOSvilpaIbzmsLSRa/yt1nzAHjrjbd54emFrL/ROmXOsiymPzefV95a9p59D879O61tyd+iM19YwEbrDKhHaA1p1oNP8drS1+sdRv3kvJpdRLwYEa0R0QZcDOxS7pyyCToino+In0TETsDngB2AZ7MGJekoST+TdIGkI7Oe1xttuOlARmy/KU8+8ny9Q2kKR+20Pfc99Vy9w7AGkfc4aEkbl7w8EpjV2bHtsnxJiKTNgTHp1krS5ZHlvF8DWwLXpLtOlLR/RJzUyfHv9Otst87ebLbm9lmqKYQ1+q/O2Rcfz0Xfu5E3X19W/gTrkRP32oXWtjb+OPOv9Q7FGkUVZxJKugbYGxgkaR7wPWBvSaNI2uDPASeWK6dsgpb0F2A14Drg0xHxTDfi3Bf4YES0D9G7HHiis4PTfpwJAJ8YcnIBZ8Z3rE/fFs6++ASm3DSNB2+dWe9wGt4RH9qWvbbeguMuvaHeoVgjqe4ojrEd7J7Y3XKytKA/HxFPdrfg1FxgKND+N/9m6b6GctoFx/DC3IXcNGFKvUNpeB8duTnHf2w0n//d9SxbsbLe4VgjKWCTMMswu0qTM8BawBxJU0k+/i7ANEmT0rIP60HZhbDdzsPZ/+hdeHb2fMbfcQYAl5//Rx6+a3adI+v9fvqZT7DLFpuxbv81uOvfTmD8XQ8xbs9dWK1vHyZ+6SgAZr6wkO9PurPOkTaGMy85kR0+ug1rrz+AK+dcwO/PvZnbr7yv3mHVjAq4YH+mPuge+G7O5dfdEw8/wyeGnFzvMBrSv1136/v23Ti90x4y66Hzj7uo3iHUV29sQfdERHjGhpn1CrVcpS6rLBNV+kv6jqSL09cjJR2SpXBJu6Vjp1+XtFxSq6RXexq0mVnVFfCWV1kmqlwKvA18JH09H/iPjOWPJ7mn4dNAP+AE4MJuxmhmlr+cJ6pUIkuCHhERPwFWAETEm3Tj/uQRMRfok86guZSOV3gyM6urIi7Yn6UPermkfry73OgIkhZ1Fm9KWh14VNJPSOafZ/mlYGZWU0UcxZElWX4PuA3YTNJVwJ1knEkIHJvW8XWSO4JvBnyqgjjNzPJVwC6OLOOgJ0uaAexG0rVxakQsLneepD7AuRFxDLAM+H5PgzUzy00BR3FkHWa3BrA0PX5bSUTEvV2dEBGtkjaXtHpELO9poGZmeSriMLssa3H8mGSRpCdI70tI8rumywSdegZ4IJ05+Eb7zoho3kVnzcwyytKCPgLYOiIquW3F39KthWTaNxTyDwkza3oFzExZEvQzJKvZVZKgZ0fE9aU7JH26gnLMzHJVxFEcWRL0myTD5O6kJElHxCkZzv0WcH2GfWZm9dVLW9CT0i0zSZ8ADgaGSPplyVtrk9w+y8ysUHrll4QRcXkF5f6D5K61hwHTS/a/BpxeQXlmZvnqjQla0h7AOcDm6fECIiKGd3ZORMwEZkq6uv0u4JLWAzYrd5txM7N66JUtaJLbtJxO0hJu7Wb5kyUdltYzHVgk6cGIcCvazIqll35J+EpEvH/l9GzWiYhXJZ0AXBER35P0WIVlmZnlpre2oKdI+ilwI+8dxTEjS/nprcY/A5xVWYhmZjXQSxP0runj6JJ9QXLH7nJ+ANwO3B8RD0saTrI2tJlZsfTGBB0R+1RaeDpJ5fqS18/g1ezMrIB6axcHkj4JbEeyaBIAEfGDDOdtAHwZGFZaV0Qc191Azcxy1RsTtKTfAv2BfYDfAUcDUzOW/wfgPuDPdH8EiJlZzfTWqd67R8QOkh6LiO9LugDIOqqjf0Sc0YP4zMxqo4At6Cx3VHkrfXxT0iYk9ybcOGP5t0g6uKLIzMxqSN3YaiVLC/oWSesCPwVmkPyeuThj+acC35b0Nklib5+FuHYFsZqZ5aeALegsozh+mD69QdItwBoR8UqWwiNirfJHmZnVXxFHcXTaxSFpZ0kblbz+PHAd8ENJA7sqVNI26eOHO9qqFbyZWdVU8aaxki6RtEjSrJJ9AyVNlvR0+rheuXK66oO+CFieFrwncD5wBfAKMKFMuf+aPl7Qwfaf5YIyM6s1tWXfMrgMOGiVfWcCd0bESODO9HWXuuri6BMRS9LnY4AJEXEDSVfHo10VGhHj0seKJ7mYmdVUFbs4IuJeScNW2X04sHf6/HLgbqDLUW5dJmhJfSNiJbAfMC7jee8haXfeP1Hliqznm5nVQnf6oCWN4705cUJElOtZGBwRC9LnC4HB5erpKtFeA9wjaTHJULv70sC2JOnmKEvSlcAI4FHenagSJF0lZmbF0Y0EnSbjcgm5q/NDKv8rodMEHRE/Su9DuDFwR0S0F9YCnJwxjtHAtiXnZrZywcLunmLdNPSXr9c7hKaw6V0FHB5g71ODURwvSto4Ihakq3wuKndCl10VEfF/Hex7qhsBzQI2AhaUO9DMrK7yn+o9CfgCyYCLL5AshdGlzH3J3SHpjyR/MKwFzJY0lfeuJX1YHvWamVWqmi1oSdeQfCE4SNI84Hskifk6SccDz5Osk9+lXBI0yW+KwaT91iU+hlvTZlZE1R3FMbaTt/brTjl5JejDgW9FxOOlOyUtAc4luc+hmVlhqPtfleUurwQ9eNXkDBARj3cwNtDMrP6Kl59zS9DrdvFev5zqNDOrWK9ai6OHpkn68qo707t7T8+pTjOzilV5qndV5NWCPg24SdIxvJuQRwOrA0fmVKeZWeUK2ILOJUFHxIvA7pL2AbZPd/8pIu7Koz4zs54qYhdHXi1oACJiCjAlzzrMzKqi2RK0mVlv0XQtaDOz3kJtxcvQTtBmZuAuDjOzoqrl8LmsnKDNzMAtaDOzovKXhGZmRdVEiyWZmfUq7oM2Mysod3GYmRWVuzjMzIrJLWgzs6JygjYzKya3oM3Miqq1eBnaCdrMDLegzcyKy6M4zMyKyS1oM7OicoI2Mysm+UtCM7NikvugzcwKqnj52Qm6GkYfOIqv/fxLtPRp4daJd3Ltj2+ud0gN5/QLj2PXg3bkny+9yld2+069w2kYb7/8Nk/+Zi7LX1mBBBvtO5ghB23MM1c/x5IZS1HfFvoN/gBbjduSvms2eLqoYgta0nPAa0ArsDIiRldSToNf8fy1tLRw8vjjOeOAH7J43hLGTz2PhyZN4+9z5tU7tIYy+ar7+eOEO/nmRSfUO5SGohYx/JjNGbDFAFa+1cqjZz/Gutuvw3rbr8sWYzZHfcSz1zzPC5Pms8XYzesdbq5yGMWxT0Qs7kkBLdWKpFltvcuW/GPuQhY+u4iVK1Zy97UPsPvhFf2ytC7MevApXlv6er3DaDirr7c6A7YYAEDffn3ot0k/li9dzno7rIv6CIC1thzA20uW1zPM2ojIvtWIE3QPDRoykJfmvfzO68XzljBoyPp1jMisMsteWsYbz7/BWiMGvGf/i/e8xMAd161PUDWk1si+SeMkTSvZxq1SXAB3SJrewXuZ5d7FIekwYM/05T0R8ce86zSz7mld1sqcnz/F8GOH0bf/u2nh7zfPQ31ggz0G1TG6GulGwzgiJgATujjkoxExX9KGwGRJf42Ie7sbUq4taEnnAacCs9PtFEnndnH8O7+V5sUzeYZWNYvnL2GDTd9tMQ/adCCL57/cxRlmxdK2so3ZP3+SDfYYxKCd3/23/OI9i1jyyFK2/tpIJNUxwtpQROatnIiYnz4uAm4Cdqkkpry7OD4JfDwiLomIS4CDgEM6OzgiJkTE6IgYvamG5xxadTz58FyGjNyYjYZtSN/V+rL3mD14aNK0eodllklE8PTFf6P/kH5sevAm7+xfMnMpL9zyD7b9xjb0+UCfOkZYQ1Xqg5a0pqS12p8DBwCzKgmpFqM41gWWpM/XqUF9NdXW2sb4kydy3m1n0dKnhdsvncLzsz2Co9rOvOREdvjoNqy9/gCunHMBvz/3Zm6/8r56h9XrvfrUayy6fzH9N+vPjG/NBGDYmKH87YpnaVsRzDpvNgBrbbkWI4/vHY2milXvprGDgZvSvzr6AldHxG2VFJR3gj4PeETSFEAkfdFn5lxnzU299RGm3vpIvcNoaOcfd1G9Q2hI62y9Nh+76iPv2z9w1Hp1iKa+qjWTMCKeAXasRlm5JuiIuEbS3cDO6a4zImJhnnWamVWkrXpN6GqpRRfHzrw7iiMAj+Iws+IpXn7ON0FLOp8kQV+V7jpF0kci4tt51mtm1l3NuFjSwcCoiGgDkHQ58AjgBG1mxdKECRoafBSHmTWIJkzQHY3i+FbOdZqZdV+zLdjvURxm1ls0XR+0pDsjYj9gUgf7zMyKo1kStKQ1gP7AIEnrkXRvAKwNDMmjTjOzHmlrkgQNnAicBmwCTOfdBP0qMD6nOs3MKtcsLeiI+AXwC0knR8Sv8qjDzKyqmiVBt4uIX0naHRhWWldEXJFnvWZm3dZavKmEeX9JeCUwAniU5OaJkEz3doI2s2KJJkvQwGhg24gC/u1gZlaqgGkq7wQ9C9gIWJBzPWZmPdNEozjaDQJmS5oKvN2+MyIOy7leM7PuacIW9Dk5l29mVh3NlqAj4h5JmwMjI+LPkvoDTXKDMzPrVVpbyx9TY3nf1fvLwP8A7fcrGgLcnGedZmYVqdJNY6sp77t6nwTsQTKDkIh4Gtgw5zrNzLqvgAk67z7otyNieXp3WyT1JRkHbWZWLE04iuMeSd8G+kn6OPA1fE9CMyugKOBElby7OM4EXgIeB8YBf4qIs3Ku08ys+1rbsm81ktdyo4cDm0bEhcDF6ZeFGwA7SfpnRPxPHvWamVWsrXla0P9OySL9wOrATsDewFdzqtPMrHJN9CXh6hHxQsnr+yNiCbBE0po51WlmVrEoYAs6rwS9XumLiPh6ycsNcqrTzKxyBZxJmFcXx1/Sfuf3kHQiMDWnOs3MKtcW2bcayasFfTpws6TPATPSfTsBHwCOyKlOM7OKRQGneud1y6tFwO6S9gW2S3f/KSLuyqM+M7Meq+I4aEkHAb8gWXvodxFxfiXl5L1Y0l2Ak7KZFV5UqetCUh/gQuDjwDzgYUmTImJ2d8vKe6KKmVnvEG3Zt67tAsyNiGciYjnw38DhlYSU91Tvik1uu171jqG7JI2LiAn1jqOR+Rrnr1mvcXdyjqRxJLOj200ouWZDgNJhxvOAXSuJyS3o6hpX/hDrIV/j/PkalxEREyJidMmWyy80J2gzs+qaD2xW8nrTdF+3OUGbmVXXw8BISVtIWh34LO9d+iKzwvZB91JN129XB77G+fM17oGIWCnp68DtJMPsLomIJyopS1HA6Y1mZuYuDjOzwnKCNjMrKCfoDkg6QlJI2qaT9++WNLpMGe8cI+l/Ja2bQ6iFJWkjSf8t6W+SpqfXYJykWzo5/neStq2gnlGSDu55xI1D0mBJV0t6Jr32D0k6ssKyTpPUv9oxWjZO0B0bC9yfPvZYRBwcEf+sRlm9gZK7BN8E3B0RIyJiJ+BbwODOzomIEyqZCguMAjpM0OlNiptKeu1vBu6NiOHptf8syVCvSpwGOEHXiRP0KiQNAD4KHE/yDxtJ/dLW4BxJNwH9So4/IG2hzJB0fXr+qmU+J2lQ+vxfJE2V9Kiki9J5+41mH2BFRPy2fUdEzATuAwZI+h9Jf5V0VZpQVv2L43VJP5I0U9L/SRqc7v+0pFnp/nvTIUw/AMak13OMpHMkXSnpAeBKScMk3Zf+fGZI2j0ta++0jD9JelLSbyU1wv+HfYHlq1z75yPiV5L6SPqppIclPZYu/9t+Le5e9eci6RRgE2CKpCnpsWMlPZ7+HH7cXkdn+62HIsJbyQYcA0xMnz9Iskzqv5IMlQHYAVgJjAYGAfcCa6bvnQF8N31+NzA6ff5ceuwHSe5qvlq6/9fA5+v9mXO4hqcA/9XB/r2BV0hacy3AQ8BHO7heARyaPv8JcHb6/HFgSPp83fTxi8D4kjrOAaYD/dLX/YE10ucjgWklsSwDhpMMhZoMHF3va5fXtU/fG1dyLT8ATAO2KPNzeQ4YlD7fBPg7yU03+pIshHZEZ/vrfS0aYWu6PwEzGEuyTCAki5yMBbYEfgkQEY9Jeix9fzdgW+CBtCG4Osk/7s7sR5LwH06P7wcsqnL8RTc1IuYBSHoUGEbSnVRqOdDeVz2dZFUwgAeAyyRdB9zYRR2TIuKt9PlqwHhJo4BWYKtVYnkmjeUakr+cGuqGxpIuJPlcy4HngR0kHZ2+vQ7JL63lZPu57EzSbfVSetxVwJ4kv1A72n9zXp+rWThBl5A0kORPxP8nKUhaVgE80tkpwOSIyNpXLeDyiPhWj4MttieAozt57+2S5610/G9wRaRNttJjIuIrknYFPglMl7RTJ3W8UfL8dOBFYEeS1uGykvdWnQTQCJMCngA+1f4iIk5Ku9emkbRyT46I20tPkLQ32X4uVmON0OdWTUcDV0bE5hExLCI2A54lacV9DkDS9iTdHAD/B+whacv0vTUlbdVBue3uBI6WtGF6/EBJm+f0WerpLuADSlb8AkDSDsDHelKopBER8ZeI+C7wEsl6B68Ba3Vx2jrAgohoA44l+aXbbhcl03FbgDG8v8XYG90FrCHpqyX72r/kux34qqTVACRtpfI3cS69vlOBvSQNSr87GQvc08V+6yEn6PcaSzL6oNQNJP10AyTNIflSajpA+ifdF4Fr0m6Ph4AOh+alx88GzgbuSI+fDGxc5c9Qd2nr90hgfyXD7J4AzgMW9rDon7Z/EUXy/cBMYAqwbfuXhB2c82vgC5JmkvxsSlvXDwPjgTkkv4hX/dn3Oum1P4IkYT4raSpwOcn3I78DZgMz0mt4EeVbyhOA2yRNiYgFwJkk13wmMD0i/tDZ/up/uubjqd7WlNI/678ZEYfUORSzTrkFbWZWUG5Bm5kVlFvQZmYF5QRtZlZQTtBmZgXlBN3kJLWmQ9RmpWuJVLwwjqTL2mepqWR1Okmv96DMuq9W19nnMsubE7S9FRGjImJ7kim/Xyl9UxWuCBeVr063at2j6GS1ujyU+7zd/VxqzMWwrEacoK3UfcCW6epm90maBMzuYhU0SRqfrgb3Z2DD9oLUwZrZ6UyzhyR9UtIGkm5Iy3xY0h7pMe9ZjY73r1a3pqRLlKwI+Iikw1f9EEpWHvxkyevLJB3dxedY9fNm+lzqZCVDJasX/ljSDODTVfnJWFPyfHsD3mk5fgK4Ld31YWD7iHg2nbL9SkTsLOkDJItD3QF8CNiaZMGowSSz1C7ppPzBJHc2PjsiJku6mmTVtfslDSWZhvzB9PBtSVZTe0vSF0lWuft6Ws65wF0RcZySmyBMlfTniCidIXgt8BngT0qWJN0P+CrJErIdfY5VP+9R5T6XkvUtzgb2j4g3JJ1BsurhD9JDXo6ID5e77mZdcYK2fkpWL4OkBT0R2J1kdbNn0/0H0PEqaHsC10REK/APSXd1UsdqJOuQnBQR7Ws07E8yRbv9mLX17lrapavRreoA4DBJ30xfrwEMJZmu3e5W4BdpEj6IZPH6tyR19jnaV3Nr/7xZPle5lQyv7SR+s8ycoO2tiBhVuiNNOKUtUtHxKmhZ+4ZXkqxfciDvLqLTAuwWEaWry3VU96oEfCoinuzsgIhYJunutL4xJMvGdvU59i5TZ2dxdLWSYXfLM3sf90FbFp2tgnYvSf9wH0kbk9xJpSMBHAdsk3YFANwBnNx+gJL1mjuy6mp1twMnS+/cieVDnZx3LfAlkhX0bis5N8tqblk+V3dXMjTrNidoy6KzVdBuAp5O37uCLm5WkHYXjAX2lfQ1kjt/jE6/rJvNKqNHSqy6Wt0PSbpMHlOySt4POznvDmAv4M8RsbzM51hV2c/V3ZUMzSrhtTjMzArKLWgzs4JygjYzKygnaDOzgnKCNjMrKCdoM7OCcoI2MysoJ2gzs4L6/xatgeMoXfK7AAAAAElFTkSuQmCC\n", "text/plain": [ "
" ] }, "metadata": { "needs_background": "light" }, "output_type": "display_data" } ], "source": [ "cm = confusion_matrix(forutsigelser, testkategorier)\n", "sns.heatmap(cm, annot=True, cmap=\"viridis\",\n", " xticklabels=[\"Adelie\", \"Chinstrap\", \"Gentoo\"], yticklabels=[\"Adelie\", \"Chinstrap\", \"Gentoo\"])\n", "plt.xlabel(\"Predikerte verdier\")\n", "plt.ylabel(\"Sanne verdier\")\n", "plt.savefig(\"forvirringsmatrise.pdf\", dpi = 600)" ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Hvis vi ikke benytter _ticklabels_, får vi verdiene 0, 1 og 2, som vi selv må tolke som de ulike artskategoriene etter rekkefølgen de har i datasettet. \n", "\n", "Totalt har vi brukt 20 \\% av datasettets 333 datapunkter til testing, det vil si 67 datapunkter. Matrisen sammenlikner de predikerte kategoriene og de sanne testkategoriene. Vi kan se at den for eksempel forutså at arten tilhørte Adelie 29 riktige ganger, men forutså Chinstrap (ringpingvin) én gang der arten skulle vært Gentoo (bøylepingvin)." ] }, { "cell_type": "markdown", "metadata": {}, "source": [ "Maskinlæring kan brukes til ufattelig mye rart, og det finnes mange ulike modeller som man kan prøve ut. Her var hovedpoenget å bli litt kjent med hva maskinlæring er og hvor enkelt det er å utføre enkel maskinlæring med dagens verktøy." ] } ], "metadata": { "kernelspec": { "display_name": "Python 3 (ipykernel)", "language": "python", "name": "python3" }, "language_info": { "codemirror_mode": { "name": "ipython", "version": 3 }, "file_extension": ".py", "mimetype": "text/x-python", "name": "python", "nbconvert_exporter": "python", "pygments_lexer": "ipython3", "version": "3.8.5" } }, "nbformat": 4, "nbformat_minor": 4 }