02_python/693@statistisches-amt-kanton-zuerich.ipynb

{"cells": [{"cell_type": "markdown", "id": "db7f08c1", "metadata": {}, "source": ["## Open Government Data, provided by **Canton Zurich**\n", "*Autogenerated Python starter code for data set with identifier* **693@statistisches-amt-kanton-zuerich**"]}, {"cell_type": "markdown", "id": "164c4327", "metadata": {}, "source": ["## Dataset\n", "# **Archiv Wahlresultate Nationalratswahlen**"]}, {"cell_type": "markdown", "id": "46d13c8b-4ac3-4e2f-940f-0c14ec5b7c0d", "metadata": {}, "source": ["## Description\n", "\n", "Ergebnisse der Erneuerungswahlen der z\u00fcrcherischen Mitglieder des Nationalrates"]}, {"cell_type": "markdown", "id": "cad813bb-c986-4bb4-b52b-f78bb608086f", "metadata": {}, "source": ["## Data set links\n", "\n", "[Direct data shop link for dataset](https://www.zh.ch/de/politik-staat/statistik-daten/datenkatalog.html#/datasets/693@statistisches-amt-kanton-zuerich)"]}, {"cell_type": "markdown", "id": "9d4813e9", "metadata": {}, "source": ["## Metadata\n", "- **Issued** `2020-07-07T16:01:00`\n- **Modified** `2024-03-28T09:19:23`\n- **Startdate** `2007-10-21`\n- **Enddate** `2023-10-22`\n- **Theme** `['http://publications.europa.eu/resource/authority/data-theme/GOVE']`\n- **Keyword** `['kanton_zuerich', 'nationalrat', 'nationalratswahlen', 'panaschierstimmen', 'politik', 'politische_parteien', 'wahlen', 'wahlergebnisse', 'wahlarchiv', 'demokratie', 'ogd']`\n- **Publisher** `['Statistisches Amt des Kantons Z\u00fcrich']`\n- **Landingpage** `https://www.zh.ch/de/politik-staat/wahlen-abstimmungen/national-staenderatswahlen.html`\n"]}, {"cell_type": "markdown", "id": "8a857d65", "metadata": {"jp-MarkdownHeadingCollapsed": true, "tags": []}, "source": ["## Imports and helper functions"]}, {"cell_type": "code", "execution_count": null, "id": "93b39602-1c1e-46d2-ae70-1716b1481e9b", "metadata": {"tags": []}, "outputs": [], "source": ["%matplotlib inline\n", "import matplotlib.pyplot as plt\n", "plt.style.use('ggplot')\n", "\n", "params = {\n", "    'text.color': (0.25, 0.25, 0.25),\n", "    'figure.figsize': [18, 6],\n", "   }\n", "\n", "plt.rcParams.update(params)\n", "\n", "import pandas as pd "]}, {"cell_type": "code", "execution_count": null, "id": "aa6611d7-e1c0-40a7-b0ff-601a8ef8439b", "metadata": {"tags": []}, "outputs": [], "source": ["# helper function for reading datasets with proper separator\n", "def get_dataset(url):\n", "    if url[-3:] != \"csv\":\n", "        print(\"The data set URL has no proper 'csv' extension. Reading the dataset might not have worked as expected.\\nPlease check the dataset link and adjust pandas' read_csv() parameters accordingly.\")\n", "    data = pd.read_csv(url, sep=\",\", on_bad_lines='warn', encoding_errors='ignore', low_memory=False)\n", "    # if dataframe only has one column or less the data is not comma separated, use \";\" instead\n", "    if data.shape[1] <= 1:\n", "        data = pd.read_csv(url, sep=';', on_bad_lines='warn', encoding_errors='ignore', low_memory=False)\n", "        if data.shape[1] <= 1:\n", "            print(\"The data wasn't imported properly. Very likely the correct separator couldn't be found.\\nPlease check the dataset manually and adjust the code.\")\n", "    return data"]}, {"cell_type": "markdown", "id": "02ce518f", "metadata": {}, "source": ["## Load data\n", "\n", "- The dataset has **`31` distribution(s)** in CSV format.\n", "- All available CSV distributions are listed below and can be read into a pandas dataframe."]}, {"cell_type": "code", "execution_count": null, "id": "0", "metadata": {"tags": []}, "outputs": [], "source": "# Distribution 0\n# Ktzhdistid               : 4844\n# Title                    : Zuordnungstabelle Listen \u2013 Parteien\n# Description              : Tabelle f\u00fcr die Zuordnung von Listen zu Parteien bei Nationalratswahlen im Kanton Z\u00fcrich. Die ausgewiesenen Parteien sind an die vom Bundesamt f\u00fcr Statistik (BFS) in Zeitreihen separat ausgewiesenen Parteien angelehnt.\n# Issued                   : 2023-11-22T13:49:34\n# Modified                 : 2023-11-29T09:23:41\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004844.csv')\n\n# Distribution 1\n# Ktzhdistid               : 1674\n# Title                    : Panaschierstatistik Erneuerungswahl Nationalrat 2007\n# Description              : Stimmen nach Herkunft f\u00fcr alle Kandidierenden der Nationalratswahl 2007 pro Gemeinde\n# Issued                   : 2020-07-07T16:24:18\n# Modified                 : 2023-11-22T14:07:57\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001674.csv')\n\n# Distribution 2\n# Ktzhdistid               : 4952\n# Title                    : Listenresultate Erneuerungswahl Nationalrat 2007\n# Description              : Anzahl erhaltener Stimmen pro Liste und Gebiet\n# Issued                   : 2023-11-29T11:56:22\n# Modified                 : 2023-11-29T11:56:22\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004952.csv')\n\n# Distribution 3\n# Ktzhdistid               : 4951\n# Title                    : Parteiresultate Erneuerungswahl Nationalrat 2007\n# Description              : Anzahl erhaltener Stimmen pro Partei und Gebiet. Die Zuteilung der Listen zu einer Partei erfolgt gem\u00e4ss der Ressource \"Zuordnungstabelle Listen \u2013 Parteien\" dieses Datasets.\n# Issued                   : 2023-11-29T11:56:18\n# Modified                 : 2023-11-29T11:56:18\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004951.csv')\n\n# Distribution 4\n# Ktzhdistid               : 1833\n# Title                    : Kandidierende Erneuerungswahl Nationalrat 2007\n# Description              : Informationen zu den Kandidierenden der Nationalratswahl 2007\n# Issued                   : 2021-06-02T08:10:02\n# Modified                 : 2021-06-02T08:10:02\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001833.csv')\n\n# Distribution 5\n# Ktzhdistid               : 1675\n# Title                    : Gemeindeinformationen Erneuerungswahl Nationalrat 2007\n# Description              : Gemeindespezifische Informationen wie BFS-Nummer und Stimmbeteiligung f\u00fcr die Nationalratswahl 2007\n# Issued                   : 2020-07-07T16:24:49\n# Modified                 : 2023-11-22T14:08:27\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001675.csv')\n\n# Distribution 6\n# Ktzhdistid               : 1676\n# Title                    : Listenverbindungen Erneuerungswahl Nationalrat 2007\n# Description              : Listenverbindungen und Unterlistenverbindungen der Nationalratswahl 2007\n# Issued                   : 2020-07-07T16:25:13\n# Modified                 : 2023-11-22T12:09:28\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001676.csv')\n\n# Distribution 7\n# Ktzhdistid               : 1677\n# Title                    : Panaschierstatistik Erneuerungswahl Nationalrat 2011\n# Description              : Stimmen nach Herkunft f\u00fcr alle Kandidierenden der Nationalratswahl 2011 pro Gemeinde\n# Issued                   : 2020-07-07T16:25:45\n# Modified                 : 2023-11-22T14:05:46\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001677.csv')\n\n# Distribution 8\n# Ktzhdistid               : 4950\n# Title                    : Listenresultate Erneuerungswahl Nationalrat 2011\n# Description              : Anzahl erhaltener Stimmen pro Liste und Gebiet\n# Issued                   : 2023-11-29T11:56:28\n# Modified                 : 2023-11-29T11:56:28\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004950.csv')\n\n# Distribution 9\n# Ktzhdistid               : 4949\n# Title                    : Parteiresultate Erneuerungswahl Nationalrat 2011\n# Description              : Anzahl erhaltener Stimmen pro Partei und Gebiet. Die Zuteilung der Listen zu einer Partei erfolgt gem\u00e4ss der Ressource \"Zuordnungstabelle Listen \u2013 Parteien\" dieses Datasets.\n# Issued                   : 2023-11-29T11:56:25\n# Modified                 : 2023-11-29T11:56:25\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004949.csv')\n\n# Distribution 10\n# Ktzhdistid               : 1834\n# Title                    : Kandidierende Erneuerungswahl Nationalrat 2011\n# Description              : Informationen zu den Kandidierenden der Nationalratswahl 2011\n# Issued                   : 2021-06-02T08:11:37\n# Modified                 : 2021-06-02T08:11:37\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001834.csv')\n\n# Distribution 11\n# Ktzhdistid               : 1678\n# Title                    : Gemeindeinformationen Erneuerungswahl Nationalrat 2011\n# Description              : Gemeindespezifische Informationen wie BFS-Nummer und Stimmbeteiligung f\u00fcr die Nationalratswahl 2011\n# Issued                   : 2020-07-07T16:26:25\n# Modified                 : 2023-11-22T14:06:57\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001678.csv')\n\n# Distribution 12\n# Ktzhdistid               : 1679\n# Title                    : Listenverbindungen Erneuerungswahl Nationalrat 2011\n# Description              : Listenverbindungen und Unterlistenverbindungen der Nationalratswahl 2011\n# Issued                   : 2020-07-07T16:26:51\n# Modified                 : 2023-11-22T12:06:50\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001679.csv')\n\n# Distribution 13\n# Ktzhdistid               : 1680\n# Title                    : Panaschierstatistik Erneuerungswahl Nationalrat 2015\n# Description              : Stimmen nach Herkunft f\u00fcr alle Kandidierenden der Nationalratswahl 2015 pro Gemeinde\n# Issued                   : 2020-07-07T16:27:16\n# Modified                 : 2023-11-22T14:03:53\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001680.csv')\n\n# Distribution 14\n# Ktzhdistid               : 4948\n# Title                    : Listenresultate Erneuerungswahl Nationalrat 2015\n# Description              : Anzahl erhaltener Stimmen pro Liste und Gebiet\n# Issued                   : 2023-11-29T11:56:36\n# Modified                 : 2023-11-29T11:56:36\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004948.csv')\n\n# Distribution 15\n# Ktzhdistid               : 4947\n# Title                    : Parteiresultate Erneuerungswahl Nationalrat 2015\n# Description              : Anzahl erhaltener Stimmen pro Partei und Gebiet. Die Zuteilung der Listen zu einer Partei erfolgt gem\u00e4ss der Ressource \"Zuordnungstabelle Listen \u2013 Parteien\" dieses Datasets.\n# Issued                   : 2023-11-29T11:56:32\n# Modified                 : 2023-11-29T11:56:32\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004947.csv')\n\n# Distribution 16\n# Ktzhdistid               : 1835\n# Title                    : Kandidierende Erneuerungswahl Nationalrat 2015\n# Description              : Informationen zu den Kandidierenden der Nationalratswahl 2015\n# Issued                   : 2021-06-02T08:16:41\n# Modified                 : 2021-06-02T08:16:41\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001835.csv')\n\n# Distribution 17\n# Ktzhdistid               : 1681\n# Title                    : Gemeindeinformationen Erneuerungswahl Nationalrat 2015\n# Description              : Gemeindespezifische Informationen wie BFS-Nummer und Stimmbeteiligung f\u00fcr die Nationalratswahl 2015\n# Issued                   : 2020-07-07T16:27:59\n# Modified                 : 2023-11-24T16:17:30\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001681.csv')\n\n# Distribution 18\n# Ktzhdistid               : 1682\n# Title                    : Listenverbindungen Erneuerungswahl Nationalrat 2015\n# Description              : Listenverbindungen und Unterlistenverbindungen der Nationalratswahl 2015\n# Issued                   : 2020-07-07T16:28:22\n# Modified                 : 2023-11-22T12:04:35\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001682.csv')\n\n# Distribution 19\n# Ktzhdistid               : 1683\n# Title                    : Panaschierstatistik Erneuerungswahl Nationalrat 2019\n# Description              : Stimmen nach Herkunft f\u00fcr alle Kandidierenden der Nationalratswahl 2019 pro Gemeinde\n# Issued                   : 2020-07-07T16:30:32\n# Modified                 : 2023-11-22T14:02:12\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001683.csv')\n\n# Distribution 20\n# Ktzhdistid               : 4946\n# Title                    : Listenresultate Erneuerungswahl Nationalrat 2019\n# Description              : Anzahl erhaltener Stimmen pro Liste und Gebiet\n# Issued                   : 2023-11-29T11:56:45\n# Modified                 : 2023-11-29T11:56:45\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004946.csv')\n\n# Distribution 21\n# Ktzhdistid               : 4945\n# Title                    : Parteiresultate Erneuerungswahl Nationalrat 2019\n# Description              : Anzahl erhaltener Stimmen pro Partei und Gebiet. Die Zuteilung der Listen zu einer Partei erfolgt gem\u00e4ss der Ressource \"Zuordnungstabelle Listen \u2013 Parteien\" dieses Datasets.\n# Issued                   : 2023-11-29T11:56:40\n# Modified                 : 2023-11-29T11:56:40\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004945.csv')\n\n# Distribution 22\n# Ktzhdistid               : 1836\n# Title                    : Kandidierende Erneuerungswahl Nationalrat 2019\n# Description              : Informationen zu den Kandidierenden der Nationalratswahl 2019\n# Issued                   : 2021-06-02T08:19:07\n# Modified                 : 2021-06-02T08:19:07\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001836.csv')\n\n# Distribution 23\n# Ktzhdistid               : 1684\n# Title                    : Gemeindeinformationen Erneuerungswahl Nationalrat 2019\n# Description              : Gemeindespezifische Informationen wie BFS-Nummer und Stimmbeteiligung f\u00fcr die Nationalratswahl 2019\n# Issued                   : 2020-07-07T16:31:03\n# Modified                 : 2023-11-24T16:17:02\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001684.csv')\n\n# Distribution 24\n# Ktzhdistid               : 1685\n# Title                    : Listenverbindungen Erneuerungswahl Nationalrat 2019\n# Description              : Listenverbindungen und Unterlistenverbindungen der Nationalratswahl 2019\n# Issued                   : 2020-07-07T16:31:25\n# Modified                 : 2025-02-03T15:33:20\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00001685.csv')\n\n# Distribution 25\n# Ktzhdistid               : 4705\n# Title                    : Panaschierstatistik Erneuerungswahl Nationalrat 2023\n# Description              : Stimmen nach Herkunft f\u00fcr alle Kandidierenden der Nationalratswahl 2023 pro Gemeinde\n# Issued                   : 2023-10-23T09:47:19\n# Modified                 : 2023-11-22T14:00:54\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004705.csv')\n\n# Distribution 26\n# Ktzhdistid               : 4944\n# Title                    : Listenresultate Erneuerungswahl Nationalrat 2023\n# Description              : Anzahl erhaltener Stimmen pro Liste und Gebiet\n# Issued                   : 2023-11-29T11:56:54\n# Modified                 : 2023-11-29T11:56:54\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004944.csv')\n\n# Distribution 27\n# Ktzhdistid               : 4703\n# Title                    : Kandidierende Erneuerungswahl Nationalrat 2023\n# Description              : Informationen zu den Kandidierenden der Nationalratswahl 2023\n# Issued                   : 2023-10-23T09:34:55\n# Modified                 : 2023-10-23T09:34:55\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004703.csv')\n\n# Distribution 28\n# Ktzhdistid               : 4943\n# Title                    : Parteiresultate Erneuerungswahl Nationalrat 2023\n# Description              : Anzahl erhaltener Stimmen pro Partei und Gebiet. Die Zuteilung der Listen zu einer Partei erfolgt gem\u00e4ss der Ressource \"Zuordnungstabelle Listen \u2013 Parteien\" dieses Datasets.\n# Issued                   : 2023-11-29T11:56:50\n# Modified                 : 2023-11-29T11:56:50\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004943.csv')\n\n# Distribution 29\n# Ktzhdistid               : 4704\n# Title                    : Gemeindeinformationen Erneuerungswahl Nationalrat 2023\n# Description              : Gemeindespezifische Informationen wie BFS-Nummer und Stimmbeteiligung f\u00fcr die Nationalratswahl 2023\n# Issued                   : 2023-10-23T09:37:40\n# Modified                 : 2023-11-24T16:16:24\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004704.csv')\n\n# Distribution 30\n# Ktzhdistid               : 4523\n# Title                    : Listenverbindungen Erneuerungswahl Nationalrat 2023\n# Description              : Listenverbindungen und Unterlistenverbindungen der Nationalratswahl 2023\n# Issued                   : 2023-09-04T11:43:54\n# Modified                 : 2023-11-22T11:57:57\n\ndf = get_dataset('https://www.web.statistik.zh.ch/ogd/daten/ressourcen/KTZH_00000693_00004523.csv')\n\n"}, {"cell_type": "markdown", "id": "4ce1f78f", "metadata": {}, "source": ["## Analyze data"]}, {"cell_type": "code", "execution_count": null, "id": "3e3dab86", "metadata": {}, "outputs": [], "source": ["# drop columns that have no values\n", "df.dropna(how='all', axis=1, inplace=True)"]}, {"cell_type": "code", "execution_count": null, "id": "841bd8d2", "metadata": {}, "outputs": [], "source": ["print(f'The dataset has {df.shape[0]:,.0f} rows (observations) and {df.shape[1]:,.0f} columns (variables).')\n", "print(f'There seem to be {df.duplicated().sum()} exact duplicates in the data.')"]}, {"cell_type": "code", "execution_count": null, "id": "75e73c96", "metadata": {}, "outputs": [], "source": ["df.info(memory_usage='deep', verbose=True)"]}, {"cell_type": "code", "execution_count": null, "id": "02f3df4d", "metadata": {}, "outputs": [], "source": ["df.head()"]}, {"cell_type": "code", "execution_count": null, "id": "a0d7d898", "metadata": {}, "outputs": [], "source": ["# display a small random sample transposed in order to see all variables\n", "df.sample(3).T"]}, {"cell_type": "code", "execution_count": null, "id": "786806dd", "metadata": {}, "outputs": [], "source": ["# describe non-numerical features\n", "try:\n", "    with pd.option_context('display.float_format', '{:,.2f}'.format):\n", "        display(df.describe(exclude='number'))\n", "except:\n", "    print(\"No categorical data in dataset.\")"]}, {"cell_type": "code", "execution_count": null, "id": "e744a6b6", "metadata": {}, "outputs": [], "source": ["# describe numerical features\n", "try:\n", "    with pd.option_context('display.float_format', '{:,.2f}'.format):\n", "        display(df.describe(include='number'))\n", "except:\n", "    print(\"No numercial data in dataset.\")"]}, {"cell_type": "code", "execution_count": null, "id": "7a65d95d", "metadata": {}, "outputs": [], "source": ["# check missing values with missingno\n", "# https://github.com/ResidentMario/missingno\n", "import missingno as msno\n", "msno.matrix(df, labels=True, sort='descending');"]}, {"cell_type": "code", "execution_count": null, "id": "fcc604b7", "metadata": {}, "outputs": [], "source": ["# plot a histogram for each numerical feature\n", "try:\n", "    df.hist(bins=25, rwidth=.9)\n", "    plt.tight_layout()\n", "    plt.show()\n", "except:\n", "    print(\"No numercial data to plot.\") "]}, {"cell_type": "code", "execution_count": null, "id": "e13cc6eb", "metadata": {}, "outputs": [], "source": ["# continue your code here..."]}, {"cell_type": "code", "execution_count": null, "id": "18886378", "metadata": {}, "outputs": [], "source": []}, {"cell_type": "code", "execution_count": null, "id": "59fce071", "metadata": {}, "outputs": [], "source": []}, {"cell_type": "code", "execution_count": null, "id": "f42f25aa", "metadata": {}, "outputs": [], "source": []}, {"cell_type": "markdown", "id": "c6b87d83", "metadata": {}, "source": ["**Contact**: Statistisches Amt des Kantons Z\u00fcrich | Wahlen & Abstimmungen | wahlen@statistik.ji.zh.ch"]}], "metadata": {"kernelspec": {"display_name": "Python 3 (ipykernel)", "language": "python", "name": "python3"}, "language_info": {"codemirror_mode": {"name": "ipython", "version": 3}, "file_extension": ".py", "mimetype": "text/x-python", "name": "python", "nbconvert_exporter": "python", "pygments_lexer": "ipython3", "version": "3.8.15"}}, "nbformat": 4, "nbformat_minor": 5}