166-Amazon AWS CLI Open Data Metafiles in een database inlezen

Getting the iNaturalist AWS Open Data metadata files and working with them in a database

  1. Ophalen metadata files vanaf Amazon AWS (metCommand Line Interface)
  2. Selecteren Data in SQLite database (using DB Browser)
  3. Work with the data in a SpatiaLite database (using QGIS and DB Browser)

Open DataSet met Taxonomie gegevens

As you may have heard, iNaturalist officially launched its “iNaturalist Licensed Observation Images” open dataset on AWS on 15 April 2021. Most of the dataset consists of CC-licensed and non-copyrighted images from observations in iNaturalist, but there are also 4 metadata files that go along with these image files which provide additional information about the photos, associated observations, associated observers, and iNaturalist’s taxonomy.
https://forum.inaturalist.org/t/getting-the-inaturalist-aws-open-data-metadata-files-and-working-with-them-in-a-database/22135
https://www.youtube.com/results?search_query=tiny+world

Open DataSet met Taxonomie gegevens

https://carto.com/platform/
This is because the annotations are specific to different types of organisms. You need a more refined ID to have different life stage options because different types of insects have different life stages.

  1. Tips & Tricks with iNat data in Excel combined with Useful API Endpoints
    iNaturalist actually offers 3 APIs right now (as of early 2021). The table below summarizes them and includes documentation links that provide detailed information about each API, including lists of endpoints and associated parameters. Unless otherwise noted, for the rest of this tutorial, we’ll discuss only the v1 API, since it’s the current one.

  2. Use Excel for iNaturalist data 2 workflows:
    Filter for observations in the Explore page, and copy the count of observations, species, or observers from the screen to Excel. To get counts by group (ex. observation count by month), vary the filter criteria in the Explore page for each member of the group (ex. for month, January, February, March, etc.), and collect each variation’s count(s) in Excel.

  3. Export observation details as a CSV and then aggregate the data in Excel (using the COUNT/COUNTIF function, PivotTables, etc.) to get either a total count (of observations, species, or observers) or a count by group (ex. obs count by observer, obs count by species, etc.)

  4. https://forum.inaturalist.org/t/using-excel-api/22378


  5. Tips & Tricks MAPPINESS Create Maps using iNaturalist
    The iNaturalist API provides 3 kinds of polygon tiles and 4 kinds of observation tiles, as summarized below. (There are also 4 kinds of UTF grids that each pair with an observation tile set, but those are beyond the scope of this tutorial and so will not be covered here.)
    Each individual map tile can be retrieved via a specific API request URL. The request templates noted above have various items in curly braces (ex. {z}) which are replaced by appropriate values when making an actual API request. Additional parameters can be added to the end of the request template / URL to apply additional filters.
    https://forum.inaturalist.org/t/in-pursuit-of-mappiness-part-1/21864

  6. Tips & Tricks with Amazon AWS metadatafiles CC0
    How to download the metadata files, as well as describe how to work with the data in a SQLite (/SpatiaLite) database. (PostgreSQL is a very fine DBMS that can handle some really complex things, but SQLite may be easier for even beginners to use and will still provide plenty of power for most use cases.)

    TUTORIAL metadata files from AWS:

    1. Get the metadata files from AWS (using AWS CLI)
    2. Work with the data in a SQLite database (using DB Browser)
    3. Work with the data in a SpatiaLite database (using QGIS and DB Browser)
    4. Additional notes
    5. https://forum.inaturalist.org/t/getting-the-inaturalist-aws-open-data-metadata-files-and-working-with-them-in-a-database/22135


  7. 15 April robuust, veerkrachtig en stuurbaar watersysteem: het verhaal van de Aa,
    Verhaal van de Aa is de vierde in een reeks webinars over infiltratie, waterconservering en waterbuffering in beekdallandschappen. De organisatie is wederom in handen van de CoP Beken en Rivieren, die wordt ondersteund door STOWA.
    https://www.stowa.nl/agenda/webinar-cop-beken-en-rivieren-naar-een-robuust-veerkrachtig-en-stuurbaar-watersysteem-het
    webinars over infiltratie, waterconservering en waterbuffering in beekdallandschappen. De organisatie is wederom in handen van de CoP Beken en Rivieren, die wordt ondersteund door STOWA.

    https://www.stowa.nl/agenda/webinar-cop-beken-en-rivieren-naar-een-robuust-veerkrachtig-en-stuurbaar-watersysteem-het



  8. Webinar - 21.04.21 - Een sterker Europa in de wereld, Europa - Tom Vandenkendelaere - Europees buitenlands beleid

    Webinar - 21.04.21 - Een sterker Europa in de wereld, Europa - Tom Vandenkendelaere - Europees buitenlands beleid


  9. De Nacht van de Filosofie 2021
    Dit jaar beleef je de Nacht van de Filosofie online! Met boeiende lezingen, te gekke kunst, kritische columns en interessante interviews. Deze keer staat het thema ‘De natuur was hier’ centraal. Het online evenement is gratis te volgen.

    Over het thema ‘De natuur was hier’
    Diersoorten sterven uit, onze grond verschraalt en bossen staan in brand. Door de overwoekering van de mens verdwijnt de natuur op rap tempo. Filosofen noemen dit tijdperk Antropoceen, oftewel het tijdperk van de mens. Overal waar wij komen laten we onze voetsporen achter. We laten plastic slingeren, lozen olie in de zee en leven momenteel met een dodelijk virus. Maar wie zijn wij ten opzichte van de natuur?

    Is er een verschil tussen menselijke en niet-menselijke natuur? Verdient de mens een aparte status ten opzichte van andere soorten? Is het leven van een boom, dier of rivier net zo belangrijk als een mens?

    Genoeg voer voor wetenschappers, filosofen en kunstenaars voor een avondje online filosoferen. In verschillende settings word je getrakteerd op muziek, talks en interviews. Zo vanaf je scherm de huiskamer in.

    De Nacht van de Filosofie 2021



  10. 166-Amazon AWS CLI Open Data Metafiles in een database inlezen
    Publicado el abril 26, 2021 11:45 TARDE por ahospers ahospers

    Comentarios

    No hay comentarios todavía.

    Agregar un comentario

    Acceder o Crear una cuenta para agregar comentarios.