Costruzione Utensili

La Cultura è la nostra Natura, siamo cacciatori e raccoglitori in un mondo di dati.

Prerequisiti

• Un'idea vaga di HTML
• Saper scrivere, o anche solo leggere un qualsiasi linguaggio

Programma

Serie di pomeriggi di sperimentazione libera, segue workshop rivolto al pubblico.

Temi

Ancora da definire, ma a grandi linee:

• Orientarsi con l'inspector del Browser
• Rudimenti di web scraping con Python:
  • GET e fake-user agent con requests
  • Beautiful-soup e/o lxml per il parsing delle pagine
  • Web spider con scrapy
• wget e qualcosa di bash?

Riferimenti Sparsi

• https://elitedatascience.com/python-web-scraping-libraries

• https://first-web-scraper.readthedocs.io/en/latest/

• https://medium.com/@kaismh/extracting-data-from-websites-using-scrapy-e1e1e357651a

Codice

• Stampa l'elenco degli spazi di Macao:

     1 #!/usr/bin/env python3
     2 import requests
     3 from bs4 import BeautifulSoup
     4 
     5 url = "http://www.macaomilano.org/spip.php?rubrique18"
     6 r = requests.get(url)
     7 page = r.text
     8 
     9 soup = BeautifulSoup(page, "html.parser")
    10 
    11 h2s = soup.findAll("h2")
    12 spazi = [h2.text for h2 in h2s]
    13 
    14 print("\n".join(spazi))