Le but de discours_scraper.py est de rassembler sous la forme d'un fichier CSV les récents discours et allocutions prononcés par le gouvernement français à partir du lien suivant: discours
Le résultat est extrait sur la base des colonnes suivantes :
titre,date,discours
Vous pouvez décider du nombre de pages à scraper en renseignant les variables de classe pages_begin et pages_end.
Ce scraper a été réalisé dans le cadre d'une auto-formation à l'analyse de données textuelles.
- Selenium
- ChromeDriverManager pour éviter de gérer les incompabilités entre la version actuelle de Chrome et celle du driver
Le script est basé, comme tous les scrapers, sur l'architecture d'un site web. Il est possible que cette dernière change, ou que les sélecteurs css soient à updater. Des ajustements peuvent donc être nécessaires pour récolter les données.
The purpose of discours_scraper.py is to gather in the form of a CSV file the recent speeches delivered by the French government from the following link: speech
The result is extracted on the basis of the following columns:
titre,date,discours
You can choose the number of pages to be scraped by filling the class variables pages_begin and pages_end.
This scraper was made as part of a self-training in the analysis of textual data.
- Selenium
- ChromeDriverManager to avoid managing incompatibilities between the current version of Chrome and the driver version.
The script is based, like all scrapers, on the architecture of a website. It is possible that this architecture changes, or that the css selectors need to be updated. Adjustments may therefore be necessary to collect the data.