https://github.com/geotribu/geopoussetr

Épousseter, dépoussiérer, reformater, nettoyer, analyser les revues de presse Geotribu.
https://github.com/geotribu/geopoussetr

geographical-information-system news text-mining

Last synced: 3 months ago
JSON representation

Épousseter, dépoussiérer, reformater, nettoyer, analyser les revues de presse Geotribu.

• Host: GitHub
• URL: https://github.com/geotribu/geopoussetr
• Owner: geotribu
• Created: 2021-10-15T06:41:52.000Z (almost 4 years ago)
• Default Branch: master
• Last Pushed: 2021-10-20T05:41:51.000Z (almost 4 years ago)
• Last Synced: 2025-06-30T02:48:24.010Z (4 months ago)
• Topics: geographical-information-system, news, text-mining
• Language: R
• Homepage:
• Size: 39.1 KB
• Stars: 0
• Watchers: 2
• Forks: 0
• Open Issues: 1
• Metadata Files:
  • Readme: README.md

Awesome Lists containing this project

README

          
# Géotribu

Reformater, nettoyer, analyser les revues de presse [Géotribu](http://static.geotribu.fr/)

## [`reformat.R`](https://github.com/datagistips/geotribu/blob/master/reformat.R)

Issue : https://github.com/geotribu/website/issues/443  

PR : https://github.com/geotribu/website/pull/444  

### Exemples de rdp mal formatées

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-01-21.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-01-28.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-02-04.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-02-11.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-03-18.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-05-13.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-06-03.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-06-24.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-07-08.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-07-15.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-07-22.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-08-12.md **

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-08-26.md

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-09-09.md **

- https://raw.githubusercontent.com/geotribu/website/fix/old_rdp/content/rdp/2011/rdp_2011-09-16.md - espaces

- ...

#### 21 Janvier 2011

- Avant : https://github.com/geotribu/website/blob/fenfyx2/content/rdp/2011/rdp_2011-01-21.md

- Après : https://github.com/geotribu/website/blob/fenfyx2/content/rdp/2011/rdp_2011-01-21-new.md

- Log : https://github.com/geotribu/website/blob/fenfyx2/content/rdp/rdp_2011-01-21-log.md

#### 23 Décembre 2011

- Avant : https://static.geotribu.fr/rdp/2011/rdp_2011-12-23/  

- Après : https://preview-pullrequest-444--geotribu-preprod.netlify.app/rdp/2011/rdp_2011-12-23/

### Voir les modifs

https://preview-pullrequest-444--geotribu-preprod.netlify.app/rdp/2011/rdp_2011-12-23/

### Cas traités

Reformate les cas suivants :

	### L'Open Data en image** lorem ipsum

	## L'Open Data en image** lorem ipsum

	L'Open Data en image** lorem ipsum

	 **OpenLayers Mobile**  lorem ipsum

	![logo-gvsig_150_14.gif](http://geotribu.net/sites/default/files/Tuto/img/divers/logo-gvsig_150_14.gif)**gvSIG** lorem ipsum

## TODO

- [ ] Créer des fonctions pour reformatTitle, relevelTitle

- [ ] Repositionner les thumbnails

- [x] Reformater les titres

- [ ] Trouver les liens morts : images,...

- [ ] Créer un JSON depuis une rdp :

	- thumbnail

	- catégorie

	- liens

	- images

	- technos identifiées

- Libérer le JSON

- [ ] Repositionner le log

- [ ] relocateThumbs KO

## VIZ

- Compter les catégories barplot avec d3

- voir adjectif après carte

- voir les noms de domaines les plus fréquents

- voir les technos dont on a parlé

- suivre la quantit? de rdps dans le temps, là où il n'y en a pas

- voir le mot clé QGIS, MapBox, IGN, OpenData, Data, Data Science, Intelligence artificielle

- Les jours de publication de la rdp

- beeswarm ou word cloud temporel

- topic modeling ?

- Nb de mots

- Nb de news

- En fonction du logo : type de news

- Transformer les news en JSON

- Sortie de la semaine en niveau 4, doit être en niveau 2..