2018-05-10 22:50:55 +00:00
|
|
|
# TODO
|
|
|
|
|
|
|
|
|
|
* Utiliser l'objet item de scrapy pour définir les vidéos et ses champs [lien tuto](https://www.tutorialspoint.com/scrapy/scrapy_using_item.htm)
|
|
|
|
|
* Suivre les liens pour en récupérer le contenu [lien tuto](https://www.tutorialspoint.com/scrapy/scrapy_following_links.htm)
|
|
|
|
|
* Enregistrer le résultat sur une base de données
|
|
|
|
|
* Vérifier/Eviter la présence de doublons sur la base de données
|
|
|
|
|
* Utiliser youtube-dl pour sauvegarder les vidéos
|
|
|
|
|
|
|
|
|
|
# Développements annexes
|
|
|
|
|
|
|
|
|
|
* Créer un extracteur youtube-dl pour télécharger les vidéos de canal-u.tv
|
|
|
|
|
* Créer un script d'import du contenu sur une instance Peertube
|
