Go to file
Yohann Dedy b0f57b9a37 Scraping des liens et récupération des informations dans le même spider 2018-05-12 01:21:56 +02:00
CinemScraper Scraping des liens et récupération des informations dans le même spider 2018-05-12 01:21:56 +02:00
README.md TODO list 2018-05-11 00:50:55 +02:00
scrapy.cfg Premier commit 2018-05-10 19:31:59 +02:00

README.md

TODO

  • Utiliser l'objet item de scrapy pour définir les vidéos et ses champs lien tuto
  • Suivre les liens pour en récupérer le contenu lien tuto
  • Enregistrer le résultat sur une base de données
  • Vérifier/Eviter la présence de doublons sur la base de données
  • Utiliser youtube-dl pour sauvegarder les vidéos

Développements annexes

  • Créer un extracteur youtube-dl pour télécharger les vidéos de canal-u.tv
  • Créer un script d'import du contenu sur une instance Peertube