Yohann
/
CFVideoScraper
1
0
Fork 0
Code Issues Pull Requests Releases Wiki Activity
12 Commits
1 Branch
0 Tags
303 KiB
Go to file
Yohann Dedy befa141eb2 Amélioration du formatage des données extraites 
Les tags, descriptions et biographies sont séparés par des sauts de
lines pour faciliter leur import dans des tables dédiées de la base de
données.
 		2019-10-19 20:58:39 +02:00
CinemScraper Amélioration du formatage des données extraites 2019-10-19 20:58:39 +02:00
README.md TODO list 2018-05-11 00:50:55 +02:00
requirements.txt Ajout de requirements.txt 2019-01-28 01:13:26 +01:00
scrapy.cfg Premier commit 2018-05-10 19:31:59 +02:00

README.md

TODO

  • Utiliser l'objet item de scrapy pour définir les vidéos et ses champs lien tuto
  • Suivre les liens pour en récupérer le contenu lien tuto
  • Enregistrer le résultat sur une base de données
  • Vérifier/Eviter la présence de doublons sur la base de données
  • Utiliser youtube-dl pour sauvegarder les vidéos

Développements annexes

  • Créer un extracteur youtube-dl pour télécharger les vidéos de canal-u.tv
  • Créer un script d'import du contenu sur une instance Peertube