Ce site est optimisé pour être consulté depuis un navigateur moderne dans lequel JavaScript est activé.

aspiratv: Télécharger le replay de France TV, Gulli et Arte

jfcassan

DRbuntu91 a écritBonjour

Ca fait du sens ce que je décrit?

A part ce petit pb. tout va bien!!!

Encore bravo et merci

Merci pour ce retour.
Oui, ça fait du sens... La gestion du multitâche est compliquée, et les barres de progressions ajoutent à la complexité.
FFMPEG parfois s'emballe aussi.
J'y travaille...
++

DRbuntu91

Bonjour

jfcassan a écritLa gestion du multitâche est compliquée, et les barres de progressions ajoutent à la complexité.

Dans ce ce cas pourquoi ne pas sérialiser les téléchargements, cad. au lancement lister les épisodes trouvés puis ensuite télécharger un épisode a la fois?

jfcassan

DRbuntu91 a écritBonjour
Dans ce ce cas pourquoi ne pas sérialiser les téléchargements, cad. au lancement lister les épisodes trouvés puis ensuite télécharger un épisode a la fois?

C'est justement l'un des buts de ce projet : apprendre à gérer le multi-tâche pour maximaliser l'utilisation de la bande passante disponible.
Mais, je pense que c'est maintenant correct dans la version 0.1.0 que je viens de diffuser.

Les nouveautés:
- Réécriture du connecteur pour Gulli suite au changement du site web
- Gestion correcte du Ctl+C: les fichiers pas terminés sont supprimés
- Contrôle du nombre de téléchargements simultanés -max-tasks . Par défaut, il y autant de tâches simultanées qu'il y a de coeur
- Ajout de l'option -headless pour générer une log compréhensible sans les barres de progression
- Suppression de l'option -service devenue inutile. Il suffit de lancer le programme par cron, en mode headless
- Barre de progression plus explicites, avec le nom complet de l'épisode en cours de téléchargement

francetv               16/ 42 [=======================>--------------------------------------] 
 ∙●∙   4.3MB/s       Les lapins crétins   invasion/Season 01/Les lapins crétins - invasion - s01e03 - Poulpe crétin.mp4
 ∙●∙   7.5MB/s       Les lapins crétins   invasion/Season 01/Les lapins crétins - invasion - s01e02 - Omelette crétine.mp4
 ●∙∙   6.9MB/s       Les lapins crétins   invasion/Season 04/Les lapins crétins - invasion - s04e213110296 - Mad lapin et l'île aux bretzels.mp4
 ∙●∙   5.7MB/s       Les lapins crétins   invasion/Season 04/Les lapins crétins - invasion - s04e213110295 - Mad lapin et l'île aux bretzels.mp4
 ∙∙●   2.0MB/s       Les lapins crétins   invasion/Season 04/Les lapins crétins - invasion - s04e213110294 - Mad lapin et l'astrolabe de Léonard.mp4
 ●∙∙   0.0b/s        Les lapins crétins   invasion/Season 04/Les lapins crétins - invasion - s04e213110293 - Naufrage crétin.mp4
 ●∙∙   0.0b/s        Les lapins crétins   invasion/Season 04/Les lapins crétins - invasion - s04e09 - Echange de cerveaux crétins.mp4
 ●∙∙   0.0b/s        Les lapins crétins   invasion/Season 04/Les lapins crétins - invasion - s04e08 - Lapin princesse.mp4

A télécharger ici.

DRbuntu91

Bravo!!!
Je testerai la semaine prochaine (je supprimerai 2 épisodes)

DRbuntu91

Bonjour
J'en ai profité d'une heure libre pour tester ce matin la nouvelle version et le téléchargement de deux épisodes en parallèle marche parfaitement bien!
Bravo et merci encore

jfcassan

Bonjour,

La version v0.2.0 ajoute quelques améliorations:

- Correction du connecteur ARTETV pour suivre les modifications du site.
- Meilleur nommage des épisodes d'ARTE
- Possibilité de préciser l'émission voulue sur la ligne de commande, sans fournir un fichier de configuration
- Plus de multi-taches: le téléchargement démarre alors que l'exploration du site du provider n'est pas terminée. Très visible pour ARTETV.
- Il est toujours possible d'utiliser un fichier de configuration pour un fonctionnement en tâche de fond.

La commande à donner devient :

./aspiratv -provider=francetv -destination=/${home}/Videos/Cartoons download "Lapins crétins"

DRbuntu91

@jfcassan: j'ai téléchargé la nouvelle version et le téléchargement des derniers épisodes de "Les racines et des ailes" est en cours.
Personnellement j'aime bien le mode "Terminal", c'est donc uniquement ce mode que j'ai testé.
Quelques remarques:
- au début je n'étais pas dans le répertoire ou est installé aspiratv. Du coup ça me donnait un message confus (je pensais que s'était le répertoire de destination qu'il ne trouvait pas alors que s'était le répertoire d'installation.
- au démarrage il me liste les vidéos qui sont déjà téléchargé (par rapport a ce qu'il trouve sur le site de FranceTV)
- par-contre tu ne liste plus les épisodes en cours de téléchargement (et leur progression) - actuellement 3 épisodes sont en cours. C'est voulu ou une régression?
Encore merci et bravo!

jfcassan

Le programme ne garde pas en mémoire ce qui a été téléchargé. Il interroge le serveur, fait la liste des vidéos qui correspondent aux recherches, et si le fichier est déjà présent sur le disque, il passe au suivant.
Mais, j'ai cassé un truc pour FranceTV.
Je regarde.
Pour info, ça marche pas mal avec Arte.
++

jfcassan

Bonjour, la version v0.3.0 corrige quelques points:
- Chargement de la vignette de l'épisode FRANCETV
- Affichage du nom du fichier téléchargé sans le chemin... Ça fait moins désordre
- Changement des règles de nommage des épisodes FRANCETV. Soit le webservice donne la saison et l'épisode explicitement soit j'utilise la date de diffusion.
- Possibilité d'écrire les messages de log dans un fichier séparé.

 ∙∙● Pulling francetv [================================================]   51/51
 ●∙∙   5.4MB/s       Les Dalton - s03e35 - Miss Betty se rebelle.mp4
 ●∙∙   3.2MB/s       Les Dalton - s03e33 - Les Lapins Dalton.mp4
 ●∙∙   2.1MB/s       Les Dalton - s03e29 - Les Dalton en première page.mp4
 ●∙∙   4.4MB/s       Les Dalton - s03e34 - Triple idiot.mp4
 ●∙∙   3.0MB/s       Les Dalton - s03e31 - Jenny la terreur.mp4
 ●∙∙   5.3MB/s       Les Dalton - s03e30 - Tu seras un Indien mon fils.mp4
 ●∙∙   6.3MB/s       Les Dalton - s03e28 - Mariage à l'indienne.mp4
 ●∙∙   3.7MB/s       Les Dalton - s03e32 - Le passe-muraille.mp4

Toujours sur FRANCETV, certaines émissions sont inaccessibles par les moyens que j'utilise. Ex les séries de France Ô, Tout le monde veut prendre sa place.
Pour l'instant pas de solution.

++

DRbuntu91

J'ai téléchargé la dernière version - test en cours.

simulot

Bonjour, la version v0.4.0 apporte les améliorations suivantes :

Les fichiers de plusieurs fournisseurs peuvent être téléchargés simultanément.
Le téléchargement commence dès qu'un nouvel épisode est trouvé, sans attendre que la recherche soit complète
Meilleure présentation des barres de progressions
Le programme s’interrompt proprement par un ^C. Les fichiers en cours de téléchargement sont supprimés, les recherches en cours sur les serveurs sont interrompues immédiatement.

https://raw.githubusercontent.com/simulot/aspiratv/master/_images/download.svg?sanitize=true

[sub]Modération : merci d'utiliser des images de petite taille (300x300) ou des miniatures pointant sur ces images (Des hébergeurs comme Toile Libre ou TDCT'Pix le permettent).[/sub]

DRbuntu91

Bonjour,
J'ai actuellement un téléchargement en cours avec la dernière version (0.4.0) toujours le programme "Des racines et des ailes" de FranceTV
Il me télécharge actuellement 3 épisodes alors qu'il y a seulement un épisode que je n'ai pas. En réalité je vois que dans le nom de la vidéo qu'il télécharge il y a la date de diffusion, et comme FranceTV ré-diffuse souvent le même épisode c'est vu comme "a télécharger". Il y a moyen de l'éviter?

Voici mon fichier de conf.

"WatchList": [
    {
      "Show": "Des Racines et des Ailes",
      "Title": "",
      "Pitch": "",
      "Provider": "francetv",
      "Destination": "Vidéos"
    }
  ]

simulot

DRbuntu91 a écritBonjour,
J'ai actuellement un téléchargement en cours avec la dernière version (0.4.0) toujours le programme "Des racines et des ailes" de FranceTV
Il me télécharge actuellement 3 épisodes alors qu'il y a seulement un épisode que je n'ai pas. En réalité je vois que dans le nom de la vidéo qu'il télécharge il y a la date de diffusion, et comme FranceTV ré-diffuse souvent le même épisode c'est vu comme "a télécharger". Il y a moyen de l'éviter?

Voici mon fichier de conf.
"WatchList": [
    {
      "Show": "Des Racines et des Ailes",
      "Title": "",
      "Pitch": "",
      "Provider": "francetv",
      "Destination": "Vidéos"
    }
  ]

J'ai changé la numérotation des épisodes. Jusqu'alors, je faisais un calcul avec la date pour fabriquer un numéro d'épisode unique.
En relisant les docs de Plex et d'Emby, je me suis rendu compte que l'on pouvait utiliser la date de diffusion comme numéro d'épisode d'une émission hebdomadaire.

La règle que j'utilise est :
1/ Si je trouve explicitement le numéro d'épisode, je prends ce numéro, sinon je prends la date de diffusion
2/ Si je trouve explicitement le numéro de saison, je prends cette saison, sinon je prends l'année de la date de diffusion

Donc, en effet, après le passage en v0.4.0, les épisodes sont téléchargés de nouveau.
Cela devrait rentrer dans l'ordre tout seul.

++

DRbuntu91

Bonjour
Ma question portait sur les ré-diffusions d'un épisode (ce qui arrive souvent avec (Les racines et des ailes).
Tu penses que avec ta logique tu récupères la date de la première diffusion (qui remonte parfois a plusieurs mois voir plus) ou celle de la ré-diffusion (qui est une date récente)?
En tout cas je vais continuer a observer le comportement avec la version v0.4.0 et je ferai un retour ultérieurement.
Merci encore

simulot

DRbuntu91 a écritBonjour
Ma question portait sur les ré-diffusions d'un épisode (ce qui arrive souvent avec (Les racines et des ailes).
Tu penses que avec ta logique tu récupères la date de la première diffusion (qui remonte parfois a plusieurs mois voir plus) ou celle de la ré-diffusion (qui est une date récente)?
Merci encore

En fait, cela dépend de la base de données de FranceTV. J'utilise le champ "diffusé le ..." qui semble être la dernière rediffusion de l'épisode.

Ce matin, cela donnait :

$ ./aspiratv -provider=francetv -destination=$HOME/Videos/DL download "Des racines et des ailes"
aspiratv: dev, commit none, built at unknown
Pulling francetv     [------------------------------------------------]   0/6
 ∙∙●   4.6MB/s       Des Racines et Des Ailes - 2019-09-18 - La Tour Eiffel a 130 ans.mp4
 ∙∙●   4.6MB/s       Des Racines et Des Ailes - 2019-09-19 - Passion patrimoine - Sur les chemins de Compostelle.mp4
 ∙∙●   4.6MB/s       Des Racines et Des Ailes - 2019-09-15 - Passion patrimoine - Les Alpes côté sud.mp4
 ∙∙●   4.7MB/s       Des Racines et Des Ailes - 2019-09-15 - Au fil du Gardon.mp4
 ∙∙●   5.2MB/s       Des Racines et Des Ailes - 2019-09-18 - Passion patrimoine - Le goût de la Bretagne.mp4
 ∙∙●   5.0MB/s       Des Racines et Des Ailes - 2019-09-19 - Des terroirs des châteaux et des vignes.mp4

Actuellement, je vérifie si le fichier "Des Racines et Des Ailes - 2019-09-18 - Passion patrimoine - Le goût de la Bretagne.mp4" est déjà présent sur le disque. C'est sûr qu'en cas de rediffusion d'une émission déjà téléchargée à une autre date, je considère que c'est un nouvel épisode.

Je vais introduire le changement suivant : tester si il y déjà un fichier nommé "Des Racines et Des Ailes - * - Passion patrimoine - Le goût de la Bretagne.mp4". Comme cela, si il existe déjà un épisode avec le même nom mais à une date différente, il ne sera pas re-téléchargé.

++

simulot

Merci DRbuntu91 pour la suggestion.

Maintenant, si un épisode est rediffusé, même plusieurs années après, et si il a gardé le même titre, il ne sera pas re-téléchargé.
C'est disponible dans la version v0.5.2 (https://github.com/simulot/aspiratv/releases/tag/v0.5.2)

DRbuntu91

Bonjour
J'ai l'impression qu'il y a un pb. avec la derniere version v0.5.2 - elle ne trouve rien alors qu'il y avait des nouveaux épisodes
Dans mon Termial j'ai utilisé la commande ./aspiratv sans modifier le fichier de conf.
Ça me listait ceci:

CLEVO:~/MesApplications/AspiraTV$ ./aspiratv
aspiratv: 0.5.2, commit 9a12aa1, built at 2019-09-22T09:47:14Z

En remettant l'ancienne version j'ai ceci:

CLEVO:~/MesApplications/AspiraTV$ ./aspiratv
aspiratv: 0.4.0, commit 3117979, built at 2019-09-14T16:48:45Z
Pulling francetv     [------------------------------------------------]   0/4
 ∙●∙   1.0b/s        Des racines et des ailes - 2019-09-25 - Au fil du Gardon.mp4
 ●∙∙   264.8KB/s     Des racines et des ailes - 2019-09-22 - Sur le canal du Midi.mp4
 ●∙∙   1.0b/s        Des racines et des ailes - 2019-09-22 - Passion patrimoine - Mon village en Provence.mp4

Bien-sur cette ancienne version a le pb. qu'on connaît déjà, cad. j'avais déjà "Au fil du Gardon.mp4" qui a été rediffusé le 25/09

simulot

DRbuntu91 a écritBonjour
J'ai l'impression qu'il y a un pb. avec la derniere version v0.5.2 - elle ne trouve rien alors qu'il y avait des nouveaux épisodes

Bonjour, je ne reproduis pas le problème avec la v0.5.2.
C'est étonnant qu'il n'y ait pas le message "Pulling francetv"

~ ▶ Development ▶ g ▶ a ▶ cmd ▶ aspiratv ▶ ⚓ v0.5.2 ▶
$ ./aspiratv
aspiratv: dev, commit none, built at unknown
Pulling gulli        [------------------------------------------------] completed
Pulling francetv     [------------------------------------------------]   0/2
Pulling artetv       [------------------------------------------------] completed
 ∙∙●   7.4MB/s       Des Racines et Des Ailes - 2019-09-25 - Trésors de la Riviera.mp4
 ∙∙●   7.2MB/s       Des Racines et Des Ailes - 2019-09-25 - Au fil du Gardon.mp4

simulot

Bonjour, la version v0.6.1 améliore l'affichage des barres de progression:

aspiratv: dev, commit none, built at unknown
 [----------] completed      Pulling gulli
 [----------]     0/  3      Pulling francetv
 [----------] completed      Pulling artetv
 [====>-----]  6.7MB/s       Des Racines et Des Ailes/Season 2019/Des Racines et Des Ailes - 2019-09-22 - Sur le canal du Midi.mp4
 [=>--------]  6.6MB/s       Des Racines et Des Ailes/Season 2019/Des Racines et Des Ailes - 2019-09-25 - Trésors de la Riviera.mp4
 [===>------]  6.4MB/s       Des Racines et Des Ailes/Season 2019/Des Racines et Des Ailes - 2019-09-25 - Au fil du Gardon.mp4

DRbuntu91

Bonjour
Je viens de faire un test avec la dernière version et j'ai toujours le même comportement - il me trouve le même épisode qui a déjà été diffusé mais rediffusé récemment.
J'utilise cette syntaxe:

CLEVO:~/MesApplications/AspiraTV$ ./aspiratv -provider=francetv -destination=$HOME/Vidéos download "Des Racines et des Ailes"
aspiratv: 0.6.1, commit 7faa8a8, built at 2019-09-26T19:53:24Z
 [----------]     0/  3      Pulling francetv
 [----------]  241.6KB/s     Des Racines et Des Ailes - 2019-10-10 - Passion patrimoine - Les Alpes côté sud.mp4
 [----------]  207.5KB/s     Des Racines et Des Ailes - 2019-10-08 - Passion patrimoine - Sur les routes de l'Hérault.mp4
 [----------]  119.2KB/s     Des Racines et Des Ailes - 2019-10-10 - Trésors de la Riviera.mp4

J'ai déjà les trois épisodes qu'il trouve mais bien sur avec une date plus ancienne. Il y a une solution pour ça?
PS: je comprend que France TV retransmet en permanence d'anciens épisodes pour remplir sa grille!

« Page précédente Page suivante »