Fedora-Fr - Communauté francophone Fedora - Linux

Communauté francophone des utilisateurs de la distribution Linux Fedora.

  

Dernière news : Arrêt de maintenance pour Fedora 28

#1 10/11/2018 08:11:41

chepioq
FEDORA FOR EVER
Lieu : a l'est de marseille
Inscription : 07/06/2006
Messages : 7 278

pour info : --user-agent="Mozilla"

Bonjour
Pour un de mes conky j'utilise une image de la lune que je récupère sur le site static.die.net
J'utilisai cette ligne de commande, qui fonctionnai depuis des années :
wget --user-agent="Mozilla" http://static.die.net/moon/576.jpg
Mais depuis quelques jours cela ne fonctionnai plus avec comme erreur :
2018-11-10 07:05:26 erreur 503 : Service Temporarily Unavailable.

Pourtant en allant sur le site je voyais bien que cette image était là.

Après réflexion j'ai enlevé de ma ligne de commande -user-agent="Mozilla" et maintenant cela fonctionne.
Je suppose que cela est du à une modification sur ce site, je vous communique cette information si quelqu'un a ce genre de soucis.


Tout est dans tout... et réciproquement...
C'est quoi un chalumeau??? C'est un dromaludaire à deux bosses...
Quand le sage montre la lune l'imbécile regarde le doigt...
1277887812.gif

Hors ligne

#2 10/06/2019 18:19:47

C@sp€r
Bricoleur Fedora
Modérateur
Lieu : /dev/loop
Inscription : 09/04/2010
Messages : 720
Site Web

Re : pour info : --user-agent="Mozilla"

Salut,

oui il s'agit d'une protection proposée par Cloudflare, basée sur les empreintes de navigateur. Par exemple, si tu te présentes avec l'empreinte de Edge, alors Cloudflare testes si tu supportes javascript (ce qui est censé être le cas puisque Edge le supporte), si non, alors t'es bloqué

Please turn JavaScript on and reload the page.
DDoS protection by Cloudflare
Ray ID: 4e4c92347e705a60 

Avec wget (ou curl), on constate que ça bascule en 503 :

wget --user-agent="Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/52.0.2743.116 Safari/537.36 Edge/15.15063" http://static.die.net/moon/576.jpg
--2019-06-10 18:03:26--  http://static.die.net/moon/576.jpg
Résolution de static.die.net (static.die.net)… 2606:4700:20::6819:ab0b, 2606:4700:20::6819:aa0b, 104.25.171.11, ...
Connexion à static.die.net (static.die.net)|2606:4700:20::6819:ab0b|:80… connecté.
requête HTTP transmise, en attente de la réponse… 503 Service Temporarily Unavailable
2019-06-10 18:03:26 erreur 503 : Service Temporarily Unavailable.

Le seul moyen (à ma connaissance) de passer la vérification de Cloudflare, c'est de lui présenter l'empreinte d'un navigateur qui n'exécute pas javascript (comme l'empreinte de wget, justement). Donc tu peux utiliser avec wget les empreintes de wget, curl, googleBot, yandexBot, etc... big_smile


2010 \ Copyleft GPL only, all rights permited.
1277413422.png

Hors ligne

#3 10/06/2019 18:57:15

nouvo09
Accro à Fedo !
Lieu : Paris
Inscription : 22/09/2005
Messages : 21 631

Re : pour info : --user-agent="Mozilla"

$ wget http://static.die.net/moon/576.jpg
--2019-06-10 18:54:44--  http://static.die.net/moon/576.jpg
Résolution de static.die.net (static.die.net)… 104.25.171.11, 104.25.170.11, 2606:4700:20::6819:ab0b, ...
Connexion à static.die.net (static.die.net)|104.25.171.11|:80… connecté.
requête HTTP transmise, en attente de la réponse… 200 OK
Taille : 62133 (61K) [image/jpeg]
Sauvegarde en : « 576.jpg »

576.jpg                  100%[==================================>]  60,68K  --.-KB/s    ds 0s      

2019-06-10 18:54:45 (204 MB/s) — « 576.jpg » sauvegardé [62133/62133]

Où est le problème en fait ?


C'est pas parce que c'est difficile qu'on n'ose pas,
c'est parce qu'on ose pas que c'est difficile !

Hors ligne

#4 10/06/2019 19:26:30

chepioq
FEDORA FOR EVER
Lieu : a l'est de marseille
Inscription : 07/06/2006
Messages : 7 278

Re : pour info : --user-agent="Mozilla"

Le problème est que lorsque j'avais fait ce conky il y a 4 ou 5 ans si je ne mettais pas --user-agent="Mozilla" cela ne fonctionnait pas.
Maintenant c'est le contraire, avec --user-agent="Mozilla" cela ne fonctionne plus.
C'est l'évolution en marche...


Tout est dans tout... et réciproquement...
C'est quoi un chalumeau??? C'est un dromaludaire à deux bosses...
Quand le sage montre la lune l'imbécile regarde le doigt...
1277887812.gif

Hors ligne

#5 10/06/2019 20:56:55

madko
Contributeur Fedora et Linuxé depuis 1994
Modérateur
Lieu : Noisy the Great (9³)
Inscription : 22/12/2006
Messages : 7 057
Site Web

Re : pour info : --user-agent="Mozilla"

Ton 1er message était déjà très clair. L'explication de C@sp€r est très bonne, le changement vient forcément du site distant vu que ça marchait avant.

Hors ligne

Pied de page des forums