Fedora-Fr

Ce site est optimisé pour être consulté depuis un navigateur moderne dans lequel JavaScript est activé.

liste d'URL

magicbisous-nours

bonjour je dois lister les URL qui apparaissent dans dans des fichiers sur un serveurs......
les fichiers sont dans des répertoires et sous-répertoires d'un même dossier ex : mes fichiers sont dans tous les répertoires de /dossierPere
j'ai ceci pour le moment et pour tout avouer les regex et moi....:hammer:

#on change vers le répertoire père
cd /dossierPere
#pour i parcourant tous les fichiers 
for REP in `find * -type d` ; do
    for FICH in $REP/* ; do
        if [ -f $FICH ] ; then
            cat  $FICH | s/^http[a-zA-Z0-9:/.]+$
        fi
    
    done

done

la réponse est :

./listeURL[9]: s/^http[a-zA-Z0-9:/.]+$:  not found. (listeURL est le nom de mon script)

quelle serait la solution pour ça svp??
merci d'avance

Pikachu_2014

Bonjour,

il manque l'appel à sed ou grep (c'est un script bash, pô Perl :hammer:), selon ce que tu veux faire (remplacer ou filtrer).
Ton expression rationnelle « s/^http[a-zA-Z0-9:/.]+$ » n'a pas l'air très catholique par ailleurs hmm.

magicbisous-nours

j'ai construit ça à partir d'un tuto trouvé sur le site du zero...sauf que j'ai du adapter (j'avais pourtant prévenu que les regex et moi ça faisait beaucoup ^^)......j'ai essayé entre temps avec sed
voici ma ligne :

sed 's/^http[a-z0-9:/.]+$'

et voici la réponse

sed: Function s/^http[a-z0-9:/.]+$ cannot be parsed.

pascalp

il va en manquer tout plein des urls, le ?, #, = voir % egalement. Exemple :

http://forums.fedora-fr.org/viewtopic.php?pid=211432#p211432

Et puis avec celle ci, ca va prendre le point final (tout comme le forum d'ailleurs...) :

http://forums.fedora-fr.org/test.html.

magicbisous-nours

c'est pas grave pour le . de fin.......
merci de vos réponses aussi rapides je continue mes recherche de mon côté (bon si vous pouvez m'aider vous privez pas hein :hammer:)
ba en fait tout ce que je veux faire c'est rechercher pour afficher à l'écran....vais tester avec grep

Pikachu_2014

Si ça peut t'inspirer, la regex utilisée par urlview (un programme amusant en ligne de commande pour filtrer des URL d'un fichier [tiens donc :roll:]) pour récupérer ces URL est la suivante :

(((http|https|ftp|gopher)|mailto):(//)?[^ <>"\t]*|(www|ftp)[0-9]?\.[-a-z0-9.]+)[^ .,;\t\n\r<">\):]?[^, <>"\t]*[^ .,;\t\n\r<">\):]

pjac

a priori il faudrait s/expression/valeur de remplacement/ . Je ne vois pas de valeur de remplacement, ni les slashs qui devraient l'encadrer

magicbisous-nours

ben en fait je ne veux pas remplacer juste afficher les URLs.....

pjac

voir avec grep pour extraire les lignes qui matchent une expression régulière

magicbisous-nours

j'ai essayé avec celle de Pikachu_2014 mais je n'ai pas de retour..... je mets le fichier avec toutes les modifs engendrées :

#pour i parcourant tous les fichiers 
for REP in `find * -type d` ; do
    for FICH in $REP/* ; do
        if [ -f $FICH ] ; then
             grep '(((http):(//)?[^ <>"\t]*|(www|ftp)[0-9]?\.[-a-z0-9.]+)[^ .,;\t\n\r<">\):]?[^, <>"\t]*[^ .,;\t\n\r<">\):]' $FICH
        fi
    #fin pour fichiers
    done
#fin pour répertoires
done

pascalp

avec tout les caracteres bizarres presents, faut surement en echapper certains...

Faut que je teste cette regexp pour moi, avec la mienne j'ai un probleme si l'url se termine par /

magicbisous-nours

j'ai repris EXACTEMENT la regex de pikachu que j'ai associée à grep mais je n'ai aucun retour (ceci dit je n'ai pas d'erreur non plus...ce qui est déjà une victoire en soi ^^)
j'ai essayé de mettre ma commande dans une variable puis d'afficher le résultat de la variable ça nous donne :

#pour i parcourant tous les fichiers 
for REP in `find * -type d` ; do
    for FICH in $REP/* ; do
        if [ -f $FICH ] ; then
             test = grep '(((http|https|ftp|gopher)|mailto):(//)?[^ <>"\t]*|(www|ftp)[0-9]?\.[-a-z0-9.]+)[^ .,;\t\n\r<">\):]?[^, <>"\t]*[^ .,;\t\n\r<">\):]' $FICH
             echo $test
        fi
    #fin pour fichiers
    done
#fin pour répertoires
done

et j'ai eu pour réponse quelque chose que je ne comprends pas :

./listeURL[5]: grep: A test command parameter is not valid.

Pikachu_2014

Appelle egrep (au lieu de grep) avec cette regex pour filtrer les lignes contenant une URL.

magicbisous-nours

merci pikachu j'ai un résultat j'ai toutes les lignes contenant une url....n'y aurait-il aucun moyen pour n'avoir QUE l'URL (je sais je suis exigeant ^^)
je m'explique : j'ai les lignes complètes...je ne voudrais que les URL.....

slobberbone

au cas où ... http://blog.fedora-fr.org/paquet-fedora-du-jour/post/Lundi-productif-%3A-Regexxer-Rechercher-Remplacer-graphique

magicbisous-nours

c'est super gentil de ta part slobberbone mais c'est sur un serveur Unix et non Fedora je ne peux donc pas installer......en plus je suis sur un poste client sous XP.......j'ai posté ici car le shell c'est le même et que c'est le seul endroit sur le net que je connaisse où je peux espérer des réponses VRAIMENT rapides (la preuve ce topic même : j'ai l'impression de faire de la messagerie instantanée!!)....
en tout cas merci de vos réponses

slobberbone

oups désolé j'ai lu trop rapidement ...

magicbisous-nours

bon pour le moment j'ai les lignes complètes qui contiennent une URL....or j'aimerai n'avoir que les URLs.......est-ce possible??

pjac

utiliser la commande cut pour extraire des parties de lignes

Pikachu_2014

magicbisous-nours, si tu postais un exemple de tel fichier ?

Page suivante »