[API Yahoo] Moteur intégré à sa page en PHP

[seb306bzh]

Bonjour tout le monde,

J'ai pour but de faire une page web incluant 3 moteurs de recherche (google, yahoo et msn)

J'ai déjà fait la partie google gràce à cet article http://www.webrankinfo.com/google/outils/google-api.php et je récupère donc les résultats (en PHP) sans problème

Comment je peux faire pour yahoo ? (et msn par la même occasion)
(c'est à dire comment récupérer les résultats avec PHP)

merci d'avance pour votre aide

[phreddpullfer]

il suffit de faire un script perl (je n'ai pas reussi a le faire pour google ...) ou php qui recupere le code source de la page du moteur qui t'interresse et de faire du patern matching derriere afin d'extraire tes resultats ...

cdt

[seb306bzh]

il suffit de faire un script perl (je n'ai pas reussi a le faire pour google ...) ou php qui recupere le code source de la page du moteur qui t'interresse et de faire du patern matching derriere afin d'extraire tes resultats ...

cdt

et y a pas moyen d'utiliser l'API yahoo plutot comme pour google avec l'APIgoogle ?

[phreddpullfer]

Possible ... je connais meme pas d'api yahoo, m'enfin j'ai pas trop cherché non plus...

Cote google c'etait tellement plsu lent avec l'api tout ca pour recuperer des informations fausées (prediction, positionnement passé etc ... debat qui dechaine les passions ici meme ;D) que j'ai preferé faire mes propres scripts.

Cela presente l'avantge d'obtenir des "agents intelligents" coherent entre eux et facilement maintenable. 1 methode yahoo, une google etc ... moi je trouve ca chiant...

Apres bien sur peuvent se poser des problemes de blacklistage de ton ip ... Je sais pas trop comment ca peut se passer de ce coté ...

Pour le moment aucun moteur ne m'a blacklisté.

Le seul soucis que j'ai pu rencontré c'est sur yahoo qui ne semble pas trop aime les requete trop rapprochée. J'obtenais alors des erreurs yahoo... Ce probleme a ete resolu par l'ajout d'un chti sleep(10) dans le code...

cdt

[e-kiwi]

Bonjour,

la technique de phreddpullfer n'est pas tres légale...

[seb306bzh]

Bonjour,

la technique de phreddpullfer n'est pas tres légale...

comment je peux faire alors ?

j'ai bien trouvé l'APIyahoo avec les exemples php (de Rasmus) mais deja ça fonctionne pas chez moi (easy php 1.7) et apparemment quand on interroge le moteur yahoo il nous retourne un doc XML qu'il faut donc analyser avec DOM J'y comprend rien

Y a pas un moyen aussi simple que pour google ?

[phreddpullfer]

Bonjour,
la technique de phreddpullfer n'est pas tres légale...

En theorie je suis d'accord ...

M'enfin y a de gros sites qui utilisent le meme principe a une echelle bien plus importante que je ne le fais...
Et je vois mal yahoo, maintenant proprietaire du plus connu, venir m'ennuyer

Et puis d'toute facon, j'peux l'faire ;D

Plus serieusement, tout depend de l'utilisation d'un tel script.

[ecocentric]

Bonjour,

la technique de phreddpullfer n'est pas tres légale...

comment je peux faire alors ?

j'ai bien trouvé l'APIyahoo avec les exemples php (de Rasmus) mais deja ça fonctionne pas chez moi (easy php 1.7) et apparemment quand on interroge le moteur yahoo il nous retourne un doc XML qu'il faut donc analyser avec DOM J'y comprend rien

Y a pas un moyen aussi simple que pour google ?

Easy PHP n'accepte pas file_gets_content, qui est utilisé sur l'exemple de Yahoo! (si c'est bien le même que celui que j'ai téléchargé). Sinon, l'API de Yahoo, c'est de la balle, ça explose de loin celle de Google (j'ai largement testé les deux).

Edit : pour le parsing XML, il y a des exemples tout fait sur le site de développeur Yahoo!.

[e-kiwi]

>> M'enfin y a de gros sites qui utilisent le meme principe a une echelle bien plus importante que je ne le fais...

pour moi c'est pas une excuse. on est pas dans l illégalité à moindre échelle aprceque d autres le sont plus

[phreddpullfer]

pour moi c'est pas une excuse. on est pas dans l illégalité à moindre échelle aprceque d autres le sont plus

Tout a fait d'accord sur le principe.

pas le temps de repondre en details, donc la reponse plustard dans la journée ;D

[e-kiwi]

ah ben pas besoin de détails lol je pense pas qu'un modérateur te laisse expliquer comment pirater des données d un site sur ce forum

[seb306bzh]

C'est bon j'ai réussi à analyser les résultats de yahoo. J'ai fait un parseur qui me met tout dans un tableau puis je décortique le tableau et je fais un bel affichange des résultats !

Maintenant faut que je fasse la même chose pour msn search mais là ça va être encore plus dur je crois...

Quelqu'un aurait une idée pour msn ?


merci

[ecocentric]

Quelqu'un aurait une idée pour msn ?

Utilisation du fichier RSS de MSN. Ok pour le Web et les actus (ai aussi bricolé sur un méta Google, yahoo, MSN à mes heures).

[seb306bzh]

Quelqu'un aurait une idée pour msn ?

Utilisation du fichier RSS de MSN. Ok pour le Web et les actus

je connais pas. C'est un quoi un fichier RSS. ça s'exploita avec php ?

(ai aussi bricolé sur un méta Google, yahoo, MSN à mes heures).

tu as pas les sources qui trainent quelquepart par hasard ?

[ecocentric]

RSS = format XML utilisé pour faire de la syndication de contenu.
Voir ici pour plus de détails : http://www.retronimo.com/rss.php

Ca se relit en MagpieRSS ou avec un parseur maison écrit en PHP par exemple.

Voir le petit GIF organge en bas de pages de MSN.