Longue boucle

Question

Bonsoir &#224; tous,





Voil&#224; mon probl&#232;me. J'ai des longues boucles WHILE &#224; effectu&#233; (+ de
3000 entr&#233;es) et malheureusement, quand je charge la page qui poss&#232;de
cette boucle, elle n'arrive jamais jusqu'au bout (pas mal d'action &#224;
faire pour chaque tour tout de m&#234;me > 1 dixaine de requete sql...). La page s'arr&#234;te de se
charger et ne fini pas la boucle.


Je voudrais savoir comment faire pour que celle-ci soit
enti&#232;rement r&#233;alis&#233;, et avec encore plus d'entr&#233;es aussi. (cel&#224;
viendrait-il de l'hebergeur ?)





Merci &#224; tous,





Tilix.

FhX · Answer

3000 entr&#233;es * 10 requ&#232;tes = 30 000 requ&#232;tes sur un bouclage entier :o :o :o

Il y a un temps limite pour l'ex&#233;cution d'un script en PHP ==> set_time_limit() dans ton fichier php.ini.
Suffit de changer la. (ca ne marche que si l'hebergeur est un d&#233;di&#233;)

cs_Arnauti · Answer

Et si on &#233;crit sur la page set_limit_time(0) ; ca ne marche pas ?
A++
<hr size="2" width="100%">Si un des membres &#224; poster une reponse qui convient, accepter l&#224; !

coucou747 · Answer

Salut,

le mieux serait de demander moins de requettes... en
gros, soit tu fais une proc&#233;dure en MYSQL 5, soit tu fais des INNER
JOIN ou des LEFT JOIN, ou alors, tu fais un affichage par pages...


car ton settimelimit ne va pas suffire...

In a dream, I saw me, drop dead... U was there, U cried... It was just a dream, if I die, U won't cry, maybe, U'll be happy

Mon site (articles sur la programmation et programmes)

malalam · Answer

30 000 requ&#234;tes d&#233;passant les 30 secondes ? Ca fait bcp quand m&#234;me, il doit y avoir moyen d'optimiser ces requ&#234;tes &#224; mon avis, surtout si c'est du select...Et effectivement, 30 000 requ&#234;tes sur un bouclage, ou sur une page disons, &#231;a fait aussi beaucoup. ca doit pouvoir se r&#233;duire.
Y a un autre truc &#224; faire dans ce cas l&#224; : redescendre les infos. je veux dire, parfois, on fait plein de tables, avec des clefs &#233;trang&#232;res, etc...et du coup on a bien fait sa structure, et de n'importe o&#249;, avec les bons where, on peut r&#233;cup&#233;rer n'importe quoi.
Ben parfois, au lieu de s'appuyer sur les jointures, il vaut mieux redsecendre l'info dans une table, bcp plus bas, pour limiter les requ&#234;tes justement.
Par exemple, pour une gestion d'ebntrep&#244;ts, sur les emplacements, quand il y a des dizaines de milliers de ces emplacements, c'est peut-&#234;tre pas mal de redescendre dans la table des stocks, l'info concernant la r&#233;f&#233;rence article qui s'y trouve, le client, etc... ;-)

thomvaill · Answer

Si non, ben il faut un programme derri&#232;re... (Exemple, programm&#233; en C) qui lui, fait ces requ&#234;tes et qui les donnes &#224; PHP.

 Je ne sais pas programmer en C, alors je ne pourrais pas t'aider, mais je sais que &#231;a se fait.

 Thomvaill 
IRC : Thomas (irc.heliosnet.org:6667 #programmation)

coucou747 · Answer

Salut,

"Si non, ben il faut un programme derri&#232;re... (Exemple, programm&#233; en C)
qui lui, fait ces requ&#234;tes et qui les donnes &#224; PHP."



=> on appelle &#231;a un serveur SQL

In a dream, I saw me, drop dead... U was there, U cried... It was just a dream, if I die, U won't cry, maybe, U'll be happy

Mon site (articles sur la programmation et programmes)

thomvaill · Answer

Mais non, tu n'as pas compris...

 Thomvaill 
IRC : Thomas (irc.heliosnet.org:6667 #programmation)

thomvaill · Answer

Je voulais dire, un programme en C appel&#233; par un t&#226;che cron (par exemple) et qui executerai les requ&#234;tes sql &#224; la place de php.

 Thomvaill 
IRC : Thomas (irc.heliosnet.org:6667 #programmation)

coucou747 · Answer

lol, j'ai compris, mais il ne servirait &#224; rien !

dans 99% des cas, on ne peut pas ex&#233;cuter ce style de programmes sur un
serveur, et si l'on peut alors autant utiliser ce programme comme un
cgi ! si on fait du php, c'est pas pour se faire chier avec du C ! et
en plus, ici, le probl&#232;me ne vient pas de la lenteur de php, mais de la
lenteur de mysql (30 000 requettes...)

In a dream, I saw me, drop dead... U was there, U cried... It was just a dream, if I die, U won't cry, maybe, U'll be happy

Mon site (articles sur la programmation et programmes)

thomvaill · Answer

Ben non, &#231;a vient de la limite d'execution de PHP...

Apr&#232;s, pour executer &#231;a, il suffit d'avoir un petit shell quelque part... Et tout n'est pas forc&#233;ment fesable en PHP.

Mais j'ai dis C, comme &#231;a..; apr&#232;s oui en effet le CGI peut etre aussi bien.



Enfin bon, on va s'arreter l&#224; si non on va flooder tout le topic.

 Thomvaill 
IRC : Thomas (irc.heliosnet.org:6667 #programmation)

cs_Anthomicro · Answer

Salut, quel est ton code ? et les structures de tes tables ? qu'on voit si on peut optimiser un peu au moins ;-)

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

FhX · Answer

"
                
                Ben non, &#231;a vient de la limite d'execution de PHP..."
Ca c'est se qui en d&#233;coule :)

30k de requ&#232;tes en 30 secondes... c'est que ton site est mal cod&#233;.
Requ&#232;tes mal exploit&#233;es...etc...

Tilix · Answer

Je me suis lanc&#233; dans la cr&#233;ation d'un site de jeu de construction d'une ville.

Mon site contient plus de 2500 membres actifs.

Tous les jours, ces membres gagnent de l'argent virutel sur ce jeu.



Il y'a une boucle avec les 2500 membres du site.

Dans cette boucle, il y'a une autre boucle d'environ 10 tours (le syst&#232;me cherche sur 10 tables diff&#233;rentes afin de faire un calcul de l'argent que le membre doit gagner. (en fonction des b&#226;timents qu'il poss&#232;de))

Soit un total de 25000 requetes.



Le nombre d'inscrit de ce site ne fait qu'augmenter de jour en jour.

Lorsque le site aura atteint encore plus de membre, le nombre de requete sera alors d&#233;multipli&#233;.



Je voudrais trouver une solution a ce probl&#232;me.

thomvaill · Answer

Je remet &#231;a avec mon programme en C lol ^^

 Faut que tu fasses un programme en C, qui s'&#233;xecute avec une
t&#226;che cron (programmes l&#224; pour qu'il s'&#233;xecute plutot la nuit quand il
y a peu d'acitvit&#233;e). Qui fasse ce travail.

 Thomvaill 
IRC : Thomas (irc.heliosnet.org:6667 #programmation)

Tilix · Answer

Je n'y connais rien en C moi....

Tilix · Answer

Et cette programmation C serai sens&#233; servir &#224; quoi ?

sidf · Answer

"Dans cette boucle, il y'a une autre boucle d'environ 10 tours (le syst&#232;me cherche sur 10 tables diff&#233;rentes afin de faire un calcul de l'argent que le membre doit gagner. (en fonction des b&#226;timents qu'il poss&#232;de))"





c'est peut- etre l&#224; qu'il ya un pb de conception ou structure de ta base

cs_Anthomicro · Answer

Il serait bien de voir le code et les structures des tables, mais effectivement y'a surement un problème de conception...

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

malalam · Answer

Je le pense aussi.
Tilix, vous savez combien il y a de membres sur CS ?  591000. Vous imaginez que CS soit avoir pas mal de tables diff&#233;rentes, aussi.
Et pourtant, hormis quand les serveurs plantent ;-), vous avez d&#233;j&#224; vu une requ&#234;te qui  prend plus de 10s sur ce site...?

cs_Anthomicro · Answer

Moi j'ai déjà vu la page se générér en plus de dix secondes ^^

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

Tilix · Answer

Une page qui se charge, se n'est pas pareil qu'une boucle contenant tous les membres....

malalam · Answer

Antho => oh &#231;a va lol, tu sais r&#232;s bien ce que je veux dire ;-)
Tilix => Vas donc sur la page des "auteurs de sources" par exemple.
Il y a des tonnes de pas sur ce site qui ram&#232;ne tr&#232;s probablement plus d'infos que celle de ton site, que tu incrimines, l&#224;. (c'est une question de  logique, ce site comptant environ  200 fois plus de membres que le tien).
Je ne comprends pas pourquoi tu n'essayes pas de montrer quelques unes de tes requ&#234;tes. Je suis persuad&#233; que le probl&#232;me vient de l&#224;. Perso, il y a peu, j'avais ujne requ&#234;te qui allait construire une liste de 2700 emplacements en allant chercher les infos dans une dizaine de tables aussi. Je ramenais le tout en une seule requ&#234;te, d&#233;j&#224; (donc 2700 requ&#234;tes pour les 2700 lignes construites), mais cela prenait une 10aine de secondes. Je trouvais &#231;a beaucoup trop long, alors j'ai simplement descendu des infos pour r&#233;duire les tables sur lesquelles aller requ&#234;ter. Je suis descendu &#224; 2 secondes. Si j'y ajoute un syst&#232;me de pagination, c'est regl&#233;, avoir acc&#232;s &#224; n'importe laquelle de ces lignes prendra qques micro secondes. 
Les lenteurs sql sont souvent d&#251;es &#224; de mauvaises requ&#234;tes, ou une mauvaise structure de bdd (pour des bdd de taille raisonnable hein).

cs_Arnauti · Answer

Hors sujet : ca signifie quoi descendre les infos ?
A++
<hr size="2" width="100%">Si un des membres &#224; poster une reponse qui convient, accepter l&#224; !

malalam · Answer

Ajouter des champs dans la table prin cipale interrog&#233;e, provenant d'autres tables, et que l'on veut sortir.

coucou747 · Answer

Bon, désolé pour ces deux précédents posts... les anciennes versions de Mozilla ne gèrent pas du tout ce wysiwyg...

En MYSQL 5, tu peux faire une procédure, ce qui ne te fera qu'une requette et sera bien plus rapide que ton programme C du fait du transfert entre php et SQL qui sera moindre...

Tilix · Answer

//Boucle de tous les membres du site

$select_membre "SELECT * FROM TableDesMembres WHERE Statut 'Valid' AND Habitants != '0' ORDER BY id";

$envoi_membre = mysql_query($select_membre);

while($recupere_membre = mysql_fetch_assoc($envoi_membre))

{



        
$TotalDesGains = 0;



        
//On fait une boucle de tous les types de b&#226;timents que poss&#232;des le
membre, et on enleve les b&#226;timents qui ne font pas gagner d'argent (5
tours maxi)

 
        //En fonction du b&#226;timent, le membre augmente le total de ses gains.

        
$select_batiment = "SELECT * FROM TableDesBatiments WHERE
Ville='".$recupere_membre['id']."' AND Type != 'Amenagement' AND Type
!= 'Religieux' AND Type != 'Services' AND Type != 'Education'";

        $envoi_batiment = mysql_query($select_batiment);

        while($recupere_batiment = mysql_fetch_assoc($envoi_batiment))

        {

        
        
if ($recupere_batiment['Type'] == "Maison")

        
        {

        
        
        $select_maison = "SELECT * FROM TableMaison WHERE
id='".$recupere_batiment['Batiment']."'";

         
        
        $envoi_maison = mysql_query($select_maison);

        
        
        $recupere_maison = mysql_fetch_array($envoi_maison);

            

        
        
        $TotalDesGains
= $TotalDesGains +
$recupere_maison['Loyer']*$recupere_maison['Habitants']*$recupere_batiment['Nombre'];

        
        }


        
}


//Ce genre de " IF " est effectu&#233; 5 fois, pour chaque type de b&#226;timent..... 



mysql_query("UPDATE BLABLA...");



}





Voil&#224; a peu pres comment est ma boucle...

Tilix · Answer

J'ai mis le commentaire pour le IF 1 poil trop bas (avant le 2e } il devrait &#234;tre), d&#233;sol&#233; xD

coucou747 · Answer

Salut,
$envoi_membre mysql_query('SELECT tout les champs s&#233;l&#233;ctionn&#233;s FROM TableDesMembres WHERE Statut \'Valid\' AND Habitants != '0' ORDER BY id')

or die(mysql_error());



 while(false!==($recupere_membre = mysql_fetch_assoc($envoi_membre)))

 {

 

m&#234;me chose pour la suite...



Bon, je ne connais pas ton jeu, mais tu peux optimiser de deux fa&#231;ons : faire une proc&#233;dure SQL



 http://www.nexen.net/docs/mysql/annotee/adding-functions.php


ou bien faire un JOIN

In a dream, I saw me, drop dead... U was there, U cried... It was just a dream, if I die, U won't cry, maybe, U'll be happy

Mon site (articles sur la programmation et programmes)

cs_Anthomicro · Answer

C'est déjà bien crade, tu peux tenter ça (pas besoin de la requête du haut apparemment) : $TotalDesGains = 0; $select_batiment = "SELECT b.Ville,b.Nombre,b.Batiment,m.Loyer,m.Habitants,Nombre FROM TableDesBatiments b,TableMaison m WHERE b.Type='Maison' AND m.id=b.Batiment"; $envoi_batiment = mysql_query($select_batiment); while($recupere_batiment = mysql_fetch_row($envoi_batiment)) { $TotalDesGains+=$recupere_batiment[3]*$recupere_maison[4]*$recupere_batiment[5]; } mysql_query("UPDATE BLABLA..."); //? il faudrait que tu nous détailles ta requête ici qu'on puisse voir...

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

coucou747 · Answer

Salut,

aparement &#231;a divise d&#233;ja le nombre de requettes par 10... pas mal d&#233;ja...

In a dream, I saw me, drop dead... U was there, U cried... It was just a dream, if I die, U won't cry, maybe, U'll be happy

Mon site (articles sur la programmation et programmes)

cs_Anthomicro · Answer

bah là y'a une seule requête et un seul update, mais j'aimerais savoir ce qu'il met à jour avant de transformer ça, car je crains qu'il n'y ait une boucle pour faire les updates par contre...

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

Tilix · Answer

SELECT b.Ville,b.Nombre,b.Batiment,m.Loyer,m.Habitants,Nombre 

> Ils correspondent &#224; quoi ces b, m ?



Le update, c'est juste un 

" UPDATE TablesDesMembres SET Argent '".$totaldesgains."' WHERE id '".$recupere_membre['id'];

cs_Anthomicro · Answer

" Ils correspondent à quoi ces b, m ?" c'est une syntaxe pour ne pas taper tout le nom de la table, j'aurais pu mettre x ou z... bon pour l'update faut que je vois si c'est possible, on va voir je verrai demain.

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

Tilix · Answer

Je ne peux pas utilis&#233; ta syntaxe, car comme dit plus haut, les tables dans la 2e boucle sont toutes diff&#233;rentes !

cs_Anthomicro · Answer

et alors ?

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

malalam · Answer

Ce sont aussi des alias, et &#231;a sert &#231; diff&#233;rencier le noms des champs quand on a les m&#234;mes noms dans plusieurs tables diff&#233;rentes. Dans le cas de clefs &#233;trang&#232;res, essentiellement.
Et tu peux tr&#232;s bien l'utiliser, oui.
Il y a autre chose, la structure de ta base est visiblement mauvaise...
Les types de b&#226;timents devraient faire l'objet d'une autre table, avec un id, et tu ne devrais utiliser que cet id  dans ta table TableDesBatiments, cela all&#232;gerait le code (WHERE Type NOT IN (id1, id2, id3...). Il est toujours plus l&#233;ger de jouer avec des entiers qu'avec des cha&#238;nes.
De plus, je ne pense pas qu'il soit utile, au vu de ton code, de v&#233;rifier le type de b&#226;timent dans chaque requ&#234;te. Visiblement, apr&#232;s, tu ne fais qu'une mise &#224; jour d'une variable...

SELECT b.Ville,b.Nombre,b.Batiment,m.Loyer,m.Habitants,Nombre FROM TableDesBatiments b,TableMaison m WHERE m.id=b.Batiment


while (blabla)
if batiment === maison alors...
if batiment === hutte alors....
if batiment === trucmuche alors...

Tilix · Answer

Il faut que j'me trouve une aide a propos des synthaxes devant le nom
des champs, que j'comprenne plus en d&#233;tails comment &#231;a fonctionne...

merci

malalam · Answer

C'est un alias :

SELECT usr.user_id FROM users AS usr

le AS n'est pas indispensable.

Cela dit : dans cette requ&#234;te, je vais utiliser 'usr' pour pr&#233;fixer les noms des champs appartenant &#224; la table 'user'.

cs_Anthomicro · Answer

dans sa boucle y'a que un seul if bref je l'ai inclus dans la requête pour faire sauter la condition personnellement. Sinon nous on aimerait bien que tu nous files ta requête UPDATE que tu fais... concernant l'aide des alias tu peux rechercher sur google le manuel est je pense assez explicite. a +

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

Tilix · Answer

Je l'ai donn&#233; la requete update



 " UPDATE TablesDesMembres SET Argent '".$totaldesgains."' WHERE id '".$recupere_membre['id'];

cs_Anthomicro · Answer

bon ok faut la mettre dans la boucle malheureusement, bref t'auras en gros 2500 requêtes, ça fait mal.

Entraide, dépannage et vulgarisation informatique : Mon site de vulgarisation informatique

Codes-php.net

coucou747 · Answer

Salut,

&#231;a fait d&#233;ja 10 fois moins...


perso, pour autant de requettes, je pr&#233;f&#232;re utiliser une proc&#233;dure sql...

In a dream, I saw me, drop dead... U was there, U cried... It was just a dream, if I die, U won't cry, maybe, U'll be happy

Mon site (articles sur la programmation et programmes)

Longue boucle

42 réponses

Votre réponse

Discussions similaires