Dauran, blog d'un artisan du web

Depuis quelques temps mon serveur commençait à prendre un peu trop de charge. Le load average du serveur tournait en permanence au-dessus de 20 (alors qu’il n’aurait pas dû passer au dessus de 4).  La faute à quelques scripts un peu trop gourmand en CPU et surtout en lecture/écriture sur disque.

Le plus important écrivait 70Mo par minute, soit plus d’1Mo par seconde. A ça s’ajoutait un peu plus pour la lecture. D’autres scripts accédaient non stop à une base de données contenant 500Mo de data diverses… Et comme je suis loin d’être un pro de l’optimisation je vous laisse imaginer le résultat.

J’ai donc été obligé de changer de machine, de réécrire mes scripts et de faire quelques petites optimisations. Dans l’ordre :

Location d’un serveur plus puissant. Un HG-2010 SSD chez OVH. SSD car les accès disques sont importants, et le produit proposé par OVH me semblait pas trop mal. J’ai en plus pris l’option 48Go pour la RAM, tant qu’à faire autant le faire en grand.

Allégement de la base de données est stockant le résultat des requêtes en RAM avec Memcached (d’où l’option 48Go). De mémoire j’ai alloué 24Go à Memcached, de quoi mettre beaucoup de données.

Utilisation du module mod_expires d’apache. J’ai appris que ce module pouvait faire en sorte de mettre en cache des données dans le navigateur de mes chers visiteurs. Les images sont donc stockées 1 mois ainsi que les fichiers CSS et JS. Pour éviter les bugs avec un CSS ou un JS pas à jour, à chaque mise à jour je change les noms (fichier.css?version=1.15 par exemple). J’ai fait quelques tests avec Firebug + page Speed de Google et le gain est loin d’être négligeable. Le tout peut se gérer avec quelques lignes dans le .htaccess

<IfModule mod_expires.c>
ExpiresActive On
ExpiresByType text/css “access plus 1 month”
ExpiresByType text/javascript “access plus 1 month”
ExpiresByType application/x-javascript “access plus 1 month”
ExpiresByType application/javascript “access plus 1 month”
ExpiresByType image/x-icon “access plus 1 month”
ExpiresByType image/ico “access plus 1 month”
ExpiresByType image/vnd.microsoft.icon  “access plus 1 month”
ExpiresByType image/png “access plus 1 month”
ExpiresByType image/gif “access plus 1 month”
ExpiresByType image/jpeg “access plus 1 month”
ExpiresByType image/jpg “access plus 1 month”
ExpiresByType application/x-shockwave-flash “access plus 1 month”
</IfModule>

Pour les quelques images dynamiques j’ajoute un header en PHP

header(”Pragma: public”);
header(”Cache-Control: maxage=”.$expireGraph);
header(’Expires: ‘ . gmdate(’D, d M Y H:i:s’, time()+$expireGraph) . ‘ GMT’);
header(”Content-type: image/png”);

Mes 10 fichiers CSS et 13 fichiers js ont été regroupés et compressés avec minify. Je gagne 21 hits sur chaque visiteur + des pages qui gagnent encore en vitesse d’affichage.

J’ai placé le code Google Analytics asynchrone. Je n’ai pas mesuré l’impact, je me fie à la compétence des ingénieurs de Google. Seul petit hic, je n’ai plus d’évènement et je n’ai pas encore trouvé d’où provient le bug… Il faut dire que je n’ai pas cherché longtemps.

Toutes mes anciennes données en cache – celles qui prenaient 1Mo/ seconde en écriture disque – sont passées en RAM avec memcached. Une vrai révolution dans ma façon de coder mais la forte diminution des accès disque a fait passer à lui seul le load average de la machine à 10 (sur le nouveau serveur) à 0.5/2.

Il me reste encore à utiliser les sprites dans les CSS. Mais pour ça il me faudra un peu de temps. Les images et moi ça fait 2. Quand ce sera fait je devrais gagner une vingtaine de hits par visiteurs… Encore un point non négligeable pour la charge serveur et la rapidité du site.

Le bilan de tout ça ?

D’après Google le temps d’affichage moyen d’une page par un visiteur est passé de 6 à 4 secondes (gain >30%). J’ai bon espoir de descendre sous les 3 secondes d’ici quelques temps. Je serais de toute façon limité à cause du temps d’affichage des bannières pub et du marqueur Xiti (d’ailleurs je suis en train de réfléchir à l’enlever)

Google passe moins de 0.5 seconde à crawler une page contre 1.5 seconde avant mes optimisations diverses.

Petite déception, je n’ai pas de modification du nombre de pages vues par visites ou une diminution significative du taux de rebond. Il faut croire que mes visiteurs étaient patient…

Il parait que la rapidité des sites va entrer dans l’algo du classement des sites dans le moteur de recherche. C’est un bon argument pour aller le plus loin possible sur cette route.

7 Comments » Posted by Arnaud Jeulin / Gestion site Internet

Si vous utilisez jQuery et Google Analytics, voilà un petit bout de script qui permet de comptabiliser les liens sortants comme des évènements, il suffit de le placer dans le pied de page. C’est pas grand chose, il y a certainement un code plus propre… mais ça fonctionne pas trop mal. Maintenant je sais que je peux avoir jusqu’à 1000 clics sur les divers liens externes du site chaque jour…

<script type=”text/javascript”>

$(”a”).each(function() {

var a = $(this);

var r = a.attr(”href”).match(/(http:\/\/)(([a-z0-9.-]*)(\/)(.*))/i);

if(r) {

if (r[3]!=”www.monsitegenial.com”) {

$(this).click(function() { pageTracker._trackEvent(’ClickExterne’,'Click’,r[3]); });

}

}

});

</script>

PS : ne pas oublier de remplacer monsitegenial.com par tonsitegenial.com.

7 Comments » Posted by Arnaud Jeulin / Gestion site Internet and code source

Dans mes réflexions sur l’impact que peuvent avoir mes actions dans le futur, j’avais évoqué un problème de CMS lors de l’amélioration de l’internationalisation de Mataf.net.

J’utilise depuis quelques mois Wordpress pour gérer une partie des pages et le flux de news du site. Cependant mes développements sont rarement compatibles avec la rigidité d’un CMS et je dois sans cesse modifier le code pour que tout fonctionne parfaitement.

En plus Wordpress ne gère pas le multilangue ce qui me donne une installation par langue. Certaines modifications doivent donc être reproduite jusqu’à 7 fois (5 Wordpress + la partie sur mon CMS perso + le forum).

Et je vous raconte pas les bugs lors de mises à jour de Wordpress… J’arrive donc a avoir une usine à gaz qui me prend de plus en plus de temps.

Je tourne ce problème dans tous les sens depuis quelques jour et la meilleure solution : je reviens à mon CMS perso pour gérer tout le site. En script externe je garde juste le forum.

Le “gros” inconvénient de mon CMS c’est qu’il n’y a pas de base de données, toutes les pages doivent être écrites en html et envoyées sur le serveur. Donc impossible de faire des modifs si je n’ai pas la possibilité de me connecter au serveur. D’un autre côté je n’ai jamais eu besoin de faire des modifications à distance.

Le gros avantage c’est que j’ai un seul template pour tout le site dans toutes les langues. Je maîtrise aussi complètement ce CMS puisque c’est moi qui l’ai fait…

La gestion du site passera donc par une solution 100% maison.

Edit : Attention j’abandonne Wordpress sur Mataf.net et pas sur ce blog… Il fallait que ce soit dit :)

7 Comments » Posted by Arnaud Jeulin / Gestion site Internet

Ce matin le groupe de diffusion que je gère sur YahooGroup a dépassé les 10000 membres et est passé premier de sa catégorie sur Yahoo.com. Ce groupe me sert de système d’alerte mail pour ceux qui souhaitent suivre les analyses que je publie.

Depuis longtemps j’hésite a changer de système pour prendre un outil de gestion d’envoi d’email.  Les outils online payant sont inaccessibles car j’envoie 2 mails par jour à plus de 10′000 contact soit plus de 400′000 mails par mois. J’en aurais donc pour plusieurs centaines d’euros par mois minimum.

On m’a conseillé plusieurs fois Sarbacane, qui est, parait-il, rapide. Ce n’est pas une tache prioritaire mais j’essayerai de le tester un jour.

L’autre possibilité c’est de multiplier les canaux de diffusion et de s’incruster dans tous les réseaux sociaux et autres sites Web2.0. J’ai déjà mon twitter Forex mais pourquoi pas continuer sur Facebook, Myspace… J’ai aussi le groupe Forex sur Google mais j’ai complètement oublié les login/pass.

Pour le moment je vais me contenter de mon YahooGroup car à trop vouloir en faire on finit par faire n’importe quoi…

13 Comments » Posted by Arnaud Jeulin / Gestion site Internet

Alexa le met bien en évidence. Les dernières semaines ont été dure pour mon site sur le forex. Il faut dire qu’il y a eu les ponts qui ont pesé sur l’activité et que j’ai eu une panne de nounou pendant 6 longues semaines. J’ai donc plus fait du coloriage et de la pâte à modeler avec les petits que du PHP et de l’analyse financière.

Je suis de retour au business à 100%, motivé comme un chien devant un os qu’il aurait enterré son os 1 mois plus tôt.

A programme des prochain jours.

• Phase 1 de l’internationalisation (i18n comme ont dit chez les barbus) de Mataf.net, je prépare le terrain en mettant une homepage multilangue pour que l’ami anglophone ne soit pas perdu quand il arrive.
• Un contenu plus étoffé. Histoire d’inciter les visiteurs à voir quelques pages de plus (suite à ma mésaventure sur le refresh automatique)
• Et je vais renier mes convictions en remettant en avant le côté communautaire. J’y ai mûrement réfléchit et je vais tenter d’innover un peu… Je détaillerais quand ce sera en place. Si ça marche je rachète Facebook dans la foulée.
• Je bosse aussi sur l’optimisation de site avec une startup Canado-Suisse. Le mélange des accents est un régal. (le Belgo-Suisse est pas mal aussi…). Un compte rendu complet sera publié cet été.

Au boulot…

3 Comments » Posted by Arnaud Jeulin / Gestion site Internet and business

Voici le graphe de la charge du CPU de mon serveur sur 1 an. On voir le pic de mai, la hausse de l’été dernier suivie de la chute inexpliquée de la première quinzaine de septembre, le creux des fêtes de fin d’année et l’explosion exponentielle de 2008. La baisse de la semaine actuelle est due à l’abandon de mon adserver pour celui de Fxstreet.

La montée régulière qui est en place depuis des années s’est donc emballée. Je devrais toucher mon objectif d’audience de décembre 2008 ce mois ci et si ça continue l’objectif de fin 2009 sera aussi atteint cette année.

L’effondrement du dollar y est certainement pour beaucoup, la très grande fréquence des mises à jour du contenu aussi, ma présence depuis 2003 sur cette niche qui fait de Mataf un site vétéran sur le forex doit aider.

Une grosse partie de mon boulot actuellement est de mettre en place des stratégie pour fidéliser au maximum cette audience pour  ne pas prendre une trop grosse claque quand le mouvement s’arrêtera. J’essaye donc de faire inscrire le maximum de visiteurs à la newsletter, de diminuer les temps de réponse du serveur, de virer les bugs, de répondre au plus vite aux mails.

Pour éviter une catastrophe maintenant je vais donc retarder ma migration de serveur, de toute façon j’ai un peu de répit grâce à l’abandon de l’adserver. Et je ne vais pas faire de campagne de pub avant que ça se calme.

Dans le même temps il va falloir monétiser cette audience, là je fais confiance à mes partenaires. Je ne vous cache pas que ce que je vais tirer en surplus ira dans le barbecue, je compte faire de ce nouveau site mon moteur de croissance ;) On en reparle dans quelques mois.

5 Comments » Posted by Arnaud Jeulin / Audience and Gestion site Internet and Prévisions and business

A la demande générale de Julien voici en image les modifications successives apportées au module d’inscription à la newsletter et les améliorations du taux de transformation qui ont suivies.

Ceci pour illustrer le billets montrant l’intérêt de faire des modifications dans un site Internet.

J’insiste : très peu de travail pour un gros résultat.

13 Comments » Posted by Arnaud Jeulin / Ergonomie and Gestion site Internet

J’avais rapidement abordé le sujet il y a quelques jours. J’ai suivi quelques conseils de Mathilde et Julien et j’ai doublé mon taux d’inscription à la newsletter. Après quelques jours d’observation, en tenant compte des inscriptions qui ne vont pas jusqu’au bout et des désinscriptions la progression n’est “que” d’un peu plus de 50%.

Le nombre d’abonné supplémentaire chaque jour est donc passé d’une dizaine à un peu plus d’une quinzaine. Ça représente au moins 2000 abonnés supplémentaires chaque année, donc 2000 personnes qui recevront chaque jour un ou deux emails pour leur signifier qu’une analyse a été mise à jour sur le site. Soit 2000 visites potentielles de plus, donc environ 40′000 par mois (le forex est fermé le week end). C’est un quart de mon objectif de cet année.

Une simple modification, qui a du me prendre environ 15 minutes pourrait donc être extrêmement rémunératrice.

Voilà qui me donne l’envie de me replonger dans les bouquins de Steve Krug et Jakob Nielsen pour améliorer l’efficacité de mon site. J’avais déjà lu ces livres lorsque j’ai changé le design, ça m’avais bien aidé.

Finalement le contenant est aussi important que le contenu si on veut performer.

A une époque pas si lointaine je passais beaucoup de temps à analyser les stats, faire des modifications mineures, re-analyser les stats, refaire des modifications…etc… C’est grâce à cette stratégie que j’ai pu mettre l’accent sur les forces du site et moins me concentrer sur le reste. Il faudrait peut être que je m’y remette.

Quand je serais au point je mettrais mes compétences au service du barbecue pour optimiser les ventes de saucisses online.

6 Comments » Posted by Arnaud Jeulin / Audience and Gestion site Internet and Stratégie and Tactique

J’ai pas mal de demande sur la raison qui me pousse à utiliser “Yahoo Groups” pour la gestion de mes newsletters. En fait il y a plusieurs raisons :

• Une raison historique : Au lancement du site j’avais une liste de discussion sur Yahoo. Comme elle ne fonctionnait pas vraiment bien je l’ai fermé en laissant les droits d’envoi d’email uniquement au modérateur (moi)…
• Une raison pratique : J’ai cherché un système de gestion de newsletter simple et je n’ai rien trouvé de satisfaisant. Yahoo fait tout ce que je veux.
• Une raison technologique : Je n’envoie pas vraiment des newsletters mais des alertes pour dire que j’ai mis à jour des analyses financières. les mails doivent arriver très rapidement. Il y a aujourd’hui environ 10000 inscrits et seul Yahoo arrive à délivrer ces mails en quelques minutes.
• Une raison Marketing :  Je suis très bien placé dans les groupes spécialisés sur le forex chez Yahoo, avant la fin de l’année je devrais même être classé premier. Ça m’apporte une bonne visibilité (surtout aux USA).

Bien sûr il y a des inconvénients mais ils restent mineurs : j’ai de la pub Yahoo dans mes mails, je dépends d’un service tiers…

9 Comments » Posted by Arnaud Jeulin / Gestion site Internet