Scapture.com v. 0.9 bêta 1

Incident (résolu) —  Scapture.com a été indisponible toute la journée pour des raisons techniques inhérentes à mon hébergeur. Tout refonctionne désormais correctement, désolé pour le dérangement.

Enfin ! — Le trafic, sans revenir à ce qu'il était, est revenu à un niveau acceptable depuis quelques semaines. Merci à tous ceux qui y ont contribué !

Une nouvelle qui n'en est pas une (puisqu'elle a plusieurs mois), c'est que la rubrique analyse de Scapture, qui a été bêta-testée jusqu'à l'été dernier, vole désormais de ses propres ailes sur alyze.info.

Ces deux sites sont complémentaires : Scapture se charge de vérifier l'affichage de votre site alors qu'Alyze en vérifie son contenu.

70% de visiteurs en moins !
Comme beaucoup de sites en ce moment, scapture.com subit une sanction infligée par Google. Ce moteur de recherche qui était le principal pourvoyeur de visiteur n'en envoie plus qu'une infime fraction.

En ce qui concerne les raisons de cette sanction, elles ne sont jamais très claires. Même les professionnels du référencement ne comprennent pas l'attitude de Google envers certains sites. Mais concernant mon site, j'ai ma petite idée... Le fait de faire un lien vers chaque page capturée était au départ une bonne idée, malheureusement, les spammeurs ont découvert le truc, et malgré mes efforts, beaucoup de spam est passé. Les milliers de pages satellites apparaissent surement pour Google comme du spam. La conclusion est logique : scapture.com est traité comme un site de spam !

Comment aider ?
A mon avis, le seul moyen de réparer ça, c'est de faire mieux connaitre ce service. Je vous demande donc de faire connaitre ce site, bref de m'aider. Comment procéder ? C'est tout simple, faites un lien sur votre site, parlez de cet outil si vous estimez qu'il en vaut la peine, donnez-moi des idées... ou aidez-moi à traduire la version anglaise (essentiellement faite à coup de google translate, le résultat n'est pas terrible) !

Analyse HTTP ! — J'ai trouvé le temps cet été d'implanter une fonctionnalité à laquelle je pense depuis le lancement de scapture : l'analyse du trafic HTTP. Dorénavant, pour chaque page capturée, une liste des requêtes et des réponses HTTP engendrées est fournie.

Comme d'habitude avec les nouvelles fonctionnalités sur scapture, celle-ci n'est pas encore éprouvée. Il persiste même certains bugs que je connais sans avoir encore pu les résoudre. Il faut se rendre compte qu'une telle analyse n'est pas facile à réaliser, il faut décorder chaque paquet TCP/IP pour reconstituer le flux HTTP, ce qui s'est avéré beaucoup plus compliqué que je ne le pensais.

Pour l'instant, c'est donc une version qui marche "la plupart du temps" que je vous propose. En espérant trouver le temps et la motivation de continuer à améliorer ce site.

Ailurus fulgens 3. — Firefox 3 est officiellement publié depuis quelques heures et il est déjà disponible sur scapture ! Le record du monde de téléchargement est surement bien parti puisque le plus dur fut d'arriver à télécharger une archive dans la soirée.

A noter que pour installer Firefox 3 sur une machine tournant sur Debian Etch (comme le serveur de scapture), il faut installer GTK 2.10. Pour cela, on peut compiler la version idoine de GTK ou même l'installer en suivant cette procédure qui se résume à faire en root :

wget http://apt.linex.org/linex/gtk-2.10/libgtk2.0-0_2.10.13-2~bpo.1_i386.deb
ar x ./libgtk2.0-0_2.10.13-2~bpo.1_i386.deb
tar xzf ./data.tar.gz
mkdir /opt/gtk-2.10
mv ./usr/lib /opt/gtk-2.10

Et à créer un script de lancement sur ce modèle :

#!/bin/sh
export LD_LIBRARY_PATH="/opt/gtk-2.10/lib"
/chemin-vers-firefox/firefox $*

M.-à-j. d'Opera — Opera vient de franchir une étape importante avec l'arrivée de la version 9.5. C'est maintenant cette version que scapture utilise.

A signaler qu'Opera n'est pas le seul à créer l'actualité, Firefox s'apprête en effet à sortir sa version 3.0. Pour utiliser les préversions depuis un bout de temps, je peux dire que Firefox va frapper un grand coup en matière d'ergonomie et de rapidité. Sa diffusion devrait être aidée par une bonne campagne de presse lui permettant de détenir d'ici deux jours le record du monde en matière de nombre de téléchargements en 24 heures (vous pouvez bien sûr y contribuer : http://www.spreadfirefox.com/fr/worldrecord/).

RPS is back. — C'est de nouveau le RPS qui effectue les captures. Tout a dû être réinstallé sur une machine vierge, car OVH ne sait toujours pas quand ils seront en mesure de fournir une sauvegarde.
Heureusement que le VPS de nfrance était là, sinon le site aurait été coupé pendant un bout de temps. C'est pas très rassurant pour la fiabilité des RPS chez OVH. J'espère qu'il ne s'agit que d'une erreur de jeunesse, on va bien voir...

Serveur down. — Le serveur de scapture est down depuis plusieurs heures. C'est dû à un problème technique que rencontre mon hébergeur (OVH) sur le filesystem de certains serveurs RPS.
D'après les explications d'OVH, il se pourrait que rien ne reparte avant plusieurs dizaines d'heures (!). J'ai donc décidé de redémarrer l'ancien serveur VPS de scapture. Merci à nfrance de ne pas l'avoir désactivé !
En attendant le retour du RPS, les fonctionnalités de scapture reviennent malheureusement à ce qu'elles étaient il y a un peu plus d'un mois...

Analyse textuelle. — Je viens de mettre en ligne un service d'analyse de page Web. Il s'agit d'un outil que j'ai développé (à la base) pour mes propres besoins afin de déterminer le sujet d'une page en établissant un classement évolué des mots clés. Un peu de la même façon dont procède un moteur de recherche pour déterminer le sujet d'une page.
L'intégration au site est toute fraiche et le service n'a pas été testé longuement, il se peut donc que tout ne soit pas parfait.