Mai 2015 – Quelques news et 25.200 ressources indexées

By admin, 15 mai 2015

Avec le passage à plus de 15.000 ressources indexées nous avons commencés à rencontrer quelques problèmes liés au choix technique de wordpress comme CMS pour “faire tourner” ce site.

En effet, pour rendre data.abuledu.org “visible” nous avons mis en place le mécanisme suivant : chaque ressources est transformée en un article et chaque mot clé en une catégorie (au sens wordpress).

Les relations Articles Catégories étant automatiques dans wordpress nous avons ainsi l’équivalent des liens crées entre les ressources qui se partagent les mêmes mots clés.

Les problèmes sont néanmoins encore assez nombreux:

• lors de la transformation des ressources en articles wordpress duplique les fichiers et créé plusieurs versions (taille) des images, *doublant* ainsi l’espace disque nécessaire sur le serveur (on en est actuellement à 15 Go de ressources + 15 Go dans wordpress)
• il n’est pas possible d’interagir entre wordpress et l’entrepôt de données
• les modifications des ressources ne sont pas propagées de l’entrepôt vers wordpress
• le moteur de recherche de wordpress n’est pas le même que celui de l’entrepôt de données
• … bref la liste est longue et nous souhaitons améliorer le système, n’oubliez pas que data est le 1er entrepôt de données d’une série (on en a au moins deux autres)

En Mai 2015 nous avons maintenant 25.200 ressources indexées sur ce serveur, soit 15 Go de données brutes. Le dernier scan de wordpress nous indique : 370.310 fichiers dans l’arborescence wp-content …

Nous avons donc repris la réflexion pour faire en sorte que wordpress se comporte comme un client (une interface) au dessus du moteur de l’entrepôt de données. Tout comme le plugin OpenSankoré ou le plugin LibreOffice ou encore les logiciels clients d’AbulÉdu qui utilisent l’API de connexion directe sur l’entrepôt.

Vous pouvez voir le début du chantier ici: http://data.abuledu.org/wp/prototype-de-moteur-de-recherche/ qui sera la prochaine page d’accueil lorsque le développement sera terminé.

Rappel: nous avons besoin de votre aide

Si vous trouvez que le service apporté par ce site vaut 50 euros nous vous rappelons qu’un service ouvert, libre, sans publicité et de qualité n’est pas souvent très pérenne s’il n’est pas financé … pensez donc à soutenir ce projet.