Convertir un site SPIP 3 en utf-8 avec le plugin Grenier

Et SPIP 4 ?

Cet article est une archive pour les sites en SPIP 3 qui n’étaient pas encore en utf-8

Pour SPIP 4, le plugin grenier ne propose plus ces fonctions de conversion en utf-8.

La solution est d’utiliser spip-cli qui fournit une commande en ligne pour convertir en utf-8 (pour un site en mysql)

spip sql:convert:toutf8

Convertir un site SPIP 3 en utf-8 avec le plugin Grenier

SPIP 3 fonctionne nativement avec l’encodage universel unicode utf-8.

Sur certains sites (par exemple sur une mise à jour), on peut avoir un site qui est resté en iso-latin ce qui n’est pas conseillé (source de bugs, d’incompatibilité, ...) .

Voici la manière de le convertir simplement en utf-8.

  1. Télécharger et activer le plugin Grenier
  2. Faire un sauvegarde de votre site (à la fois en créant un dump SPIP mais aussi un export MySQL sous phpMyAdmin pour pouvoir restaurer l’existant en cas de problème)
  3. Se rendre sur la page ecrire/?exec=base_convert_utf8
  4. Lancer le script !

Autre script lié à l’encodage de la base de donnée
Le plugin grenier dispose aussi d’un autre script qui lui permet de modifier l’interclassement de votre base pour le repasser en utf-8 si ce n’est pas le cas.

Par exemple : vous avez un site SPIP déclaré en unicode mais l’interclassement est resté en latin. (Si vous l’éditez sous phpmyadmin, les champs sont encodés bizarrement).

Dans ce cas, il faut appeler le script ecrire/?exec=base_convert_sql_utf8


Cas d’une base sqlite
Pour le cas très particulier des personnes avec une base en Sqlite.
Voici les lignes de commandes requises pour convertir votre base (astuce fournie par ben).

echo "On dump la base spip.sqlite dans un fichier dump.sql"  
echo ".dump" | sqlite3 spip.sqlite > dump.sql

echo "On convertit la base en utf8 à l'aide de l'utilitaire iconv" 
iconv -f iso-8859-1 -t UTF-8 < dump.sql > dump-utf.sql

echo "On reconstruit un fichier sqlite à partir du dump sql utf8" 
echo ".restore" | sqlite3 spiputf.sqlite < dump-utf.sql

echo "On met de coté la base iso"
mv spip.sqlite spip.sqlite.iso

echo "La base utf est maintenant la base spip "
mv spiputf.sqlite spip.sqlite

echo "Victoire (normalement) "

Autres ressources

Dans les cas où cela ne fonctionne pas, consulter aussi
http://zzz.rezo.net/Reparer-le-char...
Bouée de sauvetage utf8

Pour les versions SPIP 2.1

Pour les anciennes versions de SPIP, le plugin grenier n’est pas nécessaire, les scripts sont disponibles à l’adresse suivante depuis la partie privée :

  • ?exec=convert_sql_utf8
  • ?exec=convert_utf8

Discussion

3 discussions

  • 4

    Bonjour merci pour ce plugin très utile
    je viens d’installer la dernière version du plugin v1.0.1 sur un SPIP 4.0.1 (php 7.4) mais quand je cherche à le lancer avec ecrire/ ?exec=base_convert_utf8 j’ai le message d’erreur suivant
    Fichier base_convert_utf8 introuvable. Effectivement le plugin v1.0.1 contrairement à la version 0.3.3 n’a pas de sous-dossier « base » où se trouve le fichier convert_utf8.php.

    Est-ce qu’en ajoutant le sous-dossier base de la v 0.3.3 dans la v1.0.1, est-ce que le plugin fonctionnera correctement avec SPIP 4.0 ?

    Cordialement

    • Re-bonjour

      Dans le readme du plugin, je viens de voir « Dans votre code PHP, ajouter include_spip('inc/vieilles_defs'); pour charger toutes ces vieilles fonctions. » Pouvez-vous m’indiquer dans quel fichier php de spip faut-il ajouter cette ligne de code ?

      Joyeuses fêtes

    • Bonjour et bonne année

      à bien y regarder le plugin v1.0.1 ne fait plus la conversion de base. Il faut alors que je repasse en spip 3.2 et que j’utilise la v0.3.3 ?

      Merci

    • Bonjour,
      J’ai le même souci... avec la même erreur Fichier base_convert_sql_utf8 introuvable, sur un spip 4.0.9
      Merci

    • Effectivement les fonctions pour convertir les bases ont été rétirées du plugin grenier pour les sites SPIP 4+

      Il existe un autre solution en utilisant spip-cli (j’ai mis à jour l’article et les liens ad hoc)
      Par contre, cela requiert un peu de connaissances techniques.

      Donc si vous partez d’un SPIP 3, il est conseillé de plutôt convertir en utf-8 puis de passer en SPIP 4.

    Répondre à ce message

  • pffiouf,
    grace à ta contribution, j’ai réussi à repasser la base mysql d’un site en UTF-8 et ultime gageure : sans accès FTP !
    merci bien !

    Répondre à ce message

  • 3

    Bonjour,
    Merci pour le plugin et les diverses options proposées mais malheureusement rien ne fonctionne pour moi à partir du plugin Grenier.
    Je viens de mettre à jour le site www.culturejazz.fr (hébergement mutualisé OVH) ce 28 décembre vers la dernière version de SPIP avec Spip_loader. Ça s’est globalement bien passé mis à part un problème d’encodage des caractères accentués (et autres « spéciaux ») qui résiste aux deux syntaxes proposées pour « Grenier », ci-dessus. La seconde me liste un certain nombre de modifications mais rien n’a changé !
    J’avais testé aussi avant cela la modification de l’interclassement de la base par phpMyAdmin.

    NB : J’ai profité de la mise à jour pour passer de PHP 5.6 à PHP 7.2... Cela peut-il avoir une incidence ?

    Je précise que dans l’interface privée de SPIP, seul le rédactionnel lié au contenu du site est affecté. Les menus, entêtes etc. de SPIP s’affichent sans erreurs d’accents etc.

    Quelqu’un a-t-il une idée ? une solution ?
    Merci d’avance et belle fin d’année à vous !

    Th.

    • Bonjour,

      Quelle était la version précédente de SPIP ?
      Avez-vous fait une sauvegarde avant la migration ?

      Si vous avez une sauvegarde :

      • essayer de revenir à la version précédente (PHP 5.6, votre SPIP précédente, votre base, précédente).
      • utiliser les fonctions de grenier pour passer la base en utf-8. si cela fonctionne bien, les accents doivent bien s’afficher sous phpmyadmin
      • faire une nouvelle sauvegarde
      • lancer la migration vers le dernier spip avec le spip_loader
      • passer à PHP 7.2

      Tenez-nous informé !

    • Bonjour et bonne année 2020 à vous !

      Merci pour votre réponse et votre aide. Tout est maintenant rentré dans l’ordre : base en UTF8, SPIP 3.2.7 (à la place de 3.0.1) et PHP 7.2 (contre 5.6 précédemment) !
      J’ai suivi vos conseils mais sans avoir le courage de réinstaller le vieux Spip3.0 !

      Résumé de ma procédure :
      -  retour à php 5.6 (via le « manager » OVH) avec Spip 3.2.7.
      -  tentative de restauration de la sauvegarde antérieure à la mise à jour depuis l’interface de SPIP. Message de réussite mais... base visiblement effacée !!
      -  Retour au manager OVH pour restaurer leur propre sauvegarde de la base antérieure à la MAJ (merci OVH !) ;
      >> Et là, j’avais récupéré des textes lisibles et accentués !
      -  Un petit nettoyage grâce au plugin « Grenier » (merci à vous !). Le premier script me dit que la base est en UTF-8, le second semble apporter des corrections.
      -  Vérification de la base via phpMyAdmin : tout est en ordre ! Ouf !

      Eh bien, voilà une année qui commence bien !
      Il reste des petits réglages à reprendre sur le site mais l’essentiel est préservé.
      Moralité : prudence avec les mises à jour un peu trop « ambitieuses » !

      Cordialement,
      TG

    • Merci pour le retour d’expérience et bravo pour le passage en SPIP 3.2.7 en utf-8 !
      Une année qui commence bien :)

    Répondre à ce message

Ajouter un commentaire

Avant de faire part d’un problème sur un plugin X, merci de lire ce qui suit :

  • Désactiver tous les plugins que vous ne voulez pas tester afin de vous assurer que le bug vient bien du plugin X. Cela vous évitera d’écrire sur le forum d’une contribution qui n’est finalement pas en cause.
  • Cherchez et notez les numéros de version de tout ce qui est en place au moment du test :
    • version de SPIP, en bas de la partie privée
    • version du plugin testé et des éventuels plugins nécessités
    • version de PHP (exec=info en partie privée)
    • version de MySQL / SQLite
  • Si votre problème concerne la partie publique de votre site, donnez une URL où le bug est visible, pour que les gens puissent voir par eux-mêmes.
  • En cas de page blanche, merci d’activer l’affichage des erreurs, et d’indiquer ensuite l’erreur qui apparaît.

Merci d’avance pour les personnes qui vous aideront !

Par ailleurs, n’oubliez pas que les contributeurs et contributrices ont une vie en dehors de SPIP.

Qui êtes-vous ?
[Se connecter]

Pour afficher votre trombine avec votre message, enregistrez-la d’abord sur gravatar.com (gratuit et indolore) et n’oubliez pas d’indiquer votre adresse e-mail ici.

Ajoutez votre commentaire ici

Ce champ accepte les raccourcis SPIP {{gras}} {italique} -*liste [texte->url] <quote> <code> et le code HTML <q> <del> <ins>. Pour créer des paragraphes, laissez simplement des lignes vides.

Ajouter un document

Suivre les commentaires : RSS 2.0 | Atom