Carnet Wiki

FAQ pratique : Comment SPIPer avec git.spip.net

Version 57 — Avril 2022 JLuc

Il y a abondance de tutoriels généraux pour git sur le net et il y en a même un dans la nébuleuse de la galaxie SPIP. Cette page ici n’est donc pas une FAQ générale sur git. Elle ne concerne que git.spip.net et l’usage de git et de la forge git pour SPIP, avec gitea, et seulement cela. Du moins c’est le projet central car en pratique il y a tout de même quelques aide-mémoires pas spécifiques à git.spip.net.

Pour contribuer à cette FAQ : N’hésitez pas à répondre aux questions sans réponse. Vos textes ne doivent pas être généraux mais concerner spécifiquement git.spip.net.

Les parties incertaines et à valider sont en italique.

Faut-il s’inscrire pour récupérer le code d’une contribution ?

Non : on peut cloner un repo, ou plus simplement juste télécharger son code, sans devoir s’inscrire sur git.spip.net

-  Pour télécharger, on se servira de l’icone « Télécharger » sur la page d’une contribution, à droite des adresses ssh et https (voir copies d’écran ci dessous).

Le téléchargement permet de récupérer le zip de la contribution et de l’installer pour SPIP, mais ce n’est pas un repo git qu’on récupère ainsi, et on ne pourra pas utiliser git dessus, par exemple pour le mettre à jour ou pour commiter. Si on veut pouvoir mettre à jour le source du plugin au moyen de git (git pull)et commiter (git commit puis git push, il faut cloner le repo.

-  Pour cloner : la commande est git clone url_repo, où url_repo est l’adresse https ou ssh du repo (voir ci dessous)

Que sont les adresses ssh et https d’une contribution ?

Un repo peut être accédé par les 2 protocoles ssh et https, et propose donc des urls pour chacun de ces protocoles. Ces 2 urls sont indiquées sur les pages du repo.

Par exemple pour cloner facteur, on utilisera l’une des 2 lignes :
-  url https: git clone https://git.spip.net/spip-contrib-extensions/facteur.git


-  url ssh : git clone git@git.spip.net:spip-contrib-extensions/facteur.git

Tout le monde peut utiliser l’url https, mais il faut être inscrit et avoir associé une clé ssh à son compte et en local pour utiliser l’url ssh. Cela permet également de commiter.

Faut il s’inscrire pour pouvoir commiter ?

Oui, il faut s’inscrire sur git.spip.net et accepter la charte de la zone pour pouvoir commiter. Consultez aussi la charte d’accueil de SPIP

S’inscrire permet ensuite de commiter sur un repo.

-  Pour un repo cloné par https: on peut commiter sans clé SSH en indiquant simplement son login et son mot de passe git.spip.net lors du push :
$git push origin branche -> prompt de demande du login (pseudo ou mail fonctionnent) -> prompt de demande du mot de passe

-  avec l’url ssh, il faut avoir créé une clé ssh (pour cela, suivre les indications de https://help.github.com/en/github/authenticating-to-github/generating-a-new-ssh-key-and-adding-it-to-the-ssh-agent), et l’avoir déclarée à git.spip : on transfère le contenu de la clé publique dans la configuration du compte : Profil et réglages > Configuration > Clés SSH / GPG. Votre authentification sera ensuite automatique et transparente : plus besoin de mot de passe.

Comment paramétrer git en local ?

Une bonne partie de la config proposée par Delicious Insight peut être reprise pour les développements SPIP ainsi que leur prompt (un peu adapté), super utile : https://delicious-insights.com/fr/articles/apprendre-git (dans Installation et Configuration>configuration partagée")

Quelles sont les différentes « organisations » de spip sur gitea

Les différentes organisations servent à regrouper les projets selon leur type et selon les droits qui leurs sont associés.

les Organisations de git.spip.net

Les plugins se trouvent essentiellement dans les « extensions fonctionnelles », encore que certains squelettes (ou thèmes) soient désormais techniquement accessibles sous forme de paquets par SVP...

Raccourcis sur gitea

-  #123 : ticket ou PR 123, dans le projet courant
-  orga/projet@sha : raccourci vers le commit sha dans le projet de l’orga
-  orga/projet#issue : raccourci vers le ticket « issue » dans le projet de l’orga
-  orga/projet !pr : raccourci vers la PR

Quand déclarer un changement de version dans paquet.xml ?

Les n° de versions sont déclarés dans paquet.xml ainsi que l’état du plugin : stable, dev, test. Dans tous les cas, le n° de version respecte l’esprit du versionnage sémantique.
-  les PR concernant un plugin de la dist ne doivent PAS modifier un changement de version. C’est l’équipe noyau de SPIP qui gère ces modifications.
-  Pour les autres plugins... c’est bien comme vous voulez, en accord avec le ou les auteurs du plugin, mais de préférence pas dans une PR s’il y a des risques de conflits avec d’autres PR. (voir #Dans-une-PR-faut-il-actualiser-le-...)

Comment demander à SVP de mettre à jour le zip proposé ?

Comment informer SVP qu’il y a une mise à jour importante et que le zip qu’il propose doit être mis à jour afin que tous les utilisateurs de SPIP puissent bénéficier de la nouvelle version du plugin ?

Il faut créer un nouveau tag git et le « débardeur » se charge ensuite de mettre à jour le zip, qui sera proposé dans la partie privée de votre SPIP. Il n’y a pas d’interface gitea pour créer un tag et il faut donc le faire par la ligne de commande.

Le nom du tag doit être consitué par un préfixe ’v’ suivi du n° de la version présent dans paquet.xml.

Exemple : pour distribuer la version 1.., cette version doit être indiquée dans le paquet.xml, et le tag v1..0 doit être créé. Pour créer le tag, mettez vous dans le dossier source racine du plugin, et faites :

git tag -a v1.. -m "Nouvelle version 1.."
git push
git push --tags

Si vous voulez, vous pouvez paramétrer votre git pour éviter cette dernière étape : ouvrez votre ficheir ~/.gitconfig et assurez vous qu’il y a dedans :

[push]
    default = simple
    followTags = true

Avec ce paramétrage, il suffit de faire :

git tag -a v1.. -m "Version 1.."
git push

Faut il économiser les tags ?

Sous git, créer un tag n’a qu’un coût assez faible. Il faut donc créer un tag chaque fois que c’est utile, c’est à dire chaque fois qu’on veut mettre à disposition des utilisateurs une nouvelle version du plugin.

En même temps ça se traduit par un ZIP, faut pas en abuser sans utilité.

Peut-on effacer un tag ?

Un tag sert à la fois pour demander à distribuer une version, ET à référencer une étape de développement et d’évolution du code. Supprimer un tag perd donc cette référence.

Si d’aventure il vous arrivait de créer un tag puis de changer d’avis, il est possible de le supprimer mais alors il ne faut surtout pas le réutiliser plus tard, car SVP ne s’y retrouve pas : il faut monter la version et faire un nouveau tag.

git tag -d v1..0
git push origin :refs/tags/v1..

Comment importer sur git.spip.net un plugin développé sur github ou gitlab ?

Il y a 2 manières de faire : en cliquant un bouton (simple et automatique) ou en ligne de commande (personnalisable au besoin).

-  Automatiquement : sur git.spip.net, chacun peut trouver, à coté de son avatar, une opération appelée « Nouvelle migration ». Elle permet en un seul formulaire de transférer un repo github ou autre vers son organisation personnelle sur la forge ou dans une des organisation spip-contrib.

-  En ligne de commande : Chaque repo git, qu’il soit distant ou local, possède un historique, et qu’on peut synchroniser les historiques entre les repos
Pour importer un repo github ou gitlab sur git.spip.net,

  1. Tu clones en local ton repo
  2. Tu crée un nouveau repo sur git.spip.net
  3. Tu références ce repo distant dans ton repos local avec git remote add <unnomdetonchoix> <lurldureposdistant>. <unnomdetonchoix> est le nom qui permet de référencer (depuis ton repos local) le repos distant nouvellement créé. Mais si en fait tu souhaites ne garder qu’un seul dépot distant comme dépot de référence, plutôt qu’ajouter la nouvelle url à l’url existante, tu peux aussi simplement la remplacer : git remote set-url origin <lurl du repos distant> .
  4. Tu fais git push <unnomdetonchoix>

Rq : Par convention, lorsqu’on clone une depot distant, il est référencé avec le nom origin comme dépot local. Mais tu peux en référencer plusieurs.
Une pratique courante est
-  upstream pour désigner le repos communautaire officiel du projet
-  origin pour designer le repos distant « personnel »

Est-ce une bonne pratique de récupérer le code de tous les plugins de la zone

Pour ne pas surcharger le serveur, il ne faut cloner localement que les plugins dont on a besoin. Donc si vous n’avez pas besoin de tous les plugins, ne clonez pas tous les plugins.

Dans certains cas toutefois, on a parfois besoin des sources de tous les plugins, par exemple pour faire des recherches globalement sur tout le code afin d’étudier les cas d’usages d’une fonction ou pour corriger tous ces appels.

Dans ce cas, utilisez le script gitea-mirror : il interroge l’API Gitea pour avoir la liste des repositories de chaque organisation, et récupère ou met a jour le dépot s’il a été modifié depuis le dernier pull. Un cache de 10mn evite de trop solliciter gitea. Les repositories en erreur ou vide sont détectés et à la fin on a un bilan final.

Comment être notifié des modifications apportées sur un plugin, ou ne pas l’être ?

Toute personne inscrite sur git.spip.net est abonnée à l’ensemble des dépôts, et vous êtes notifiés des divers échanges qui ont lieu sur ces divers dépôts : tickets, PR, ...
En effet, votre compte est configuré par défaut de telle sorte que toutes les notifications vous parviennent. Vous pouvez modifier cette configuration depuis https://git.spip.net/user/settings/account

Comment proposer une modification = faire une PR ?

Faire une PR, c’est proposer l’intégration de modifications (https://git.spip.net/spip/dist/pulls). Ces modifications doivent auparavant avoir été faite sur une branche ou sur un fork du repo.

-  Pour proposer une modification sur le core ou un plugin-dist : À moins de droits spéciaux, on ne peut pas créer une branche sur le repo d’origine. Il faut donc créer un fork perso sur gitea. Vous pourrez ensuite développer sur une branche spéciale du fork, et faire la PR.

-  Pour proposer une modification sur un plugin, il vaut mieux éviter de forker car c’est plus simple à tester ensuite en créant simplement une nouvelle branche dans le repo collectif. Le nom de cette branche doit évoquer le motif de sa création : inclure le n° de ticket ou un motclé évocateur.

Git merge ou rebase ?

Cela dépend des personnes qui gèrent les projets, et donc des projets.

Certains personnes tiennent au rebase :
— « le rebase c’est mieux car on conserve l’historique linéaire et on évite les conflits, et ça évite un commit supplémentaire rien que pour le merge »

D’autres veulent conserver les étapes de dévelopement tickets par tickets, et donc merger.

Sur la question, voir par ex. https://delicious-insights.com/fr/articles/bien-utiliser-git-merge-et-rebase/

Le core fonctionne plutôt par rebase... mais gitea propose le merge par défaut.

Dans tous les cas, il vaut mieux ne pas merger sur un pull, et donc régler ainsi son git local

Pour cela :

git config --global pull.ff only
git config --global pull.rebase true

Nettoyer après un merge

Le merge ajoute un commit dans l’historique, juste pour indiquer qu’il y a eu merge. On peut le virer, par exemple en le fusionnant avec le commit précédent, avec la commande :
git rebase -i
Voir la doc : https://git-scm.com/book/fr/v2/Utilitaires-Git-R%C3%A9%C3%A9crire-l%E2%80%99historique

Pour éviter les merge

git fetch : git va chercher les commits qui sont sur le serveur et les récupère en local, dans son arbre, MAIS il ne les checkout pas. En gros tu restes sur le même commit en local, mais simplement git sait maintenant qu’il y a des commits en plus sur le serveur si c’est le cas

git pull : c’est un git fetch + le checkout dans ton répertoire des commits qui arrivent depuis le serveur.

Et c’est là que le problème se pose : si tu as travaillé entre temps, ton dossier local contient des commits qui ne sont pas sur le serveur, et le serveur contient des commits qui ne sont pas sur ton disque.

Pour ça 2 solutions :
-  soit git fait un merge (c’est le réglage par défaut que tu as actuellement), et ça génère sans arrêt plein de commits de merge un peu ennuyeux
-  soit git fait un rebase : il va enlever tes commits locaux, remettre les commits qui arrivent depuis le serveur, et rejouer tes commits par dessus. 99% du temps ça se passe bien, mais parfois il peut y avoir un conflit sur une modif faites des 2 côtés. Dans ce cas suivre les indications de git : editer le fichier, résoudre le conflit manuellement, faire un git add dessus, puis un git rebase --continue

Une commande permet que les « pull » se fassent toujours en « rebase » et éviter de faire des « merge » sans arrêt sur le master quand quelqu’un a commit en parallèle :
git config --global pull.rebase true

Pour proposer une PR, vaut il mieux forker un repo ou bien juste créer une branche sur le même repo ?

La logique du fork est celle de github, où chacun⋅e code dans son coin puis fait valider une PR par un responsable principal de projet. C’est ce qu’il faut faire pour le core (organisation : https://gitea.spip.net/spip)

Sur la logique plus communautaire des plugins de spip-zone, il est possible de juste faire une branche sur le dépot commun, sans avoir forké, puis de faire une PR sur ce même dépot.

Autrement dit :
-  pour le core : forker le repo sur git.spip, cloner le fork localement, créer une branche
-  pour un plugin communautaire : cloner directement le repo localement, créer une branche. Puis commiter localement, pusher puis faire la PR sur git.spip. Rq : Il est éventuellement possible de commit direct dans le master si vous êtes absolument certain de ce que vous faites et que ça ne nécessite pas une validation.

Dans une PR, faut il actualiser le n° de version ?

Quand on propose une PR, on sait pas si elle sera validée et fusionnée ou bien discutée pour être améliorée ou rejetée. Donc on ne sait pas à l’avancele temps que ça prendra et dans quel ordre les PRs seront mergées. Si les n° de versions étaient actualisés dans les PR, ça pourrait provoquer des conflits selon l’ordre de merge. Les PRs ne doivent donc PAS modifier les n° de version dans paquet.xml. Ce doit être fait à part, sans PR.

Comment actualiser un fork ?

Indications en anglais : https://stackoverflow.com/questions/7244321/how-do-i-update-a-github-forked-repository/7244456#7244456

Comment recréer un dépôt existant sur une autre infrastructure ?

Si l’import d’un dépôt via l’outil de gestion des dépôts (Gitea, Gitlab...) ne fonctionne pas, il est possible de créer un nouveau dépôt sur l’infrastructure cible (celle qui va recevoir le dépôt définitif) et d’y importer le dépôt avec son historique.

Après avoir créé le dépôt sur l’infrastructure cible https://git.spip.net/organisation/prefix_du_plugin.git, utiliser les commandes suivantes :

git remote add prefix_du_plugin https://git.spip.net/organisation/prefix_du_plugin.git
git push prefix_du_plugin master 

Note : Si l’historique des commits est bien conservé, les tickets et pull-requests ne sont pas importés, c’est donc à utiliser lorsque que l’import ne fonctionne pas.

Comment mettre à jour une mutualisation ?

Avec la mutualisation, la mise à jour par l’interface de SPIP ne convient pas bien car elle met le code dans des sous-dossiers différents pour chaque version, ce qui a pour effet de désactiver le plugin pour les autres sites. Il faut donc faire les mises à jour sans changer le dossier.
OVH propose une méthode : https://mutu.jack31.org/Mutualisation-chez-OVH-on-applique-une-solution-differente mais ça convient pas à tout le monde. Il y a sûrement d’autres solutions encore, mais sinon voici comment faire en ligne de commande (cron ou ssh) et avec git.

Pour installer 1) sur une mutualisation, 2) par ssh ou dans un cron, 3) la dernière version stable du plugin dont l’url du repo est url_remote 4) dans le dossier local_directory 4) et la mettre à jour :

git clone url_remote local_directory
cd local_directory
git fetch --all
git checkout $(git describe --tags --abbrev=0)

Ça copie localement le dernier tag créé, qui est souvent la dernière version stable.
Il y a un message d’avertissement car on arrive dans un état « détaché », sur un commit qui n’est pas une branche.

À quoi servent les dépôts personnels ? Puis je en créer un pour un plugin spécifique à mon site perso ?

En plus d’accéder aux dépôts des « organisations », chacun peut se créer des dépôts personnels.
Ces dépôt personnel servent à deux choses :

  1. faire des forks pour faire des PR afin de commiter sur les dépots de l’organisation « core », car tout le monde a les droits requis pour faire des branches pour les plugins de l’organisation « contributions »
  2. pour maintenir des plugins communs mais sensibles, qui ne doivent pas pouvoir être modifié à l’arrache pas n’importe qui.

Comment étendre ou restreindre la compatibilité SPIP d’un plugin ?

Autant étendre l’intervalle de compatibilité avec SPIP sur une branche existante ne pose pas de problème particulier (sauf à bien être certain de pas avoir à revenir en arrière), autant réduire l’intervalle de compatibilité en enlevant le support de versions SPIP ne doit pas se faire à la légère.

Pour illustrer, dans le cas précis, si on doit faire un fix de sécurité ou même a minima un bugfix parce qu’un vieux site continue de tourner sur une veille version du plugin, on est totalement coincé.

La bonne pratique, quand on veut abandonner le support de vieilles versions de SPIP est toujours de faire une nouvelle branche.

Ici donc, il aurait faire une branche de maintenance pour la version v1 du plugin, et passer le master en branche v2. Au passage, cela permet également d’être plus ambitieux et de monter la version mini de SPIP à 3.2 par exemple, laissant le support des plus vieux SPIP à la branche de maintenance si besoin et c’est ce que j’ai fait sur le plugin vérifier ce jour.

( source)

Revert un commit

-  pour vérifier, voir le diff entre 2 commits : git diff abcdef..123456 (la référence du premier commit, deux petits points et la référence du second commit). Et on ajoute l’option -w pour ne pas voir les changements d’espaces ou de TAB.
-  revert un commit : git revert xxxxxx (avec le numéro du commit à revert )
-  Revert un commit déjà pushé (exemple)

git checkout master
# e3f1e37 est la révision à laquelle on veut revenir
git reset --hard e3f1e37
git push --force origin master

(cf https://newbedev.com/shell-remove-unwanted-commit-git-rebase-code-example)

Synchroniser un clone et ses branches

Pour faire proprement des PR il faut partir d’un master propre, qui ne contient que les commits du repo d’origine. Pour cela il ne faut jamais commit dessus, et tu le pull avec l’option —rebase pour ne pas avoir de commit de merge dessus non plus.

Ça permet ensuite d’avoir des branches, que tu peux rebase sur le master quand il a été mis a jour, et dont on aura ici que les commits ajoutés (et sans commit de merge)

En local, les lignes suivantes dans le .gitconfig global évitent les commits de merge.

[pull]
	ff = only
	rebase = true

Comment nettoyer et synchroniser un clone crade avec le master ?
-  Sur ton master il faut que tu fasse un git reset 351d3e4a957207b3a2c01c7df9d7cdc9537907b3 pour revenir au dernier commit officiel
-  puis un git reset --hard pour supprimer les modifs
-  puis un git rebase upstream/master ou upstream est le nom du remote qui pointe sur le repo spip/spip officiel.
-  ça ramènera tous les commits du core et tu seras dans les clous a nouveau

Et pour des branches ?
-  si tu as besoin d’autres branches il faut les rebase pareil depuis le core

Comment gérer les conflits qui empêchent un merge sur gitea

Q : « Je dois merger et gitea me signale des conflits. Que fais je ? »
A : « Tu passes sur le master. tu pull. Ensuite tu bascules sur ta branche de PR et tu fais un git rebase master tabranchedepr. »
Q : « Là il détecte les conflits ... Je les rèsouds et quand c’est bon je fais git rebase --continue. Si je recommence il dit "no rebase in progress" »
A : « Maintenant tu peux balancer un push force de ta branche de PR : git push --force et zou »

Questions encore sans réponses

...

...

...

...

...

...

...
cf. dans cettepage, voir #gitea-mirror..../voir aussi : récuperer le seul source Zip de tout un ensemble..

Retour à la version courante

Toutes les versions