[SPIP Zone] SPIP, les cookies et Varnish sur Gandi Simple Hosting

Bonjour,

Je viens de découvrir que mes sites SPIP (2 et 3) hébergés sur l’offre Simple Hosting de chez Gandi n’exploitaient pas du tout le système de cache fonctionnant avec Varnish…

Le support de Gandi m’a d’abord demandé d’enlever la directive X-SPIP-Cache de mes entêtes mais sans succès.

Voici maintenant leur explication:

"SPIP est bien compatible avec la plateforme Simple Hosting, mais comme tous CMS ou application, dès lors que vous avez un système de cookies qui entre en conflit avec le cache, ce dernier n’est pas pleinement exploité et vous ne bénéficiez donc pas de tous les avantage de Simple Hosting.

Vous devriez vous rapprocher du support technique SPIP pour en savoir plus au sujet de la désactivation des cookies."

J’ai envisagé un temps le super travail de Fil et son plugin Varnish pour SPIP, mais cela implique d’avoir la main sur la config Varnish ce qui n’est pas le cas dans une offre comme celle de Gandi.

Reste à attaquer le « problème des cookies » mais quels cookies sont en cause ? Quel serait l’incidence sur le fonctionnement de SPIP ?

Merci pour vos lumières !

Philippe B.

En effet un SPIP standard ne peut pas exploiter complètement un varnish standard, car les pages de SPIP sont délibérément gérées de façon dynamique. Mais c’est le cas à priori de tous les CMS qui produisent les pages à la volée.

Il faut quand même distinguer deux cas :

  1. le visiteur sans cookies qui arrive sur une page générée par SPIP :
  • sur la page elle-même, SPIP n’envoie à priori pas d’entête permettant à Varnish de mettre en cache)

=> sauf contre-ordre express : là, il faut voir ce que donne dans ce cas l’option #CACHE{3600,statique}

=> autre optique, utiliser le plugin Expresso (dont j’ignore s’il est maintenu) : http://contrib.spip.net/Expresso

  • sur les ressources liées à la page (images réduites ou non, scripts compactés, css compactées), le visiteur bénéficie quand même à priori du cache de Varnish. Or SPIP produit autant que possible.
  1. le visiteur avec cookie (soit parce qu’il a interagi avec le site, qu’il s’est connecté, etc) ; là c’est Varnish qui, dans ses réglages standards, refuse de servir la moindre version mise en cache.

=> voir si Gandi a fait des réglages différents, et le cas échant s’ils ont une doc précisant leurs réglages (par exemple il est courant de régler varnish pour qu’il ignore les cookies sur les URLs terminant par « .js » ou « .css » etc)

Sinon, la demande de supprimer X-Cache-SPIP ne me semble pas avoir de fondement logique :slight_smile:

Merci Fil pour cette réponse !

L’option #CACHE{3600,statique} ne permet pas de régler le problème. Le plugin Expresso n’est pas compatible avec SPIP 3.

Les ressources liées à la page (images réduites ou non, scripts compactés, css compactées) sont bien gérées par Varnish.

Le plugin Varnish pour SPIP fait comment pour rendre SPIP « compatible » avec Varnish ?

Je vais voir avec Gandi pour des précisions sur leur config…

Cordialement,
Philippe.

Le plugin Varnish pour SPIP fait comment pour rendre SPIP "compatible"
avec Varnish ?

Le plugin envoie des entêtes qui disent à varnish de mettre en cache les
pages SPIP (pour ça pas besoin de configurer varnish de manière spéciale).

Il envoie aussi des entêtes qui lui disent de purger le cache, quand on
fait "vider le cache", "recalcul", etc. C'est ça qui est un réglage
spécifique à ajouter dans la config de varnish. Si tu ne le fais pas, les
visiteurs peuvent avoir accès à des "vieilles" pages.

-- Fil

Si je comprends bien le plugin Varnish ajoute notamment la directive X-Varnish-Ttl, et c’est suffisant pour que Varnish mette en cache les pages SPIP ?

je t’engage à lire le code il sera plus clair que mes explications

Je cherche toujours à faire fonctionner SPIP et Varnish sur l’hébergement Simple Hosting de Gandi mais sans succès…

  • Selon Gandi, leur configuration de Varnish est standard. Et cela fonctionne bien pour les ressources liées à la page (images réduites ou non, scripts compactés, css compactées).

  • Comme tu me l’as conseillé, Fil, j’ai relu le code du plugin Varnish et outre les mécanismes pour gérer le cache entre SPIP et Varnish, la seule modification au niveau SPIP, c’est l’ajout de la directive X-Varnish-Ttl dans l’entête des pages.

Faut-il faire quelque chose de particulier au niveau des squelettes ?

D’avance merci !
Philippe.

- Selon Gandi, leur configuration de Varnish est standard. Et cela
fonctionne bien pour les ressources liées à la page (images réduites ou
non, scripts compactés, css compactées).

mais ça ne fonctionne pas sur les pages générées par spip : normal, car
elles sont toujours "dynamiques"

- Comme tu me l'as conseillé, Fil, j'ai relu le code du plugin Varnish et
outre les mécanismes pour gérer le cache entre SPIP et Varnish, la seule
modification au niveau SPIP, c'est l'ajout de la directive X-Varnish-Ttl
dans l'entête des pages.

x-varnish-ttl ne sera interprété par varnish QUE si tu peux modifier la
config de varnish. Ici, ce n'est pas le cas, donc cette partie ne sert pas.

Faut-il faire quelque chose de particulier au niveau des squelettes ?

pour forcer une page à "coller" dans le cache de varnish, il faudrait
expérimenter avec les arguments optionnels de la balise #CACHE, à priori

#CACHE{24*3600, cache-client}

932 // #CACHE{24*3600, cache-client} autorise gestion du
IF_MODIFIED_SINCE 933 // #CACHE{24*3600, statique} ne respecte pas
l'invalidation par modif de la base 934 // (mais s'invalide tout de
meme a l'expiration du delai) 935 // par defaut cache-client =>
statique 936 // cf. ecrire/public/cacher.php

et bien sûr tester sur des appels sans cookie (avec curl plutôt qu'avec
firefox).

-- Fil

Mais sur un site comme zzz.rezo.net, comment fais-tu pour faire coller les pages dans varnish ?

Sur zzz je configure varnish pour qu’il fasse quelque chose avec les x-varnish-ttl que le plugin spip lui envoie.

la doc de gandi est très succincte : http://wiki.gandi.net/fr/simple/cache

apparemment « Cache-Control: max-age=1 » permet de ne pas conserver la page en cache, peut-être alors que « Cache-Control: max-age=1800 » permettra de la conserver 20 minutes ?

Il faudrait alors modifier la ligne 26 de varnish_pipelines.php pour envoyer cet entête Cache-Control: max-age={durée du cache} (après vérification qu’il n’y a pas de session active, pour ne pas rendre fous les visiteurs connectés).

– Fil

J’ai ajouté la balise #CACHE{2*3600, cache-client} mais la directive Age reste à 0 indiquant la page n’est pas prise en compte par Varnish.

Voici l’entête de ma page d’accueil: curl -I http://foret-broceliande.fr

HTTP/1.1 200 OK

Server: Apache/2.4.12

X-Powered-By: PHP/5.4.36-0+deb7u3

Composed-By: SPIP 3.0.17 @ www.spip.net + spip(3.0.17),compagnon(1.4.1),dump(1.6.7),images(1.1.9),forum(1.8.34),jqueryui(1.8.21),mediabox(0.8.5),mots(2.4.12),msie_compat(1.2.0),organiseur(0.8.10),petitions(1.4.6),porte_plume(1.12.4),revisions(1.7.8),safehtml(1.4.1),sites(1.7.13),squelettes_par_rubrique(1.1.1),stats(0.4.23),svp(0.80.19),urls(1.4.23),vertebres(1.2.2),adminer(4.1.0.2),calendriermini(2.3.7),agenda(3.14.5),yaml(1.5.2),verifier(1.0.5),saisies(2.0.3),cextras(3.4.1),iextras(3.1.2),pays(3.0.10),coordonnees(2.2.4),corbeille(3.0.6),facteur(3.0.19),gravatar(1.5.2),gis(3.4.1),icones_semantiques(0.1.1),links(2.3.7),mesfavoris(2.3.4),pb_selection(3.1.1),ppp(1.0.5),polyhier(2.0.8),pages(1.2.4),simplog(1.0.7),notation(2.0.8),notifications(3.3.3),comments(3.3.2),nospam(1.5.7),contact_libre(0.1.7),statsjs(0.1.0),memoization(1.5.5),iterateurs(0.6.1),queue(0.6.6),breves(1.3.6),compresseur(1.8.8),medias(2.7.59),tw(0.8.26),oembed(1.4.

X-Spip-Cache: 7200

Cache-Control: max-age=7200

X-Spip-Statique: oui

Last-Modified: Thu, 26 Feb 2015 19:35:33 GMT

Content-Type: text/html; charset=utf-8

Vary: Cookie,Accept-Encoding

Connection: keep-alive

Via: 1.1 varnish

Age: 0

Bonjour à tous les 2,

Je confirme qu'avec cache-client cela fonctionne normalement (même si je ne l'ai pas expérimenté sur une config standard).

@+

Benjamin Tricault

Le 26 févr. 2015 à 18:34, Fil <fil@rezo.net> a écrit

pour forcer une page à "coller" dans le cache de varnish, il faudrait expérimenter avec les arguments optionnels de la balise #CACHE, à priori
#CACHE{24*3600, cache-client}
932 // #CACHE{24*3600, cache-client} autorise gestion du IF_MODIFIED_SINCE
933 // #CACHE{24*3600, statique} ne respecte pas l'invalidation par modif de la base
934 // (mais s'invalide tout de meme a l'expiration du delai)
935 // par defaut cache-client => statique
936 // cf. ecrire/public/cacher.php
et bien sûr tester sur des appels sans cookie (avec curl plutôt qu'avec firefox).

-- Fil

Le 27/02/2015 00:35, Benjamin Tricault a écrit :

Je confirme qu'avec cache-client cela fonctionne normalement (même si je ne l'ai pas expérimenté sur une config standard).

Tu veux dire que sur gandi simple hosting
une page servie avec #CACHE{24*3600, cache-client}
bénéficie bien du cache varnish ?

JLuc

@+

Benjamin Tricault

Le 26 févr. 2015 à 18:34, Fil <fil@rezo.net> a écrit

pour forcer une page à "coller" dans le cache de varnish, il faudrait expérimenter avec les arguments optionnels de la balise #CACHE, à priori
#CACHE{24*3600, cache-client}
  932 // #CACHE{24*3600, cache-client} autorise gestion du IF_MODIFIED_SINCE
  933 // #CACHE{24*3600, statique} ne respecte pas l'invalidation par modif de la base
  934 // (mais s'invalide tout de meme a l'expiration du delai)
  935 // par defaut cache-client => statique
  936 // cf. ecrire/public/cacher.php
et bien sûr tester sur des appels sans cookie (avec curl plutôt qu'avec firefox).

-- Fil

----
spip-zone@rezo.net - http://listes.rezo.net/mailman/listinfo/spip-zone

Pardon, j’aurai dû être plus précis, sur un serveur dédié avec une config particulière (que je ne gère pas donc je ne sais pas s’il y a eu une modif pour accepter le max-age mais je ne crois pas), le cache-client permet de bénéficier du cache Varnish. En tout cas, on n’utilise pas le plugin Varnish sur le SPIP en question, et la seule directive que je rajoute c’est « cache-client ». Du coup on n’a pas d’invalidation du cache Varnish possible.

Benjamin

Bonjour,

#CACHE{24*3600, cache-client} ne permet pas de faire fonctionner SPIP avec Varnish sur Simple Hosting.

Je viens d’avoir le support de GANDI à ce sujet. Après avoir testé sur un SPIP 3.0.17 avec seulement les plugins de base et les squelettes de la dist, je ne parviens pas à bénéficier de Varnish. Avec ou sans l’argument cache-client dans la balise #CACHE, on a toujours la directive Vary: Cookie dans l’entête.

Le support GANDI suppose qu’un cookie est généré par un des plugins de base de SPIP… Si c’est le cas et qu’il est standard dans le fonctionnement de SPIP, ils sont prêts à modifier leur config pour prendre en compte ce cookie. Ils vont « creuser » dans SPIP pour identifier ce qui bloque… Réponse début de semaine prochaine mais si en attendant quelqu’un a une piste.

Philippe.

Je ne pense pas que ce soit la bonne piste.
Enfin je précise : SPIP ne génère aucun cookie par defaut pour un visiteur anonyme.

Il faut bien faire attention a faire tous tes tests avec un curl depuis une ligne de commande, pour tester sur une requête purement anonyme, sans cookie.

Maintenant peut-être que ton site pose systématiquement un cookie de langue ou un autre cookie qui du coup invalide aussitot toute possibilité de cache.

Par ailleurs, je pense que si c'est un Varnish Standard un
en-tête Expires avec une date d'expiration future suffira a provoquer une mise en cache Varnish.
Mais l'inconvénient de cette méthode est que du coup la page sera aussi stockée en cache dans le navigateur de l'utilisateur. Il faut donc faire attention à ne poser cet en-tete que si aucune session SPIP n'est en cours.

--
Cédric

Philippe Boussin a écrit :

Bonjour,

#CACHE{24*3600, cache-client} ne permet pas de faire fonctionner SPIP
avec Varnish sur Simple Hosting.

Je viens d'avoir le support de GANDI à ce sujet. Après avoir testé sur
un SPIP 3.0.17 avec seulement les plugins de base et les squelettes de
la dist, je ne parviens pas à bénéficier de Varnish. Avec ou sans
l'argument cache-client dans la balise #CACHE, on a toujours la
directive Vary: Cookie dans l'entête.

Le support GANDI suppose qu'un cookie est généré par un des plugins de
base de SPIP... Si c'est le cas et qu'il est standard dans le
fonctionnement de SPIP, ils sont prêts à modifier leur config pour
prendre en compte ce cookie. Ils vont "creuser" dans SPIP pour
identifier ce qui bloque... Réponse début de semaine prochaine mais si
en attendant quelqu'un a une piste.

Philippe.

Le 27 février 2015 10:56, JLuc <jluc@no-log.org
<mailto:jluc@no-log.org>> a écrit :

    Le 27/02/2015 00:35, Benjamin Tricault a écrit :

        Je confirme qu'avec cache-client cela fonctionne normalement
        (même si je ne l'ai pas expérimenté sur une config standard).

    Tu veux dire que sur gandi simple hosting
    une page servie avec #CACHE{24*3600, cache-client}
    bénéficie bien du cache varnish ?

    JLuc

        @+

        Benjamin Tricault

            Le 26 févr. 2015 à 18:34, Fil <fil@rezo.net
            <mailto:fil@rezo.net>> a écrit

            pour forcer une page à "coller" dans le cache de varnish, il
            faudrait expérimenter avec les arguments optionnels de la
            balise #CACHE, à priori
            #CACHE{24*3600, cache-client}
               932 // #CACHE{24*3600, cache-client} autorise gestion du
            IF_MODIFIED_SINCE
               933 // #CACHE{24*3600, statique} ne respecte pas
            l'invalidation par modif de la base
               934 // (mais s'invalide tout de meme a l'expiration du
            delai)
               935 // par defaut cache-client => statique
               936 // cf. ecrire/public/cacher.php
            et bien sûr tester sur des appels sans cookie (avec curl
            plutôt qu'avec firefox).

            -- Fil

        ----
        spip-zone@rezo.net <mailto:spip-zone@rezo.net> -
        http://listes.rezo.net/__mailman/listinfo/spip-zone
        <http://listes.rezo.net/mailman/listinfo/spip-zone&gt;

    ----
    spip-zone@rezo.net <mailto:spip-zone@rezo.net> -
    http://listes.rezo.net/__mailman/listinfo/spip-zone
    <http://listes.rezo.net/mailman/listinfo/spip-zone&gt;

----
spip-zone@rezo.net - http://listes.rezo.net/mailman/listinfo/spip-zone

Voici l’entête obtenu avec Curl sur site SPIP de base (vide) et le squelette de la dist. Seule modification, l’ajout de la balise #CACHE{2*3600, cache-client} sur la page d’accueil:

HTTP/1.1 200 OK

Server: Apache/2.4.12

X-Powered-By: PHP/5.4.36-0+deb7u3

Composed-By: SPIP 3.0.17 @ www.spip.net + spip(3.0.17),compagnon(1.4.1),dump(1.6.7),images(1.1.9),forum(1.8.34),jqueryui(1.8.21),mediabox(0.8.5),mots(2.4.12),msie_compat(1.2.0),organiseur(0.8.10),petitions(1.4.6),porte_plume(1.12.4),revisions(1.7.8),safehtml(1.4.1),sites(1.7.13),squelettes_par_rubrique(1.1.1),stats(0.4.23),svp(0.80.19),tw(0.8.26),urls(1.4.23),vertebres(1.2.2),iterateurs(0.6.1),queue(0.6.6),breves(1.3.6),compresseur(1.8.8),medias(2.7.59)

X-Spip-Cache: 7200

Cache-Control: max-age=7200

X-Spip-Statique: oui

Last-Modified: Fri, 27 Feb 2015 13:32:20 GMT

Content-Type: text/html; charset=utf-8

Accept-Ranges: bytes

Vary: Cookie,Accept-Encoding

Connection: keep-alive

Via: 1.1 varnish

Age: 0

Je croyais qu’il fallait préférer Cache-control à Expires…

J’ai trouvé la source du problème.
Dans le fichier ecrire/inc_version.php, à la ligne 400, SPIP ajoute systématiquement « Vary: Cookie, Accept-Encoding ».
J’ai retiré Cookie de la directive et (comme par miracle!) Varnish accepte les pages de SPIP…

Maintenant, à ton avis, quelles sont les conséquences pour le fonctionnement de SPIP ?

Bonjour,

En résumé, pour faire fonctionner SPIP avec Varnish chez mon hébergeur, j’ai besoin de modifier la directive « Vary: Cookie, Accept-Encoding » de l’en-tête http ajouté systématiquement par SPIP (fichier ecrire/inc_version.php, à la ligne 400).

J’envisage d’utiliser le pipeline « affichage_entetes_final » pour modifier « Vary: Cookie, Accept-Encoding » en « Vary: Accept-Encoding » uniquement dans le cas où l’utilisateur n’est pas identifié et n’a donc pas de cookie…

Cette approche vous semble-t-elle bonne ?

Merci pour vos avis !