Bonsoir,
Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
Kinza
Ces bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
De mon côté je suis envahi de xxx.best
Le 18/01/2020 à 19:43, Guilain DENISSELLE a écrit :
Bonsoir,
Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
KinzaCes bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.netArchives : https://www.mail-archive.com/spip@rezo.net/maillist.html
Infos : https://listes.rezo.net/mailman/listinfo/spip
Documentation de SPIP : http://www.spip.net/
Irc : de l'aide à toute heure : http://spip.net/irc
Euh, on le trouve où le user agent ?
JC
Le 18/01/2020 à 21:41, Guilain DENISSELLE a écrit :
Les referer n’ont rien à voir avec ça. Regarde le user agent de tes visiteurs et en fonction tu pourras peut être ramener tes stats à la normale ou même les bannir dans ton htaccess si le user agent est récurrent
Guilain
Sent from mobile. Please excuse typoLe 18 janv. 2020 à 19:52, Jean-Christophe Villeneuve <jcvilleneuve@cegetel.net> a écrit :
De mon côté je suis envahi de xxx.best
Le 18/01/2020 à 19:43, Guilain DENISSELLE a écrit :
Bonsoir,Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
KinzaCes bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.netIrc : de l'aide à toute heure : https://nam10.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||d492a7e4e90f4a66bfed08d79c47a239|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637149703784662637&sdata=%2BvD8r4MEGSF0U1ax0FnvyT7ore9rlMQTL6dnxNzeNyg%3D&reserved=0
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.netIrc : de l'aide à toute heure : https://nam10.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||d492a7e4e90f4a66bfed08d79c47a239|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637149703784662637&sdata=%2BvD8r4MEGSF0U1ax0FnvyT7ore9rlMQTL6dnxNzeNyg%3D&reserved=0
Guilain DENISSELLE a écrit le 18/01/2020 à 19:43 :
Bonsoir,
Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
KinzaCes bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
J'ai fait un ticket pour toi ici : https://core.spip.net/issues/4425
Si tu peux le compléter avec ta modification, ce serait super.
Merci
--
RealET
Merci
J'attends l'activation de mon compte sur core.spip.net pour mettre à jour ce ticket.
Le principe du fichier txt est une bonne idée. Je suggère un txt qui ne gère que cette liste et soit dans un répertoire non modifié par une maj de spip
Guilain
-----Message d'origine-----
De : RealET <real3t@gmail.com>
Envoyé : mardi 21 janvier 2020 13:27
À : spip@rezo.net
Objet : Re: [Spip] liste de bot dans inc_version.php
Guilain DENISSELLE a écrit le 18/01/2020 à 19:43 :
Bonsoir,
Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
KinzaCes bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
J'ai fait un ticket pour toi ici : https://nam03.safelinks.protection.outlook.com/?url=https%3A%2F%2Fcore.spip.net%2Fissues%2F4425&data=02|01||7f1bfe029c074d3fc99208d79e6d7b90|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637152065367465771&sdata=4y%2B%2FPpRPHO1JZM6SagW6W9EWMoUO22ajgO6YQL6TqH0%3D&reserved=0
Si tu peux le compléter avec ta modification, ce serait super.
Merci
--
RealET
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.net
Irc : de l'aide à toute heure : https://nam03.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||7f1bfe029c074d3fc99208d79e6d7b90|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637152065367475782&sdata=buOiB1%2F7w2HnWEA49Hul2wFXfCqgkPAeuuoRTKWW0IQ%3D&reserved=0
Guilain DENISSELLE a écrit le 21/01/2020 à 14:23 :
Merci
J'attends l'activation de mon compte sur core.spip.net pour mettre à jour ce ticket.
Toujours pas ?
Le principe du fichier txt est une bonne idée.
> Je suggère un txt qui ne gère que cette liste et soit dans un répertoire non modifié par une maj de spip
Ça, c'est pas possible : soit c'est fourni par SPIP et c'est mis à jour.
Soit c'est ailleurs et c'est pas mis à jour.
Par contre, une fois que c'est dans un fichier texte à part, il devient plus facile d'y contribuer.
--
RealET
Guilain DENISSELLE a écrit le 18/01/2020 à 19:43 :
Bonsoir,
Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
KinzaCes bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
Est-ce que tu pourrais me fournir ton code ?
Que je regarde.
--
RealET
Hello,
Voici en pièce jointe ce que j'ai dans mon propre /ecrire/inc_version.php. Je suis en SPIP 3.2.7 [24473]
Avec le temps passé à scruter mes logs quand les stats partent en vrille, j'ai allongé la liste par défaut.
C'est certain que ça serait mieux d'avoir un fichier paramétrable, par exemple une lame du couteau suisse, plutôt qu'aller bidouiller un fichier dans /ecrire/
Bonne soirée
Guilain
-----Message d'origine-----
De : RealET <real3t@gmail.com>
Envoyé : dimanche 23 février 2020 15:41
À : spip@rezo.net
Objet : Re: [Spip] liste de bot dans inc_version.php
Guilain DENISSELLE a écrit le 18/01/2020 à 19:43 :
Bonsoir,
Le fichier /ecrire/inc_version.php inclut un certain nombre de bots à ne pas comptabiliser. Je suggère d'ajouter une liste de bots chinois et russes :
Mb2345Browser
LieBaoFast
zh-CN
MicroMessenger
zh_CN
KinzaCes bots explosent littéralement mes stats avec des dizaines de milliers de visites comptabilisées.
J'ai fait l'ajout manuellement mais la prochaine mise-à-jour de SPIP les effacera.
Merci
Guilain
Est-ce que tu pourrais me fournir ton code ?
Que je regarde.
--
RealET
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.net
Irc : de l'aide à toute heure : https://nam11.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||3d029882652e49b9e1a708d7b86f027a|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637180659225385045&sdata=wb56a89Np%2BeRoayj0zUwpwjImeYI7U55UViCBWx9lq0%3D&reserved=0
bot.txt (781 Bytes)
Guilain DENISSELLE a écrit le 23/02/2020 à 16:37 :
Hello,
Voici en pièce jointe ce que j'ai dans mon propre /ecrire/inc_version.php.. Je suis en SPIP 3.2.7 [24473]
Avec le temps passé à scruter mes logs quand les stats partent en vrille, j'ai allongé la liste par défaut.
C'est certain que ça serait mieux d'avoir un fichier paramétrable, par exemple une lame du couteau suisse, plutôt qu'aller bidouiller un fichier dans /ecrire/
Merci beaucoup !
Posté dans le ticket, et obtenu cette réponse : https://core.spip.net/issues/4425?issue_count=165&issue_position=1&next_issue_id=4415#note-2
Pour la détection des robots d'indexation, si l'écran de sécurité est présent (ce qui est le cas par défaut), c'est la liste qui figure dans l'écran de sécurité qui est utilisée par SPIP (et non pas celle qui figure dans /ecrire/inc_version.php).
J'ai vérifié, ça ne peut pas être surchargé par mes_options.php 
--
RealET
Le 24/02/2020 à 10:31, RealET a écrit :
Pour la détection des robots d'indexation, si l'écran de sécurité est présent (ce qui est le cas par défaut), c'est la liste qui figure dans l'écran de sécurité qui est utilisée par SPIP (et non pas celle qui figure dans /ecrire/inc_version.php).
J'ai vérifié, ça ne peut pas être surchargé par mes_options.php
je crois qu'il y a un ticket pour demander à pouvoir paramétrer l'écran de sécurité :
la charge maximale normale, par exemple, dépend fortement du hardware et devrait pouvoir être paramétré,
mais je sais plus où c'est ce ticket.
JL
JLuc a écrit le 24/02/2020 à 10:50 :
Le 24/02/2020 à 10:31, RealET a écrit :
Pour la détection des robots d'indexation, si l'écran de sécurité est présent (ce qui est le cas par défaut), c'est la liste qui figure dans l'écran de sécurité qui est utilisée par SPIP (et non pas celle qui figure dans /ecrire/inc_version.php).
J'ai vérifié, ça ne peut pas être surchargé par mes_options.php
je crois qu'il y a un ticket pour demander à pouvoir paramétrer l'écran de sécurité :
la charge maximale normale, par exemple, dépend fortement du hardware et devrait pouvoir être paramétré,
mais je sais plus où c'est ce ticket.
JL
--
RealET
Hello
D'après ce que j'ai compris,
- l'écran de sécurité a pour but de bloquer l'accès, au moins de manière intermittente .
- la liste des bots dans inc_version.php a pour but de ne pas comptabiliser les stats de visite des bots listés
Je n'ai pas envie de bloquer Google/Bing/FB/Yandex/etc ou autres bots légitimes. J'ai juste envie d'avoir des stats réalistes.
Par contre, j'aimerai que le spam des forums ne soit plus comptabilisé en visite : spip parvient à l'interpréter en spam mais pas à décompter ses visites, ou à minima à donner une stat des spams de forums.
Pour le blocage, j'ai plusieurs couches : Fail2Ban et ModSecurity au niveau serveur, puis le htaccess de mes sites où j'ai listé quelques "bad bots" puis enfin les filtres de spip.
Je ne pense pas être le seul confronté à des stats irréalistes
Bonne journée
Guilain
-----Message d'origine-----
De : RealET <real3t@gmail.com>
Envoyé : lundi 24 février 2020 10:32
À : spip@rezo.net
Objet : Re: [Spip] liste de bot dans inc_version.php
Guilain DENISSELLE a écrit le 23/02/2020 à 16:37 :
Hello,
Voici en pièce jointe ce que j'ai dans mon propre
/ecrire/inc_version.php.. Je suis en SPIP 3.2.7 [24473] Avec le temps passé à scruter mes logs quand les stats partent en vrille, j'ai allongé la liste par défaut.
C'est certain que ça serait mieux d'avoir un fichier paramétrable, par
exemple une lame du couteau suisse, plutôt qu'aller bidouiller un
fichier dans /ecrire/
Merci beaucoup !
Posté dans le ticket, et obtenu cette réponse :
https://eur05.safelinks.protection.outlook.com/?url=https%3A%2F%2Fcore.spip.net%2Fissues%2F4425%3Fissue_count%3D165%26issue_position%3D1%26next_issue_id%3D4415%23note-2&data=02|01||df0a4ab429e34486d9d208d7b90cc603|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637181336813423539&sdata=oZHT1apfF9nLgPD553s%2BXKR%2FSfBjQ6UXpUwbzZOWOIk%3D&reserved=0
Pour la détection des robots d'indexation, si l'écran de sécurité est présent (ce qui est le cas par défaut), c'est la liste qui figure dans l'écran de sécurité qui est utilisée par SPIP (et non pas celle qui figure dans /ecrire/inc_version.php).
J'ai vérifié, ça ne peut pas être surchargé par mes_options.php
--
RealET
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.net
Irc : de l'aide à toute heure : https://eur05.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||df0a4ab429e34486d9d208d7b90cc603|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637181336813423539&sdata=XG1BKxIwj0IBIeqPUzj%2Ba%2BSZQyF5KNq%2Bfo3FBF%2BHR7s%3D&reserved=0
Guilain DENISSELLE a écrit le 24/02/2020 à 11:06 :
Hello
D'après ce que j'ai compris,
- l'écran de sécurité a pour but de bloquer l'accès, au moins de manière intermittente .
Pas que : il permet aussi de bloquer les bots en cas de charge important du serveur.
Donc, comme il définit la constante _IS_BOT, la définition ne se fait plus dans inc_version.php
Donc, le patch que tu m'as fourni n'a aucun effet dans SPIP 3.2 qui intègre obligatoirement l'écran de sécurité.
Donc, c'est l'écran de sécurité qu'il faut patcher 
PS : et la constante _IS_BOT est utilisé par la fonction de stats de SPIP pour ne pas pas comptabiliser ces visites là.
--
RealET
Merci pour l'info importante.
Je vais surveiller
-----Message d'origine-----
De : RealET <real3t@gmail.com>
Envoyé : lundi 24 février 2020 13:37
À : spip@rezo.net
Objet : Re: [Spip] liste de bot dans inc_version.php
Guilain DENISSELLE a écrit le 24/02/2020 à 11:06 :
Hello
D'après ce que j'ai compris,
- l'écran de sécurité a pour but de bloquer l'accès, au moins de manière intermittente .
Pas que : il permet aussi de bloquer les bots en cas de charge important du serveur.
Donc, comme il définit la constante _IS_BOT, la définition ne se fait plus dans inc_version.php Donc, le patch que tu m'as fourni n'a aucun effet dans SPIP 3.2 qui intègre obligatoirement l'écran de sécurité.
Donc, c'est l'écran de sécurité qu'il faut patcher
PS : et la constante _IS_BOT est utilisé par la fonction de stats de SPIP pour ne pas pas comptabiliser ces visites là.
--
RealET
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.net
Irc : de l'aide à toute heure : https://eur04.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||65925505950648e0692e08d7b92742cb|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637181450576086796&sdata=S8geeVvy6MhSkALxaLEiPq7VxEIsp68O2Ysw9bv6P9g%3D&reserved=0
OK si les stats de bot sont d'office non comptabilisées. Par contre les visites des robots qui spamment les forums sont toujours comptabilisées comme "normales"
-----Message d'origine-----
De : RealET <real3t@gmail.com>
Envoyé : lundi 24 février 2020 13:37
À : spip@rezo.net
Objet : Re: [Spip] liste de bot dans inc_version.php
Guilain DENISSELLE a écrit le 24/02/2020 à 11:06 :
Hello
D'après ce que j'ai compris,
- l'écran de sécurité a pour but de bloquer l'accès, au moins de manière intermittente .
Pas que : il permet aussi de bloquer les bots en cas de charge important du serveur.
Donc, comme il définit la constante _IS_BOT, la définition ne se fait plus dans inc_version.php Donc, le patch que tu m'as fourni n'a aucun effet dans SPIP 3.2 qui intègre obligatoirement l'écran de sécurité.
Donc, c'est l'écran de sécurité qu'il faut patcher
PS : et la constante _IS_BOT est utilisé par la fonction de stats de SPIP pour ne pas pas comptabiliser ces visites là.
--
RealET
_______________________________________________
liste spip
spip@rezo.net - désabonnement : envoyer un mail à spip-off@rezo.net
Irc : de l'aide à toute heure : https://eur04.safelinks.protection.outlook.com/?url=http%3A%2F%2Fspip.net%2Firc&data=02|01||65925505950648e0692e08d7b92742cb|84df9e7fe9f640afb435aaaaaaaaaaaa|1|0|637181450576086796&sdata=S8geeVvy6MhSkALxaLEiPq7VxEIsp68O2Ysw9bv6P9g%3D&reserved=0