/spip-contrib-outils

Tu utilises VSCodium comme IDE ?

Oui ! (VSCod ium la version sans les trackers de Micro$oft...)
et si tu fais du SPIP, tu as tout un tas de snippets ici : ►https://git.spip.net/spip-contrib-outils/snippets-vscodium

Oui, je connais la différence.
Les autres libristes ont tendance à utiliser NéoVim, mais je ne suis déjà par trop Vim au départ.

@seenthis : l’un d’entre vous pourrait-il vérifier pourquoi le système de rejet par 503 des bots en fonction du load ne fonctionne pas ?

Toujours le même classement deux heures après. Ils sont tous en train de récupérer l’intégralité de SeenThis.

Des bots qui récupèrent l’intégralité de Seenthis ...

#it_has_begun

Vous pouvez expliquer pour les mal comprenant‧es comme moi par exemple ? Merci @biggrizzly @sombre

Ce matin, 8h06.

Explications :
– Chaque visiteur utilise un logiciel qui télécharge les pages et les images des pages qu’il visite.
– Chacune des ressources téléchargées génère une ligne de journal dans un fichier dit de « log ».
– Le logiciel, à chaque téléchargement, transmet une chaîne de caractère que l’on nomme « user agent ». C’est le nom du logiciel utilisé, y compris des informations sur le système d’exploitation, et pleins d’autres choses potentiellement.
– Les 10 lignes que je présente sont issues des 1000 dernières lignes de journal regroupées sur le « user agent », avec un décompte du nombre d’occurrences de chacun.

Dans ce dernier export, on constate que les 10 premiers « user agent » représentent 73,1% de l’activité. Et que ceux-ci sont à 100% des robots.

@biggrizzly : Est-ce que ces activités « supra normales » induisent qu’on ait souvent des erreurs « 502 bad gateway » lors d’une tentative de connection ? Moi, pas plus tard qu’hier soir (et de plus en plus fréquemment ces dernières semaines).

@mfmb : je n’ai pas l’expertise de Big Grizzly dans le domaine du web. Mais quand j’apprends que des bots (machines plus ou moins autonomes car automatisées) se mettent à aspirer les données d’une plateforme comme Seenthis, je me pose la question : mais où vont les octets ? Et quelle la nature de l’interface fauteuil-clavier (le gugusse qui est aux manettes) qui se permet de faire ça.

#surveillance (?)
(spoiler : yes)

L’humain soucieux d’éduquer sa progéniture lui donne accès aux livres et aux écoles. Les capitalistes, soucieux de remplacer l’humain, donnent accès à leurs robots aux contenus des réseaux sociaux. Leurs robots pompent tous les échanges humains (écrits, dessins, vidéos) dans l’espoir de créer une intelligence artificielle plus performante que celle du capitaliste voisin, pour enfin pouvoir se passer des humains.

Pomper l’intégralité de SeenThis, ça brûle des ressources, oui, on ferait mieux de leur transmettre directement la base de données... Ils ont de leur côté décidé qu’ils avaient des moyens illimités. Ils construisent des datacenters uniquement pour ce besoin là. C’est consternant d’inutilité. Mais il en ressortira quelque chose, assurément. Avec ou sans nous.

La capture capitaliste du travail gratuit se veut illimitée.

#IA #travail_gatuit

J’omets de répondre à ta question, désolé. Oui, ces erreurs récurrentes, les difficultés à publier ou à répondre, c’est à cause des bots.

Mais comme je l’indique dans une de mes réponses, je ne comprends pas pourquoi les bots ne sont pas refusés (erreur 503), quand la charge de la machine est élevée. J’ai l’impression que lors de la dernière mise à jour, la fonctionnalité a été désactivée, ou quelque chose du genre, et c’est pour cela qu’il serait bon qu’un spécialiste aille regarder, s-il-vous-plait-merci-d-avance.

Merci pour les explications. @sombre @biggrizzly

Je viens de passer une journée a les virer d’un forum. Mardi c’était devenu infernal.
Pour certains c’est assez simple, ils respectent le robots.txt. openai et je ne sais plus quel autre donnent leurs adresse avec le masque cidr qui va bien. Je ne suis pas admin de la machine (donc pas moyen de configurer le pare-feu) mais avec une section <Limit> dans un fichier .htaccess ça marche.
Reste les plus agressifs : bytedance, amazon et quelques autres. J’ai pas la plage IP de ceux la.
Certains t’expliquent sans rire qu’ils relisent le robot.txt tous les 10 jours ! J’ai ajouté des règles de réécriture qui leur balance des erreurs 403. En 24h tout est redevenu normal.

J’en cause plus généralement aussi ici :
▻https://seenthis.net/messages/1051005

9h43, 100% de robots dans les 840 dernières lignes du journal.

Mince je n’avais pas vu tes pings @biggrizzly (normal le ping vers @seenthis n’est plus relayé sur discourse), n’hésite pas à me pinger en direct :)

Si les bots ne sont pas bloqués, il y a deux pistes : soit leur user agent n’est pas dans la liste déclaré par l’écran de sécu de SPIP cf ▻https://git.spip.net/spip-contrib-outils/securite/-/blob/master/ecran_securite.php?ref_type=heads#L44 ou alors PHP n’a pas accès à sys_getloadavg cf ▻https://git.spip.net/spip-contrib-outils/securite/-/blob/master/ecran_securite.php?ref_type=heads#L740

Merci pour les pistes @b_b. Depuis, donc, un certain temps, ça génère du 429, au lieu de 503. Je n’avais pas vu. Du coup, je constate que ça vire du monde, déjà. Et je constate, donc, que ça n’exclut pas beaucoup de bot, du fait de la règle qui est très peu excluante. La règle actuelle ne suffit pas. Je vais modifier la règle, en la rendant très excluante, et on va voir si ça va mieux. Merci encore.

@biggrizzly la règle est retreinte à cause du fichier ecran_secrite_config.php qui défini une règle perso, alors que celle de SPIP est bien plus large. On en cause en direct sur IRC ou autre si tu veux.

Depuis que j’ai compris que ça déclenchait des 429 plutôt que des 503, j’ai pu adapter mes scripts (basiques) d’analyse des logs, et je vois désormais qu’il y a bien un effet de la part de ce système.

Comme tu dois pouvoir le voir, j’ai ajouté des filtres très génériques. Apparemment, le load ne monte plus au dessus de 2, pour le moment. A suivre. Et j’espère qu’il n’y a pas de user-agent légitime qui contient « bot »... :-))

this machine kills bots ^^

@biggrizzly on est pas les seules personnes à subir claudebot cf ▻https://mastodon.social/@nixCraft/112344003877391227

Et je commence aussi à observer des rush de ce bot chez infini.

#AI_chatbot

On a de la chance que ces bots s’identifient avec un user agent, et des plages ip. Ils ne sont pas totalement malveillant non plus.

Puisqu’on en parle, des bots pas sympa, en voilà un gratiné. Si on se demande pourquoi pendant 5 minutes SeenThis était difficile d’accès, on peut demander des comptes au user-agent suivant : Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/116.0.0.0 Safari/537.36

Dans les 1000 dernières lignes de log, il communiquait avec SeenThis depuis 4 adresses IP :

Nous avons donc des bots qui tentent de se faire passer pour autre chose qu’un bot.

De notre côté on s’est fait aussi pourrir par un ClaudeBot…
Y en a un (je sais pas si c’est le même) qui change son UserAgent à chaque hit aussi…

Grace à #vscodium, on peut passer plus de temps à apprendre les raccourcis qu’à coder :)

Pour info, il y a des snippets pour #spip : ►https://git.spip.net/spip-contrib-outils/snippets-vscodium

#Emmet #vscode #webdev #spip_recette

Roh ! Je ne connaissais pas « lorem » ou « lorem5 » ... un indipensable :)

You can use Emmet with CSS!
►https://www.youtube.com

c’est en gros ce que fait l’installeur de IntéGraal qui est uniquement en spip-cli :
▻https://git.spip.net/spip-contrib-outils/spip-cli/src/branch/master/src/Command/IntegraalGenerer.php

Sachant qu’en spip-cli, enfin avec le module Console de Sf quoi, une fois qu’on a fait des commandes unitaires pour ci ou ça, on peut aussi faire des commandes qui appelle d’autres commandes.

Moi je fais donc tout en PHP/spip-cli/Console, vu que c’est bien plus simple à coder, propre, beau avec des couleurs, tableaux, barre de défilement, etc, sans avoir à coder en Bash.

Pour spip-cli, par contre, hors commandes de base, ça va chercher que les commandes qui sont dans des plugins activés, d’où le fait que pour l’instant celle pour IntéGraal est dans le socle commun, sinon on peut pas l’utiliser.

Ce qu’on pourrait imaginer c’est que spip-cli cherche aussi au moins les commandes placées dans un dossier « spip-cli » à la racine du dossier où on le lance et/ou à la racine du spip (pas juste les plugins activés).

Pour l’instant, mes besoins sont rudimentaires, donc bash me va bien :)

Ce que ça fait :

– crée la base mySQL pour installer SPIP via spip-cli
– crée les dossiers plugins et auto (désactivable)
– clone ZCM
– édite paquet.xml avec le préfixe du plugin
– renomme les fichiers options/fonctions/zcm-xx.svg avec le préfixe du plugin
– commit le tout dans un repo du nom du préfixe préalablement créé (désactivable)

Et donc les commandes :

– télécharger SPIP spip dl --branche master
– initialiser ZCM Intaller zcminstaller (créer à minima la base de données)
– installer SPIP spip core:installer --db-server "mysql" --db-login "login" --db-pass "motdepasse" --db-database "nomdelabase" --admin-nom "nom" --admin-login "login" --admin-email "mail@domaine.net" --admin-pass "motdepasse"
– ajouter le dépôt des plugins spip plugins:svp:depoter https://plugins.spip.net/depots/principal.xml

La seule chose que je n’arrive pas à faire via SPIP Cli, c’est installer mon plugin car ça ne gère pas les dépendances (téléchargement et installation). Ou alors, je rate une commande ?

I would thank you for your helpful advice i didn’t even know . thanks

@seenthis « Spam, spam, spam » (+ émoji notes de musique)

@jeanmarie je doute sur la teneur en spam du compte @amin je laisse l’équipe décider sur ce point.

@b_b : il a quand même 2 symptômes « types » des comptes de spammeurs :
– son pseudo est identique au nom de son site (net2.com)
– ses billets n’ont référencé que son site

@cy_altern je vous laisse en débattre sur la liste seenthis et me signaler s’il est nécessaire de supprimer le compte.

/me retourne faire des cartons...