❌

Vue normale

Reçu aujourd’hui — 20 octobre 2025 Oros links

Note: Idiotie Automatisée

✇Oros links
20 octobre 2025 à 20:14

J'ai le bot débile d'openai qui appel en boucle le /robots.txt et aucune autre page.

4.227.36.98 - - [20/Oct/2025:18:25:08 +0000] "GET /robots.txt HTTP/2.0" 200 39 "-" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot"
4.227.36.98 - - [20/Oct/2025:18:53:42 +0000] "GET /robots.txt HTTP/2.0" 200 39 "-" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot"
4.227.36.98 - - [20/Oct/2025:19:01:09 +0000] "GET /robots.txt HTTP/2.0" 200 39 "-" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot"
4.227.36.98 - - [20/Oct/2025:19:12:31 +0000] "GET /robots.txt HTTP/2.0" 200 39 "-" "Mozilla/5.0 (Macintosh; Intel Mac OS X 10_15_7) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36; compatible; OAI-SearchBot/1.0; +https://openai.com/searchbot"

Je vois pas l'intérêt, surtout que ce fichier ne change pas -_-
— Permalink

Reçu avant avant-hier Oros links

Note: moteur de recherche Bing

✇Oros links
5 octobre 2025 à 10:15

Pour qu'un site soit indexé sur DuckDuckGo, il faut qu'il soit indexé par Bing.
Et là, c'est l'enfer.
Bing, c'est complètement pété. À l'image de Microsoft et sa folie pour l'IA.
Sur le site de bing, essayez de faire la recherche : "site:wikipedia.org"
Ça marche moins bien d'une démo faite à l’arrache et envoyé en prod -_-
J'ai testé à partir de plusieurs connexion internet, ça renvoi des résultat au pif.

Autre truc relou, pour forcer l'indexation, faut passer par "Webmaster Tools" https://www.bing.com/webmasters/about
L'interface est complètement pété.
T'as des graphes inexploitables où il manque des infos. Et dans certain cas, les chiffres sont faux.
Pour les messages d'erreurs, démerde toi pour comprendre ce qu'ils veulent dire. C'est super vague.
La traduction du site en français est bourré d'erreurs.
T'as des pages qui plantes.

Bref, c'est inexploitable leur truc -_-
— Permalink

Note: Crawler Baidu

✇Oros links
21 septembre 2025 à 08:51

Crawler Baidu
IP : 47.79.[196|218|219].X
Fréquences des visites : Visite par grosse vague, ~700 à 2500 appels par minute
Référer : "https://www.google.com/"
User agent : random

Exemple d'user agent utilisé :
"Mozilla/5.0 (Linux; Android 10; K) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/132.0.0.0 Mobile Safari/537.36"
"Mozilla/5.0 (Linux; Android 10; K) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/133.0.0.0 Mobile Safari/537.36"
"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/131.0.0.0 Safari/537.36 OPR/116.0.0.0"
"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/132.0.0.0 Safari/537.36"
"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/133.0.0.0 Safari/537.36"
"Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/133.0.0.0 Safari/537.36 Edg/133.0.0.0"
"Mozilla/5.0 (Linux; arm_64; Android 14; SM-A346E) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/130.0.6723.1012 YaSearchBrowser/24.125.1 BroPP/1.0 YaSearchApp/24.125.1 webOmni SA/3 Mobile Safari/537.36"
"Mozilla/5.0 (Linux; Android 12; Infinix X6817) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/105.0.0.0 Mobile Safari/537.36"
— Permalink

❌