Robots txt file blocking

I have 55 URLS not being crawled because indexed robots.txt blocking. What is the correct Cloudflare firewall configuration to allow indexing my content?

Le fichier robots.txt se trouve au niveau de la racine de votre site internet . Pour vérifier sa présence sur votre site, vous tapez dans la barre d’adresse de votre navigateur : http://www.adressedevotresite.com/robots.txt.

Pour tester votre fichier robots.txt, il vous suffit de créer et d’authentifier votre site sur Google Search Console.

Créer un fichier robots.txt : Créer un fichier robots.txt | Google Search Central  |  Search Central

Générateur Robots.txt :Générateur Robots.txt

thanks for your help www.example.com/robots.txt. when page opened it was empty.

Give my your domain name.

This topic was automatically closed after 30 days. New replies are no longer allowed.