La directive allow garantit que certains fichiers ou pages exclus dans le fichier robots.txt au moyen d’une directive disallow sont accessibles. Vous utilisez toujours la directive allow en combinaison avec la directive disallow.
La directive allow n’est prise en charge que par Google et Bing.
Agent utilisateur: * Disallow: / INTERSHOP / Allow: / INTERSHOP / static / WFS / Jumbo-Grocery-Site / – / – / fr_FR / bundles / js / Allow: / INTERSHOP / static / WFS / Jumbo-Grocery-Site / – / – / nl_FR / images / Allow: / INTERSHOP / static / WFS / Jumbo-Grocery-Site / – / – / fr_FR / bundles / css / Allow: / INTERSHOP / static / WFS / Jumbo-Grocery-Site / – / Jumbo -Épicerie / fr_FR / CMS / Images / Disallow: / search Disallow: / api /
La directive disallow indique que pour les moteurs de recherche, les pages contenant / intershop / ne sont pas accessibles. Cependant, la directive allow garantit que le javascript, le css et les images du site Web sont accessibles.