robots.txt

Hallo

Ik krijg steeds de melding als ik een mobielvriendelijke test wil uitvoeren :
Pagina kan niet worden bereikt
Dit kan zijn omdat de pagina niet beschikbaar is of wordt geblokkeerd door robots.txt.

Tevens geeft PageSpeed Insights een time out.
Heb zelfs een backup laten maken van 3 dagen geleden terwijl hij het gisteren nog deed.

Enig idee waar ik het in moet zoeken ?

Hallo,

Een schot voor de boeg:
Zou het kunnen zijn dat je problemen hebt met de extensie JCH-Optimize?
Ik zie dit in je robots.txt.

Allow: /plugins/system/jch_optimize/assets2/
Allow: /plugins/system/jch_optimize/assets/

Je kunt een nieuw Joomla!-installatiepakket downloaden.
Dat even lokaal uitpakken en vervolgens het bestand robots.txt met een FTP-programma op je website vervangen.
Zo weet je zeker dat je een goed werkend en schoon bestand gebruikt.

Edit WoodyF4u: Ik Zag net de opmerking van Jelle. Lijkt mij inderdaad goed daar ook even naar te kijken.

Hoi Dragmen,

Als je gebruik maakt van google webmaster tools kan je even kijken bij Crawlen / Fetchen.
Zie onderstaande link voor uitleg hierover:
support.google.com/webmasters/answer/606...5318-1759304752&rd=1

Mvg,

Webzebra.nl

Bedankt voor de reacties

Heb geen jch optimize.

Heb net een verse htacces.txt erop gezet maar geen resultaat.

Ik ging er van uit dat het over deze site ging die je in het profiel hebt aangegeven.
www.travel-and-sleep.com/
Geef een link naar de juiste site dan kunnen de leden misschien iets meer ontdekken.
Anders blijven we maar raden.

www.travel-and-sleep.com is idd mijn site

Als je jch optimize niet gebruikt waarom staat het dan in je robots.txt?
www.travel-and-sleep.com/robots.txt

# If the Joomla site is installed within a folder such as at
# e.g. www.example.com/joomla/ the robots.txt file MUST be
# moved to the site root at e.g. www.example.com/robots.txt
# AND the joomla folder name MUST be prefixed to the disallowed
# path, e.g. the Disallow rule for the /administrator/ folder
# MUST be changed to read Disallow: /joomla/administrator/
#
# For more information about the robots.txt standard, see:
# www.robotstxt.org/orig.html
#
# For syntax checking, see:
# tool.motoricerca.info/robots-checker.phtml

User-agent: *
Disallow: /administrator/
Disallow: /bin/
Disallow: /cache/
Disallow: /cli/
Disallow: /components/
Disallow: /includes/
Disallow: /installation/
Disallow: /language/
Disallow: /layouts/
Disallow: /libraries/
Disallow: /logs/
Disallow: /modules/
Disallow: /plugins/
Disallow: /tmp/
# Disallow: /images/

Allow: /plugins/system/jch_optimize/assets2/
Allow: /plugins/system/jch_optimize/assets/

Geen idee.

2 dagen geleden werkte het allemaal prima

Heel vreemd.

Even goed lezen in de eerdere reacties: je moet een schone robots.txt overzetten met ftp en niet een htaccess.txt!

Verse robots.txt geplaatst, geen resultaat.

Denk eerder dat er echt iets mis is met je site of je server. Ook pingdomtools geeft geen resultaat. Wel vreemd dat de site normaal te zien is en dat sucuri ook niets aangeeft. Je werkt wel met een verouderde template, maar theoretisch zou dat eigenlijk geen probleem moeten zijn.