Over WebChefBot
Word je geïndexeerd door WebChefBot? Goed nieuws. Wij sturen echte, geïnteresseerde bezoekers door naar jouw site: mensen die actief op zoek zijn naar precies dát recept. Geen scraping om elders te herpubliceren, geen kopieën van je afbeeldingen, gewoon een klik die direct op jouw originele pagina belandt.
Voor jou betekent dat: gratis, gerichte traffic vanuit één van Nederland en Vlaanderen's receptenzoekers, met behoud van jouw URL, jouw advertenties en jouw merk. Hoe meer recepten doorzoekbaar zijn op WebChef, hoe vaker jouw pagina als eerste verschijnt voor de zoeker.
Hoe je ons herkent
Onze crawler stuurt een User-Agent-header mee die eindigt met:
(WebChefBot/0.1; +https://www.webchef.nl/bot; WebChef Recipe Crawler)
Liever niet meedoen?
Geen probleem. Voeg dit toe aan je robots.txt en we slaan je site over:
User-agent: WebChefBot Disallow: /
Je kunt ook specifieke paden blokkeren:
User-agent: WebChefBot Disallow: /draft/ Disallow: /admin/
Gebruik je Cloudflare's Content Signals in robots.txt? Dan respecteren we search=no als blokkade voor onze zoekindex.
User-agent: * Content-Signal: search=no
Onze beleidsregels
- We respecteren
robots.txtenCrawl-delay. - We respecteren Cloudflare's
Content-Signal: search=no. - We respecteren
<meta name="robots" content="noindex">enX-Robots-Tag: noindexheaders. - We volgen geen
rel="nofollow"links. - Standaard wachten we minstens 1 seconde tussen verzoeken naar dezelfde host.
- Recepten worden geïndexeerd op titel en tekst. Afbeeldingen worden niet opgeslagen of meegekopieerd. Kliks leiden altijd terug naar jouw originele pagina.
Vragen?
Stuur een mail naar info@webchef.nl.

