User-agent: *

# oldalak tiltasa
Disallow: /doksi/*
Disallow: /kapcsolat*
Disallow: /bejelentkezes*
Disallow: /gephaz*
Disallow: /comment*

# osszes kerdojeles parameter tiltasa
Disallow: /*?*

Sitemap: https://megabyte.hu/sitemap.xml

#User-agent: GPTBot
#Disallow: /

User-agent: ia_archiver
Disallow: /

User-agent: archive.org_bot
Disallow: /

User-agent: ia_archiver-web.archive.org
Disallow: /

User-agent: SemrushBot
Disallow: /