Robot.txt file for: archive.org

      
Sitemap: https://archive.org/sitemap/sitemap.xml

##############################################
#
# Welcome to the Archive!
#
##############################################
# Please crawl our files.
# We appreciate if you can crawl responsibly.
# Stay open!
##############################################


User-agent: *
Disallow: /control/
Disallow: /report/