doano/weby — pull request #139 by leo-souza (2012-09-13 17:17:07+00:00)
Title: arquivo robots.txt por site

se um site fizer um upload de um arquivo 'robots.txt' ele será servido quando a requisição pelo bot