User-agent: *
Request-rate: 1/5         # загружать не более одной страницы за пять секунд
Visit-time: 1900-0300     # загружать страницы только в данный промежуток по Гринвичу.