webmagic 关于setSleepTime的疑问

Site对象有方法setSleepTime。

我对这个方法有些疑惑。这个方法是要实现什么样的效果呢？

我臆断作者原意应该是希望达到这样的效果：我爬取一个网站的时候，希望对它友好，不会爬取过于频繁被对方加入黑名单。所以我设置一个时间，让我的蜘蛛每隔n毫秒内才爬取对方一次。

但是，看代码:

protected void processRequest(Request request) {
    Page page = downloader.download(request, this);
    if (page == null) {
        sleep(site.getSleepTime());
        onError(request);
        return;
    }
    // for cycle retry
    if (page.isNeedCycleRetry()) {
        extractAndAddRequests(page, true);
        sleep(site.getSleepTime());
        return;
    }
    pageProcessor.process(page);
    extractAndAddRequests(page, spawnUrl);
    if (!page.getResultItems().isSkip()) {
        for (Pipeline pipeline : pipelines) {
            pipeline.process(page.getResultItems(), this);
        }
    }
    sleep(site.getSleepTime());
}

protected void sleep(int time) {
    try {
        Thread.sleep(time);
    } catch (InterruptedException e) {
        e.printStackTrace();
    }
}

设置sleepTime会导致_当前线程_挂起一段时间。但是其他线程将不受影响。

请问作者是有意这样设计的吗？对于我上述需求，作者有什么指导吗？