为什么在下载很多文件时 NSURLSession 比 cURL 慢?

Why is NSURLSession slower than cURL when downloading many files?

我一直在使用 cURL 在我的 iOS 应用程序中下载大约 1700 多个文件——总计约 290MB。使用 cURL 下载所有这些文件需要大约 5-7 分钟的互联网连接时间。但由于不是每个人都有快速的互联网连接(尤其是在旅途中),我决定允许在后台下载文件,这样用户就可以在等待下载完成的同时做其他事情。这就是 NSURLSession 的用武之地。

使用 NSURLSession,我的 Internet 连接需要大约 20 多分钟才能下载所有这些文件 当应用程序处于前台时 。当应用程序在后台运行时,我不介意它变慢,因为我知道这取决于 OS 来安排下载。但是即使在前台也很慢,这是一个问题。这是预期的行为吗?是文件数量的问题吗?

如果我没有正确使用 NSURLSession,这里是我如何使用它的片段:

// Initialization

NSURLSessionConfiguration *sessionConfiguration = [NSURLSessionConfiguration backgroundSessionConfigurationWithIdentifier:@"<my-identifier>"];
sessionConfiguration.HTTPMaximumConnectionsPerHost = 40;

backgroundSession = [NSURLSession sessionWithConfiguration:sessionConfiguration
                                                  delegate:self
                                             delegateQueue:nil];

// ...

// Creating the tasks and starting the download
for (int i = 0; i < 20 && queuedRequests.count > 0; i++) {
    NSDictionary *requestInfo = [queuedRequests lastObject];
    NSURLSessionDownloadTask *downloadTask = [backgroundSession downloadTaskWithURL:[NSURL URLWithString:requestInfo[@"url"]]];
    ongoingRequests[@(downloadTask.taskIdentifier)] = requestInfo;
    [downloadTask resume];
    [queuedRequests removeLastObject];
    NSLog(@"Begin download file %d/%d: %@", allRequests.count - queuedRequests.count, allRequests.count, requestInfo[@"url"]);
}

// ...

// Somewhere in (void)URLSession:(NSURLSession *)session downloadTask:(NSURLSessionDownloadTask *)downloadTask didFinishDownloadingToURL:(NSURL *)location

// After each download task is completed, grab a file to download from
// queuedRequests, and create another task

if (queuedRequests.count > 0) {
    requestInfo = [queuedRequests lastObject];
    NSURLSessionDownloadTask *newDownloadTask = [backgroundSession downloadTaskWithURL:[NSURL URLWithString:requestInfo[@"url"]]];
    ongoingRequests[@(newDownloadTask.taskIdentifier)] = requestInfo;

    [newDownloadTask resume];
    [queuedRequests removeLastObject];
    NSLog(@"Begin download file %d/%d: %@", allRequests.count - queuedRequests.count, allRequests.count, requestInfo[@"url"]);
}

我也尝试过使用多个 NSURLSession,但它仍然很慢。我尝试这样做的原因是因为在使用 cURL 时,我创建了多个线程(大约 20 个),每个线程将一次下载一个文件。

我也不可能通过压缩来减少文件数量,因为我需要应用程序能够下载单个文件,因为我会不时更新它们。基本上,当应用程序启动时,它会检查是否有任何已更新的文件,并且只下载那些文件。由于文件存储在 S3 中,而 S3 没有压缩服务,我无法即时将它们压缩成一个文件。

正如 Filip 和 Rob 在评论中提到的,缓慢是因为当 NSURLSession 被初始化为 backgroundSessionConfigurationWithIdentifier: 时,下载任务将在后台执行,无论应用程序是否在前景。所以我通过 2 个 NSURLSession 实例解决了这个问题:一个用于前台下载,一个用于后台下载:

NSURLSessionConfiguration *foregroundSessionConfig = [NSURLSessionConfiguration defaultSessionConfiguration];
foregroundSessionConfig.HTTPMaximumConnectionsPerHost = 40;

foregroundSession = [NSURLSession sessionWithConfiguration:foregroundSessionConfig
                                                  delegate:self
                                             delegateQueue:nil];
[foregroundSession retain];

NSURLSessionConfiguration *backgroundSessionConfig = [NSURLSessionConfiguration backgroundSessionConfigurationWithIdentifier:@"com.terato.darknessfallen.BackgroundDownload"];
backgroundSessionConfig.HTTPMaximumConnectionsPerHost = 40;

backgroundSession = [NSURLSession sessionWithConfiguration:backgroundSessionConfig
                                                  delegate:self
                                             delegateQueue:nil];
[backgroundSession retain];

当应用程序切换到后台时,我只是在每个仍为 运行 的下载任务上调用 cancelByProducingResumeData:,然后将其传递给 downloadTaskWithResumeData::

- (void)switchToBackground
{
    if (state == kDownloadManagerStateForeground) {
        [foregroundSession getTasksWithCompletionHandler:^(NSArray *dataTasks, NSArray *uploadTasks, NSArray *downloadTasks) {
            for (NSURLSessionDownloadTask *downloadTask in downloadTasks) {
                [downloadTask cancelByProducingResumeData:^(NSData *resumeData) {
                    NSURLSessionDownloadTask *downloadTask = [backgroundSession downloadTaskWithResumeData:resumeData];
                    [downloadTask resume];
                }];
            }
        }];

        state = kDownloadManagerStateBackground;
    }
}

同样,当应用程序切换到前台时,我也这样做,但将 foregroundSession 切换为 backgroundSession:

- (void)switchToForeground
{
    if (state == kDownloadManagerStateBackground) {
        [backgroundSession getTasksWithCompletionHandler:^(NSArray *dataTasks, NSArray *uploadTasks, NSArray *downloadTasks) {
            for (NSURLSessionDownloadTask *downloadTask in downloadTasks) {
                [downloadTask cancelByProducingResumeData:^(NSData *resumeData) {
                    NSURLSessionDownloadTask *downloadTask = [foregroundSession downloadTaskWithResumeData:resumeData];
                    [downloadTask resume];
                }];
            }
        }];

        state = kDownloadManagerStateForeground;
    }
}

此外,当应用程序切换到后台时,不要忘记在调用 switchToBackground 之前调用 beginBackgroundTaskWithExpirationHandler:。这是为了确保允许该方法在后台完成。否则,只会在应用程序再次进入前台时调用。