笨鸟编程-零基础入门Pyhton教程 › 首页 ›Scrapy中文手册 › 查看内容

下载和处理文件和图像

文件命名¶

默认文件命名¶

默认情况下，文件使用 SHA-1 hash 文件名的URL。

例如，以下图像URL:：

http://www.example.com/image.jpg

谁的 SHA-1 hash 是：：

3afec3b4765f8f0a07b78f98c07b83f013567a0a

将使用您选择的内容下载并存储 storage method 和以下文件名：

3afec3b4765f8f0a07b78f98c07b83f013567a0a.jpg

自定义文件命名¶

您可能希望对保存的文件使用不同的计算文件名。例如，通过在文件名中包含元来对图像进行分类。

通过重写 file_path 您的媒体管道的方法。

例如，具有图像URL：：的图像管道

http://www.example.com/product/images/large/front/0000000004166

可以处理为具有压缩哈希的文件名和透视 front ：：

00b08510e4_front.jpg

通过重写 file_path 如下所示：

import hashlib
from os.path import splitext

def file_path(self, request, response=None, info=None, *, item=None):
    image_url_hash = hashlib.shake_256(request.url.encode()).hexdigest(5)
    image_perspective = request.url.split('/')[-2]
    image_filename = f'{image_url_hash}_{image_perspective}.jpg'

    return image_filename