Действительно magic

На продакшн-сервере обнаружилась проблема, возникала ошибка загрузки SVG файла. В ошибке явно выводился mime-type файла как text/plain, хотя сам файл загружался корректный.

При этом что на локалке, и на тестовом сайте mime-type определялся строго как SVG - image/svg. Для определения типа файла использовалась пакет python-magic, которая в свою очередь является оберткой для системной библиотеки libmagic. Версия пакета одинаковая на всех серверах. Но на локалке OSX, на тестовом Ubuntu 18.04.5 LTS, а на боевом Ubuntu 16.04.5 LTS. Так может разные версии пакетов еще повлияли?

Нахожу в коде информацию, что используется для линукса библиотека libmagic.so.1, проверяю её зависимости на тестовом и продакшне командой ldd /usr/lib/x86_64-linux-gnu/libmagic.so.1 и не нахожу расхождений. В обоих случаях используются libz.so.1 и libc.so.6

По мажорным версиям все ок, значит ошибка в минорной версии. Сначала выясняю на тестовом dpkg -S /usr/lib/x86_64-linux-gnu/libmagic.so.1 - библиотека относится к пакету libmagic1:amd64. А точная версия пакета apt show libmagic1:amd64 | grep Ver - 1:5.32-2ubuntu0.4

В продакшне эта версия - 1:5.25-2ubuntu1.3. Отсюда делаем вывод, что как минимум до этой версии включительно нельзя доверять пакету libmagic на определение типа файла SVG.

Напоследок, выкладываю код с правкой по валидации с учетом возможного неверного определения MIME-типа:

from xml.dom import minidom import magic from django import forms def is_now_uploading_file(file): return '/' not in str(file) def validate_image_svg(file): if not is_now_uploading_file(file): # NOTE: проверка на то, что файл действительно загружался. # исключает валидацию, когда меняются другие поля, а поле с SVG остается прежним return valid_mime_types = ['image/svg+xml', 'image/svg'] head_file = file.read(1024) file_mime_type = magic.from_buffer(head_file, mime=True) error = file_mime_type not in valid_mime_types if error and file_mime_type == 'text/plain': # NOTE: libmagic на продакшн-сервере отдает text/plain вместо image/svg для SVG-файлов file.seek(0) full_content = file.read() if isinstance(full_content, bytes): full_content = full_content.decode() try: doc = minidom.parseString(full_content) except Exception: logger.exception('Ошибка парсинга предполагаемого SVG') else: error = len(doc.getElementsByTagName('svg')) != 1 if error: raise ValidationError( f'Неподдерживаемый тип файла ({file_mime_type}). ' 'Принимается только изображение формата SVG.')