Django dumpdata UTF-8 (Юникод)

django-admin.py dumpdata yourapp может сбрасывать для этой цели.

Или, если вы используете MySQL, вы можете использовать команду mysqldump сбросить всю базу данных.

И в этом потоке есть много способов сбросить данные, включая ручные.

ОБНОВЛЕНИЕ: поскольку OP редактировал вопрос.

Чтобы преобразовать строку кодировки JSON в удобочитаемую строку, вы можете использовать это:

open("mydata-new.json","wb").write(open("mydata.json").read().decode("unicode_escape").encode("utf8"))

После борьбы с подобными проблемами я только что обнаружил, что форматтер xml правильно обрабатывает UTF8.

manage.py dumpdata --format=xml > output.xml

Мне пришлось перенести данные из Django 0.96 в Django 1.3. После многочисленных попыток с данными дампа / загрузки мне наконец удалось использовать xml. Побочных эффектов пока нет.

Надеюсь, это кому-то поможет, так как я попал в эту ветку, когда искал решение ..

Вам нужно либо найти вызов json.dump*() в коде Django и передать дополнительную опцию ensure_ascii=False, а затем закодировать результат, либо вам нужно использовать json.load*() для загрузки JSON, а затем выгрузить его с этой опцией.

Здесь я написал для этого фрагмент кода. Работает на меня!

Вы можете создать свой собственный сериализатор, который передает ensure_ascii=False аргумент функции json.dumps:

# serfializers/json_no_uescape.py
from django.core.serializers.json import *


class Serializer(Serializer):

    def _init_options(self):
        super(Serializer, self)._init_options()
        self.json_kwargs['ensure_ascii'] = False

Затем зарегистрируйте новый сериализатор (например, в вашем __init__.py файле приложения):

from django.core.serializers import register_serializer

register_serializer('json-no-uescape', 'serializers.json_no_uescape')

Тогда вы можете запустить:

manage.py dumpdata --format=json-no-uescape > output.json

Поскольку ВЫ предоставили хороший принятый ответ следует учитывать, что python 3 различает текстовые и двоичные данные, поэтому оба файла необходимо открывать в двоичном режиме:

open("mydata-new.json","wb").write(open("mydata.json", "rb").read().decode("unicode_escape").encode("utf8"))

В противном случае возникнет ошибка AttributeError: 'str' object has no attribute 'decode'.

Обычно я добавляю в свой Makefile следующие строки:

.PONY: dump

# make APP=core MODEL=Schema dump
dump:
    @python manage.py dumpdata --indent=2 --natural-foreign --natural-primary ${APP}.${MODEL} | \
    python -c "import sys; sys.stdout.write(sys.stdin.read().encode().decode('unicode_escape'))" \
    > ${APP}/fixtures/${MODEL}.json

Это нормально для стандартной структуры проекта django, исправьте, если структура вашего проекта отличается.

Эта проблема была исправлена ​​как для JSON, так и для YAML в Django 3.1.

Я столкнулся с той же проблемой. Прочитав все ответы, я придумал сочетание Али и darthwade:

manage.py dumpdata app.category --indent=2 > categories.json
manage.py shell

import codecs
src = "/categories.json"
dst = "/categories-new.json"
source = codecs.open(src, "rb").read().decode('unicode-escape')
codecs.open(dst, "wb","utf-8").write(source)

В Python 3 мне пришлось открыть файл в двоичном режиме и декодировать как unicode-escape. Также я добавил utf-8 при открытии в режиме записи (двоичный).

Я надеюсь, что это помогает :)

Вот решение от djangoproject.com. Вы переходите в «Настройки», там есть пункт «Использовать Unicode UTF-8 для всемирной языковой поддержки», поле «Язык» - «Настройки административного языка» - «Изменить языковой стандарт системы» - «Настройки региона». Если мы применим это и перезагрузимся, то мы получим разумную, современную кодировку по умолчанию от Python. djangoproject.com