Django import_export декодировать ASCII код при отправке? - PullRequest
0 голосов
/ 03 октября 2019

Я пытаюсь загрузить и импортировать данные в модели из файла csv, который содержит специальные символы ASCII, например "Big Fish Äö√Ñ√ ¥ s", django import_export выдаст мне ошибку, которая гласит:

Импортированный файл имеет неправильную кодировку: кодек «utf-8» не может декодировать байт 0x80 в позиции 511: недопустимый начальный байт.

Эта ошибка будет отображаться, когда я выберу файл и нажму "Отправить".

Функция, которую я пытаюсь реализовать, будет использовать CSV-файл, содержащий тысячи строк данных, мне было интересно, есть ли способ, которым я могу пройти через каждый уровень строки и очистить данные построчно.

Я пытался внедрить метод before_import_row, но, похоже, он не вызывается.

my admin.py: '' 'ptyhon

from django.contrib import admin

from import_export.admin import ExportActionModelAdmin, enter code hereImportExportMixin, ImportMixin
from import_export.resources import ModelResource

from .forms import CustomConfirmImportForm, CustomImportForm
from .models import Author, Book, Category, Child, EBook


class ChildAdmin(ImportMixin, admin.ModelAdmin):
    pass


class BookResource(ModelResource):

    class Meta:
        model = Book

    def for_delete(self, row, instance):
        return self.fields['name'].clean(row) == ''


class BookAdmin(ImportExportMixin, admin.ModelAdmin):
    list_filter = ['categories', 'author']
    resource_class = BookResource


class CategoryAdmin(ExportActionModelAdmin):
    pass


class AuthorAdmin(ImportMixin, admin.ModelAdmin):
    pass

admin.site.register(Book, BookAdmin)
admin.site.register(Category, CategoryAdmin)
admin.site.register(Author, AuthorAdmin)

' ''

my models.py

'' 'python

[![import random
import string

from django.core.exceptions import ValidationError
from django.db import models


class Author(models.Model):
    name = models.CharField(max_length=100)
    birthday = models.DateTimeField(auto_now_add=True)

    def __str__(self):
        return self.name

    def full_clean(self, exclude=None, validate_unique=True):
        super().full_clean(exclude, validate_unique)
        if exclude is None:
            exclude = \[\]
        else:
            exclude = list(exclude)
        if 'name' not in exclude and self.name == '123':
            raise ValidationError({'name': "'123' is not a valid value"})


class Category(models.Model):
    name = models.CharField(
        max_length=100,
        unique=True,
    )

    def __str__(self):
        return self.name


class Book(models.Model):
    name = models.CharField('Book name', max_length=100)
    author = models.ForeignKey(Author, blank=True, null=True, on_delete=models.CASCADE)
    author_email = models.EmailField('Author email', max_length=75, blank=True)
    imported = models.BooleanField(default=False)
    published = models.DateField('Published', blank=True, null=True)
    published_time = models.TimeField('Time published', blank=True, null=True)
    price = models.DecimalField(max_digits=10, decimal_places=2, null=True, blank=True)

    categories = models.ManyToManyField(Category, blank=True)

    def __str__(self):
        return self.name


class Parent(models.Model):
    name = models.CharField(max_length=100)

    def __str__(self):
        return self.name


class Child(models.Model):
    parent = models.ForeignKey(Parent, on_delete=models.CASCADE)
    name = models.CharField(max_length=100)

    def __str__(self):
        return '%s - child of %s' % (self.name, self.parent.name)


class Profile(models.Model):
    user = models.OneToOneField('auth.User', on_delete=models.CASCADE)
    is_private = models.BooleanField(default=True)


class Entry(models.Model):
    user = models.ForeignKey('auth.User', on_delete=models.CASCADE)


class Role(models.Model):
    user = models.OneToOneField('auth.User', on_delete=models.CASCADE, null=True)


class Person(models.Model):
    role = models.ForeignKey(Role, on_delete=models.CASCADE)


class WithDefault(models.Model):
    name = models.CharField('Default', max_length=75, blank=True,
                            default='foo_bar')


def random_name():
    chars = string.ascii_lowercase
    return ''.join(random.SystemRandom().choice(chars) for _ in range(100))


class WithDynamicDefault(models.Model):

    name = models.CharField('Dyn Default', max_length=100,
            default=random_name)


class WithFloatField(models.Model):
    f = models.FloatField(blank=True, null=True)


class EBook(Book):
    """Book proxy model to have a separate admin url access and name"""
    class Meta:
        proxy = True][1]][1]

'' 'Вот CSV-файл, который, как вы можете видеть, содержит странные символы.

enter image description here

enter image description here

и вот, когда я нажимаю «Отправить», возникает ошибка:

enter image description here

в конечном счете, мне интересно, есть лиспособ, которым я могу очистить данные в каждой строке, когда я нажимаю кнопку отправки. Кажется, что import_export изнутри выдаст сообщение об ошибке, как только увидит, что файлы содержат странные символы и даже не попали в мой код. Спасибо.

1 Ответ

0 голосов
/ 09 октября 2019

видим, что формат xlxs не решает эту проблему.

...