将 JSON 数据转储到 Django 模型：使用 Django 设置和命令

当您使用 django 或使用 django rest framework (drf) 的 rest api 完成网站的第一个版本时，数据需求变得最重要。对于类似的问题，我写了上一篇文章，其中讨论了通过直接插入 sqlite 数据库和表将 json 数据转储到 django 模型的直接方法。然而，我也提到 django 有 loaddata、dumpdata 和用于类似问题的固定装置，但需要对框架有更多的了解。

今天，我将回顾一下学习曲线，并讨论如何将普通 json 数据转换为固定装置，然后使用 loaddata 将 json 数据转储到特定模型中。同样，如果您有一些模型数据（可以通过管理页面等添加），那么如何将其转储为固定装置以与其他模型一起使用或在其他项目中使用。

上一篇文章分为两部分：第一部分是数据转储所需的正常设置，第二部分是关于将 json 数据转储到模型中的 python 脚本。因此，请保持文章简短，在本文中，我将从第二部分开始，您可以按照上一篇文章的第一部分来阅读本文。因此，假设您有一个图书应用程序，并且其中 models.py 中有 book 模型，类似地，api 端点已准备就绪，例如（上一篇文章的 github 存储库）：
http://127.0.0.1:8000/api/books/1

或者您只是想将数据加载到基于 django 的网站的 book 模型。您可以关注以下 git 存储库中的代码。
json 数据转储到模型

给定两个存储库，您可以使用任何人来关注这里的文章，您只需要以下内容：

一个正在运行的 django 项目，具有带有或不带有 api 功能的 book 模型根据 book 模型包含书籍信息的 json 文件。

示例 1：book/models.py 中的书籍模型

from django.db import modelsclass book(models.model):    title = models.charfield(max_length=200)    author = models.charfield(max_length=100)        isbn = models.charfield(max_length=13, unique=true)    pages = models.positiveintegerfield()       language = models.charfield(max_length=30)    def __str__(self):        return self.title

登录后复制

books.json

[  {    "title": "example book 1",    "author": "john doe",    "isbn": "1234567890123",    "pages": 350,    "language": "english"  },  {    "title": "example book 2",    "author": "kumar ajit",    "isbn": "9876543210987",    "pages": 280,    "language": "hindi"  }]

登录后复制

示例 2：上一篇文章中的 book 模型

from django.db import modelsclass book(models.model):    title = models.charfield(max_length=200)    author = models.charfield(max_length=100)    price = models.decimalfield(max_digits=6, decimal_places=2)    def __str__(self):        return self.title

登录后复制

您可以在这里找到 data.json 文件。

数据转储到模型

我们有一个正在运行的 django 项目，其中包含一个模型book 和一个包含书籍信息的额外 json 文件。那么，现在的问题是什么？
我们希望将 json 数据转储到模型中，以便可以与 django 网站一起使用（例如将数据传递到模板以显示给用户）或通过 api 向前端提供数据。

django 有 loaddata、fixtures 和 dumpdata，以及管理页面（您可以注册模型和插入数据）和 shell（使用 sql 或 orm 直接操作数据库）。然而，如果想要合并大数据或想要多次执行（通常是开发和测试期间的用例），通过固定装置加载数据似乎更好。

让我们首先解释这些工具，然后深入研究 python 脚本来实现数据转储任务。

加载数据

$django-admin loaddata 

登录后复制

赛程

fixture 是包含数据库序列化内容的文件集合。每个固定装置都有一个唯一的名称，并且组成固定装置的文件可以分布在多个应用程序中的多个目录中。 [来源]

让我们跳到文章的后续部分，看看书籍装置。

[  {    "model": "book.book",    "pk": 40,    "fields": {      "title": "example book 1",      "author": "john doe",      "isbn": "123456734890123",      "pages": 350,      "language": "english"    }  },  {    "model": "book.book",    "pk": 41,    "fields": {      "title": "example book 2",      "author": "kumar ajit",      "isbn": "9876543455210987",      "pages": 280,      "language": "hindi"    }  }]

登录后复制

如果你看​​过fixture文件，你一定会发现它只是另一个带有更多键值对的json文件，而这些是django模型/表的元数据。所以，是的，你是对的，我们的目标是将 books.json 格式转换为固定格式，以便 django 管理工具能够识别它并将数据转储到合适的表中。

现在，要创建夹具，您可以有两种情况：1）模型中有数据，并且您想要创建夹具以供将来使用或测试等。
2) 你的模型/表中没有数据，但你有外部源中的数据，如 json、csv 或任何其他格式，并且你想通过前面讨论的命令 loaddata 在 django 中加载该数据。（这篇文章是关于这个的但最后，我们将使用 dumpdata 来比较手动和 dumpdata 输出。）

在使用python脚本将普通json文件转换为fixture格式之前，让我们先了解一下django如何查找fixture文件以及如何使用它。

共有三个兴趣点和顺序【来源】：

在每个已安装应用程序的固定目录中：这类似于 django 项目内组织的其他目录（例如模板或媒体或静态文件夹）的建议。但是，您也可以提供如下所述的直接路径。

fixture_dirs 设置中列出的任何目录

在由固定装置命名的文字路径中：适用于较小的项目或应用程序，但最好为固定装置有一个合适的推荐位置，这样可以轻松地用于测试或调试等。

注意：使用夹具的一个主要好处是在夹具上应用和使用压缩。

转储数据

这是 django-admin 命令，用于将表的所有数据输出到标准输出。

注 1：将数据库中与指定应用程序关联的所有数据输出到标准输出。
注2：dumpdata的输出可以用作loaddata的输入。（作为fixture）

django-admin dumpdata [app_label[.modelname] 

登录后复制

您可以从此链接阅读更多内容。

从简单的 json 到 django fixtures 的 python 脚本。

from django.apps import appsimport djangoimport osimport json# set the django settings moduleos.environ.setdefault('django_settings_module', 'dataloading.settings')django.setup()# get all modelsmodels = apps.get_models()# get the model namesfor model in models:    print(model)    print(model.__name__)# choose model to create fixturesfrom book.models import book # get all field namesfield_names = [field.name for field in book._meta.get_fields()]fixture_name = "books.json"#read the data file json, csv etc.with open('data.json','r') as fp:    books= json.load(fp)books_fixture =[]# get the pk value from model , if there is datapk=1 # iterate all the books in json filefor book in books:    book_fixture={}    # add model name (most important for fixture)    book_fixture['model']= 'book.book'    pk+=1    book_fixture['pk']=pk    # assuming the data has same fields name as model else mapping is required    book_fixture['fields']=book    books_fixture.append(book_fixture)# writing converted json as file for fixturewith open(fixture_name,'w') as fp:    json.dump(books_fixture,fp)# print(field_names)# if __name__ =='__main__' :    #create_book()  

登录后复制

一旦你的装置被创建为 books.json。是时候将其移动/复制到合适的位置（book/fixtures/book/），以便 django 管理器可以轻松找到它，然后运行 ​​loaddata 命令将所有数据转储到 book 模型。

$mv books.json book/fixtures/book/$python manage.py loaddata book/fixtures/book/books.json

登录后复制

你也可以使用类似的脚本直接向模型的 sing.save() 方法写入数据。下面是 create_book() 方法，可用于将一个或多个（循环）数据记录插入 book 模型。

# def create_book():#     book = Book(#         title="This is from script",#         author ="ajit",#         isbn = "2024-0809",#         pages=300,#         language ='English'#     )#     book.save()#     print(f'Book {book.title} by {book.author} created.')

登录后复制

您还可以查看 django 扩展中的 dumpscript 来完成类似的任务。

希望对您有帮助。

注意：由于时间限制，文章没有正确校对和格式。因此，请谨慎使用，如有任何错误、疑问或疑问，请在下面留下评论。我会加班回复和编辑文章

以上就是将 JSON 数据转储到 Django 模型：使用 Django 设置和命令的详细内容，更多请关注【创想鸟】其它相关文章！