我要投稿

将 JSON 数据转储到 Django 模型：使用 Django 设置和命令

资讯主编 Python

2024-08-16 0 136

当您使用 Django 或使用 django rest framework (drf) 的 rest API 完成网站的第一个版本时，数据需求变得最重要。对于类似的问题，我写了上一篇文章，其中讨论了通过直接插入 sqlite 数据库和表将 JSon 数据转储到 django 模型的直接方法。然而，我也提到 django 有 loaddata、dumpdata 和用于类似问题的固定装置，但需要对框架有更多的了解。

今天，我将回顾一下学习曲线，并讨论如何将普通 JSON 数据转换为固定装置，然后使用 loaddata 将 json 数据转储到特定模型中。同样，如果您有一些模型数据（可以通过管理页面等添加），那么如何将其转储为固定装置以与其他模型一起使用或在其他项目中使用。

上一篇文章分为两部分：第一部分是数据转储所需的正常设置，第二部分是关于将 json 数据转储到模型中的 Python 脚本。因此，请保持文章简短，在本文中，我将从第二部分开始，您可以按照上一篇文章的第一部分来阅读本文。因此，假设您有一个图书应用程序，并且其中 models.py 中有 book 模型，类似地，api 端点已准备就绪，例如（上一篇文章的 Github 存储库）：
HTTP://127.0.0.1:8000/api/books/1

或者您只是想将数据加载到基于 django 的网站的 book 模型。您可以关注以下 git 存储库中的代码。
json 数据转储到模型

给定两个存储库，您可以使用任何人来关注这里的文章，您只需要以下内容：

一个正在运行的 django 项目，具有带有或不带有 api 功能的 book 模型
根据 book 模型包含书籍信息的 json 文件。

示例 1：book/models.py 中的书籍模型

from django.db import models

class book(models.model):
    title = models.charfield(max_length=200)
    author = models.charfield(max_length=100)    
    isbn = models.charfield(max_length=13, unique=true)
    pages = models.positiveintegerfield()   
    language = models.charfield(max_length=30)

    def __str__(self):
        return self.title

books.json

[
  {
    "title": "example book 1",
    "author": "john doe",
    "isbn": "1234567890123",
    "pages": 350,
    "language": "english"
  },
  {
    "title": "example book 2",
    "author": "kumar ajit",
    "isbn": "9876543210987",
    "pages": 280,
    "language": "hindi"
  }
]

示例 2：上一篇文章中的 book 模型

from django.db import models

class book(models.model):
    title = models.charfield(max_length=200)
    author = models.charfield(max_length=100)
    price = models.decimalfield(max_digits=6, decimal_places=2)

    def __str__(self):
        return self.title

您可以在这里找到 data.json 文件。

数据转储到模型

我们有一个正在运行的 django 项目，其中包含一个模型book 和一个包含书籍信息的额外 json 文件。那么，现在的问题是什么？
我们希望将 json 数据转储到模型中，以便可以与 django 网站一起使用（例如将数据传递到模板以显示给用户）或通过 api 向前端提供数据。

django 有 loaddata、fixtures 和 dumpdata，以及管理页面（您可以注册模型和插入数据）和 shell（使用 sql 或 ORM 直接操作数据库）。然而，如果想要合并大数据或想要多次执行（通常是开发和测试期间的用例），通过固定装置加载数据似乎更好。

让我们首先解释这些工具，然后深入研究 python 脚本来实现数据转储任务。

加载数据

1	`$django-admin loaddata <fixture label></fixture>`

赛程

fixture 是包含数据库序列化内容的文件集合。每个固定装置都有一个唯一的名称，并且组成固定装置的文件可以分布在多个应用程序中的多个目录中。 [来源]

让我们跳到文章的后续部分，看看书籍装置。

[
  {
    "model": "book.book",
    "pk": 40,
    "fields": {
      "title": "example book 1",
      "author": "john doe",
      "isbn": "123456734890123",
      "pages": 350,
      "language": "english"
    }
  },
  {
    "model": "book.book",
    "pk": 41,
    "fields": {
      "title": "example book 2",
      "author": "kumar ajit",
      "isbn": "9876543455210987",
      "pages": 280,
      "language": "hindi"
    }
  }
]

如果你看过fixture文件，你一定会发现它只是另一个带有更多键值对的json文件，而这些是django模型/表的元数据。所以，是的，你是对的，我们的目标是将 books.json 格式转换为固定格式，以便 django 管理工具能够识别它并将数据转储到合适的表中。

现在，要创建夹具，您可以有两种情况：1）模型中有数据，并且您想要创建夹具以供将来使用或测试等。
2) 你的模型/表中没有数据，但你有外部源中的数据，如 json、csv 或任何其他格式，并且你想通过前面讨论的命令 loaddata 在 django 中加载该数据。（这篇文章是关于这个的但最后，我们将使用 dumpdata 来比较手动和 dumpdata 输出。）

在使用python脚本将普通json文件转换为fixture格式之前，让我们先了解一下django如何查找fixture文件以及如何使用它。

共有三个兴趣点和顺序【来源】：

在每个已安装应用程序的固定目录中：这类似于 django 项目内组织的其他目录（例如模板或媒体或静态文件夹）的建议。但是，您也可以提供如下所述的直接路径。
fixture_dirs 设置中列出的任何目录
在由固定装置命名的文字路径中：适用于较小的项目或应用程序，但最好为固定装置有一个合适的推荐位置，这样可以轻松地用于测试或调试等。

注意：使用夹具的一个主要好处是在夹具上应用和使用压缩。

转储数据

这是 django-admin 命令，用于将表的所有数据输出到标准输出。

注 1：将数据库中与指定应用程序关联的所有数据输出到标准输出。
注2：dumpdata的输出可以用作loaddata的输入。（作为fixture）

1	`django-admin dumpdata [app_label[.modelname]`

您可以从此链接阅读更多内容。

从简单的 json 到 django fixtures 的 python 脚本。

from django.apps import apPS
import django
import os
import json


# set the django settings module
os.environ.setdefault('django_settings_module', 'dataloading.settings')
django.setup()

# get all models
models = apps.get_models()

# get the model names
for model in models:
    print(model)
    print(model.__name__)

# choose model to create fixtures
from book.models import book 

# get all field names
field_names = [field.name for field in book._Meta.get_fields()]
fixture_name = "books.json"

#read the data file json, csv etc.

with open('data.json','r') as fp:
    books= json.load(fp)


books_fixture =[]
# get the pk value from model , if there is data
pk=1 
# iterate all the books in json file
for book in books:
    book_fixture={}
    # add model name (most important for fixture)
    book_fixture['model']= 'book.book'
    pk+=1
    book_fixture['pk']=pk
    # assuming the data has same fields name as model else mapping is required
    book_fixture['fields']=book
    books_fixture.append(book_fixture)
# writing converted json as file for fixture

with open(fixture_name,'w') as fp:
    json.dump(books_fixture,fp)

# print(field_names)
# if __name__ =='__main__' :
    #create_book()  

一旦你的装置被创建为 books.json。是时候将其移动/复制到合适的位置（book/fixtures/book/），以便 django 管理器可以轻松找到它，然后运行 loaddata 命令将所有数据转储到 book 模型。

1 2	`$mv` `books.json book/fixtures/book/` `$python` `manage.py loaddata book/fixtures/book/books.json`

你也可以使用类似的脚本直接向模型的 sing.save() 方法写入数据。下面是 create_book() 方法，可用于将一个或多个（循环）数据记录插入 book 模型。

# def create_book():
#     book = Book(
#         title="This is from scrIPt",
#         author ="ajit",
#         isbn = "2024-0809",
#         pages=300,
#         language ='English'
#     )
#     book.save()
#     print(f'Book {book.title} by {book.author} created.')

登录后复制

收藏 (0) 打赏

感谢您的支持，我会继续努力的!

打开微信/支付宝扫一扫，即可进行扫码打赏哦，分享从这里开始，精彩与您同在

免责声明
1. 本站所有资源来源于用户上传和网络等，如有侵权请邮件联系本站整改team@lcwl.fun！
2. 分享目的仅供大家学习和交流，您必须在下载后24小时内删除！
3. 不得使用于非法商业用途，不得违反国家法律。否则后果自负！
4. 本站提供的源码、模板、插件等等其他资源，都不包含技术服务请大家谅解！
5. 如有链接无法下载、失效或广告，请联系本站工作人员处理！
6. 本站资源售价或VIP只是赞助，收取费用仅维持本站的日常运营所需！
7. 如遇到加密压缩包，请使用WINRAR解压，如遇到无法解压的请联系管理员！
8. 因人力时间成本问题，部分源码未能详细测试（解密），不能分辨部分源码是病毒还是误报，所以没有进行任何修改，大家使用前请进行甄别！
9.本站所有源码资源都是经过本站工作人员人工亲测可搭建的，保证每个源码都可以正常搭建，但不保证源码内功能都完全可用，源码属于可复制的产品，无任何理由退款！

网站搭建学习网 Python 将 JSON 数据转储到 Django 模型：使用 Django 设置和命令 https://www.xuezuoweb.com/13574.html