对开发人员来说，Django的ORM 确实非常实用，但是将数据库的访问抽象出来本身是有成本的，那些愿意在数据库中探索的开发人员，经常会发现修改 ORM 的默认行为可以带来性能的提升。...在大多数 Django 应用程序中，大部分时间都花在等待数据库查询上了。所以，在 SQL 查询上设置超时是一个很好的开始。...因为这样它只会影响工作进程，不会影响进程外的分析查询，cron 任务等。 希望您使用的是持久的数据库连接，这样每次请求都不会再有连接开销。...事务操作通常会涉及用户和产品的一些属性，所以我们经常使用 select_related 来强制 join 并保存一些查询。 更新交易还会涉及获得一个锁来确保它不被别人获得。 现在，你看到问题了吗？...当 select_for_update 与 select_related 一起使用时，Django 将尝试获取查询中所有表的锁。 我们用来获取事务的代码尝试获取事务表、用户、产品、类别表的锁。
通过使用 ORM，我们只需要操作 Author 和 Blog 对象，而不用操作相关的数据库表。这里主要介绍一下 Django ORM 的相关使用。...默认的 Manager 对象名称为 objects，下面是使用 Manager 进行增删改查的一个示例： def save_blog(): # 使用 get 检索数据时，如果数据不存在，会报...关联查询就是在查询当前实例的同时，把其关联的实例数据也一块取出来。在下图中 orm_blog 通过一个外键和 orm_author 关联。...和 select_related 类似，prefetch_related 在查询时会同时取出关联实例的值。...与 select_related 不同的是 prefetch_related 不使用 JOIN 方式来查询数据库，而是分别查每个表，最后使用 Python 来实现 JOIN 操作。
数据库 (缺少索引/数据模型) 数据存储接口 (ORM/低效的查询) 展现/数据使用 (Views/报表等) Web应用的大部分问题都会跟 数据库 扯上关系。...关联查询问题 Django ORM的API使得我们使用关系型数据库的时候就像使用面向对象的 Python 语言那样自然。...SQL一会为每行返回重复的信息。 如果你进行一个查询，其中select_related 查询的所有值都是相同的，你就需要使用别的东西。...Django ORM中的关联查询非常好用，我们自然希望使用这种方式。在一个循环中，如果不使用 select_related 或者 prefetch_related，可能会导致几百个查询。...我们已经知道了这个问题，那么怎样拓展Django能让我们更明确的知道资源的消耗呢。很多数据库的封装已经通过不同的方式解决了这个问题。
翻译整理自: simpleisbetterthancomplex.com 本文介绍一个非常简单的技巧， 能够帮助你在使用 Django ORM 时优化数据库查询....需要注意的是， Django QuerySets 是惰性查询的， 如果使用得当非常适用。...ORM将对unpaid_invoices数据集每一条记录执行一次额外的查询....当然， 可以使用select_related方法， 来减轻这种不期望的影响，以便在单次数据查询中，检索所有必要的信息。...('vendor').filter(status='UNPAID') 这样， Django ORM 将会在同一查询中为每个发票检索供应商数据.因此这种情况不需要额外的查询，这样可以为您的应用程序出色的性能提升
若要按照另外一个模型中的字段排序，可以使用查询关联模型的语法。即通过字段的名称后面跟两个下划线（__），再加上新模型中的字段的名称，直到希望连接的模型。...' values()和values_list()都用于特定情况下的优化：检索数据子集，而无需创建模型实例。...这会生成一个复杂的查询并引起性能的损耗，但是在以后使用外键关系时将不需要再次数据库查询。 下面的例子解释了普通查询和select_related()查询的区别。...还可以使用正常连接语法来执行相关字段的相关字段。...当最初获取数据时不知道是否需要这些特定字段的情况下，如果正在使用查询集的结果，可以告诉Django不要从数据库中检索它们。
缓存键（Cache Key） ：每个缓存对象都有一个唯一的缓存键，开发者可以通过缓存键来存储和检索缓存数据。...获取缓存数据：cache.get(key)方法用于从缓存中检索数据，根据缓存键获取对应的值。 删除缓存数据：cache.delete(key)方法用于删除指定缓存键对应的数据。...AD：漫画首页 数据库查询优化是提高Web应用性能的关键环节。在Django中，通过优化QuerySet和ORM查询，可以显著提升数据库操作的效率。 1....QuerySet缓存 Django的QuerySet具有缓存机制，这意味着在首次执行QuerySet时，Django会将结果缓存起来，以便在后续的相同查询中直接使用缓存结果，而不是再次执行数据库查询。...ORM查询优化策略 使用select_related和prefetch_related：这两个方法可以减少数据库查询次数。
在开发基于Django的Web应用程序时，数据库是至关重要的组成部分之一。Django的ORM（对象关系映射）为开发者提供了便利，使得与数据库的交互变得简单且直观。...使用索引 索引是提高数据库查询效率的关键。在Django中，可以通过在模型的字段上添加db_index=True来为字段创建索引。...使用Raw SQL 在某些情况下，使用原生的SQL语句可能比ORM更高效。Django允许执行原生SQL查询，这在需要进行复杂的数据操作时非常有用。...监控和调优 持续监控数据库的性能并进行调优是保证应用程序高效运行的重要手段。可以使用一些监控工具来实时监测数据库的负载、查询性能等指标，并根据监控数据进行调整和优化。...通过不断地优化数据库和ORM性能，可以使Django应用程序在面对日益复杂的业务需求和高并发访问时依然保持高效稳定的运行状态，为用户提供更好的服务体验。
网站：http://python.usyiyi.cn/django/index.html 数据库访问优化 Django的数据库层提供了很多方法来帮助开发者充分的利用他们的数据库。...注意，设计最好的索引方案是一个复杂的、数据库相关的话题，它取决于你应用的细节。持有索引的副作用可能会超过查询速度上的任何收益。 合理使用字段类型。 我们假设你已经完成了上面这些显而易见的事情。...用唯一的被或索引的列来检索独立对象 有两个原因在get()中，用带有unique或者db_index的列检索独立对象。首先，由于查询经过了数据库的索引，所以会更快。...使用QuerySet.update()和delete() 通过QuerySet.update()使用批量的SQL UPDATE语句，而不是获取大量对象，设置一些值再单独保存。...如果一个模型具有默认的顺序（Meta.ordering），并且你并不需要它，通过在查询集上无参调用order_by() 来移除它。 向你的数据库添加索引可能有助于提升排序性能。
在 Django 中我们通常会使用 selected_related 或prefetch_related 来预取关联对象，来减少和 DB 之间的交互，但是在使用上也需要有一些注意的地方。...Django 默认的查询方式都是粗放的，例如普通查询不使用 values 或者 only 时都是 select * ，而预取也不例外，看看下面这个例子。...此时在后续的循环处理中，我们需要通过 Foo 对象查询到 Baz 的数据，为了避免 N + 1 我们也会多级预取: Foo.objects.filter().select_related("bars")...所以也会有一些完全不使用 ORM 的观点。...在我看来，ORM 能让 90% 的查询都变得结构化更清晰、更易维护、甚至更安全，但剩下的 10% 也许会耗费更多的精力，所以何时使用 ORM 是根据具体项目场景来定的，不能因噎废食。
一 ORM简介 MVC或者MVC框架中包括一个重要的部分，就是ORM，它实现了数据模型与数据库的解耦，即数据模型的设计不需要依赖于特定的数据库，通过简单的配置就可以轻松更换数据库，这极大的减轻了开发人员的工作量...='nick' where id = 1 方法二适合更新一条数据，也只能更新一条数据，当只有一条数据更新时推荐使用此方法，另外此方法还有一个好处，我们接着往下看 具有auto_now属性字段的更新...因为执行数据库同步语句的时候，django会找这里面所有的应用，找到他们的models来创建表 'django.contrib.auth', 'django.contrib.contenttypes...) order_by(*field): queryset类型的数据来调用，对查询结果排序,默认是按照id来升序排列的，返回值还是queryset类型...2. select_related使用SQL的JOIN语句进行优化，通过减少SQL查询的次数来进行优化、提高性能。
orm相关的数据库查询优化 惰性查询 惰性查询指当我们只查数据库而不是用这些数据时，Django不会执行查询数据库的代码，目的是减少不必要的数据库操作，降低数据库的压力。...这样做的好处：跨表查询也不需要重复走数据库，减轻数据库压力。select_related()括号内放多个外键字段，逗号隔开，会将多个外键字段关联的表与当前表拼成一张大表。...AJAX的应用场景 搜索引擎根据用户输入的关键字，自动提示检索关键字，网站注册时候的实时用户名的查重，特点： 不刷新页面的前后端数据交互 异步操作，当请求发出后，浏览器还可以进行其他操作 AJAX前的知识储备...，更易理解 * JSON 使用 JavaScript 语法来描述数据对象，但是 JSON 仍然独立于语言和平台。...Django内置的serializers模块 前端想拿到通过orm查到的一个个对象，(数据库里的一条条记录)，后端想把直接实例化出来的对象发送给前端，这时候就需要用到Django给我们提供的序列法方式(
“N+1查询”），原本获取老师的数据只需要一条SQL，但是由于老师关联了学科，当我们查询到N条老师的数据时，Django的ORM框架又向数据库发出了N条SQL去查询老师所属学科的信息。...在一条SQL中可以基于连接查询完成老师和学科的查询。...在使用Django的ORM框架时可以基于如下方法： 对于多对一关联（如投票应用中的老师和学科），我们可以使用QuerySet的用select_related()方法来加载关联对象； 而对于多对多关联...可以用QuerySet的only()方法来指定需要查询的属性，也可以用QuerySet的defer()方法来指定暂时不需要查询的属性，这样生成的SQL会通过投影操作来指定需要查询的列，从而改善查询性能，...('good_count'), bad=Avg('bad_count')) 可见，Django的ORM框架允许我们用面向对象的方式完成关系数据库中的分组和聚合查询。
这篇我们来解释什么是N+1的问题，在所有的ORM中，这都会是一个问题，新手很容易踩到坑。进而导致系统变慢，然后拖垮整个系统。...接下来我们有一个需求，展示一个文章列表页，列表页上展示的信息包括：文章标题，文章作者名称。就这两个字段，也不需要分页。 我们要查询出这样的数据要怎么做呢。...在ORM的世界中，我们直观的做法是这样: posts = Post.objects.all() # 获取所有的文章数据，注意此时不会执行sql语句 by the5fire result = []...SELECT t1.title, t2.name from post as t1 INNER JOIN user as t2 ON t2.id = t1.owner_id; 想到这里，是不是觉得ORM有时候挺碍事的...其实现在的ORM框架基本都提供了解决的方案，比如Django中，对这类问题就是通过select_related来解决。
事件循环 7、select_related和prefetch_related，Q和F select_related：一对多使用，查询主动做连表...prefetch_related：多对多或者一对多的时候使用，不做连表，做多次查询 Q：用于构造复杂查询条件 F：更新时用于获取原来的值，专门取对象中某一列进行操作...优点：摆脱复杂的SQL操作，适应快速开发，让数据结果变得简单，数据库迁移成本更低 缺点：性能较差，不适用于大型应用，复杂的SQL操作还需要通过SQL语句实现...17、对Django的认识 Django是走大而全的方向，它最出名的是其全自动化的管理后台：只需要使用起ORM，做简单的对象定义，它就能自动生成数据库结构、以及全功能的管理后台。...Django内置的ORM跟框架内的其他模块耦合程度高。应用程序必须使用Django内置的ORM，否则就不能享受到框架内提供的种种基于其ORM的便利。
Django ORM用到三个类：Manager、QuerySet、Model。...或onetomany，那用select_related，不过对于onetomany，只能在主表（定义onetomany关系的那个表）的manager中使用select_related方法，即通过select_related...的正向连接 OneToOne的关系也是这样关联查询，可以看到，Django对OneToOne、OneToMany、ManyToMany关联查询及其反向关联查询提供了相同的方式，真是牛逼啊。...只返回主表（即Author表）的所有字段值，即使在查询时关联了其它表，关联表的字段也不会返回，只有当我们通过Author instance用关联表时，Django才会再次查询数据库获取值。...select_related是用select ……join来返回关联的表字段，而prefetch_related是用多条SQL语句的形式查询，一般，后一条语句用IN来调用上一句话返回的结果。
编程应用、实战教程，不容错过 在Django应用部署上线之后，随着用户量和数据量的增多，网站可能会越来越慢，这时候对应用的性能进行优化就是一个首要的问题。...五、减少查询次数 Django的ORM使用起来非常的简便，简便的背后则是其隐藏了大量的复杂性。特别是在涉及到多表之间的关系查询时，特别容易产生大量的数据库查询。...借助于Django ORM提供的一些高级功能，我们能够从某种程度上改善这种情况，将调用的查询数据减少。 例如，我们可以借助select_related()查询集方法将涉及外键的查询合并为一个查询。...下面是官方的示例： 在正常情况下，我们可能需要使用两条数据库查询： # 先去数据库查Entry表 e = Entry.objects.get(id=5) # 再去数据库查询相关的Blog对象 b =...Django的ORM中提供了一些查询集方法来让我们避免这个问题。
obj.id obj.name.....就是数据库一行数据中的一部分数据 ORM--First： 我们在学习django中的orm的时候，我们可以把一对多，多对多，分为正向和反向查找两种方式。...马上就要开始我们的orm查询之旅！！！ 建表+配置url+views中写相应的函数 models.py（在django中仅且只能在这里写数据库的相关类） ?...django的filter方法是从数据库的取得匹配的结果，返回一个对象列表，如果记录不存在的话，它会返回[]。 ? ORM的一对多： 我们在设计表结构的时候什么时候使用一对多呢？...ORM连表操作的梳理： 一、一对多创建 1、创建数据 通过对象创建 或者通过对象字段_id创建 2、查找 正向查找 在通过filter的时候跨表使用 双下划线...Django中的F和Q F：用来批量修改数据（使用查询条件的值） demo：比如我有个price这个列，我想让price自增10或者某一些自增10 ?
json的键值对，而不是列表 request.body就是form表单的数据 Queryset Django ORM用到三个类：Manager、QuerySet、Model。...QuerySet实例 就是从数据库根据自己要求拿数据的 连数据都那不出来，写啥视图 所以在编写queryset必须用django shell 调试 在model中，Django通过给Model增加一个objects...属性来提供数据操作大的接口。...() 如果我要拿这个模型通过外键绑定的另外一个模型，使用select_related course 模型定义了teacher字段绑定teacher模型 course = Course.objects.only...这样就可以引用模型字段值并使用它们执行数据库操作，而无需实际将它们从数据库中拉出到Python内存中 说白了就是我从数据库拿东西，但是有些需要的字段没有，要通过绑定的外键的app的model拿。
具体的做法是后端通过提供数据接口返回统计图表所需的数据，前端使用ECharts来渲染出柱状图、折线图、饼图、散点图等图表。例如我们要生成一个统计所有老师好评数和差评数的报表，可以按照下面的方式来做。...的ORM框架又向数据库发出了N条SQL去查询老师所属学科的信息。...是的，我们可以使用连接查询，但是在使用Django的ORM框架时如何做到这一点呢？...对于多对一关联（如投票应用中的老师和学科），我们可以使用QuerySet的用select_related()方法来加载关联对象；而对于多对多关联（如电商网站中的订单和商品），我们可以使用prefetch_related...可以用QuerySet的only()方法来指定需要查询的属性，也可以用QuerySet的defer()方法来指定暂时不需要查询的属性，这样生成的SQL会通过投影操作来指定需要查询的列，从而改善查询性能，
当你确实需要结果时，查询集 通过访问数据库来求值。 关于求值发生的准确时间，参见何时计算查询集。 缓存机制 每个查询集都包含一个缓存来最小化对数据库的访问。...select_related 返回一个QuerySet，当执行它的查询时它沿着外键关系查询关联的对象的数据。它会生成一个复杂的查询并引起性能的损耗，但是在以后使用外键关系时将不需要数据库查询。...简单说，在对QuerySet使用select_related()函数后，Django会获取相应外键对应的对象，从而在之后需要的时候不必再查询数据库了。...nid" = 1; 总结 select_related主要针一对一和多对一关系进行优化。 select_related使用SQL的JOIN语句进行优化，通过减少SQL查询的次数来进行优化、提高性能。...可以通过可变长参数指定需要select_related的字段名。也可以通过使用双下划线“__”连接字段名来实现指定的递归查询。
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
对象存储
实时音视频
即时通信 IM
