django的admin速度慢优化:date_hierarchy、list_filter

2024-06-10 20:48

本文主要是介绍django的admin速度慢优化:date_hierarchy、list_filter,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

项目是一个django的后台系统,有一个表大概有180万条数据,打开页面基本要10多秒,自己都要受不了了。第一次尝试对项目进行优化。

首先查到用django-debug-toolbar查询了下那些sql语句耗时。

django-debug-toolba文档:https://django-debug-toolbar.readthedocs.io/en/latest/installation.html

可以看到sql查询一共耗时大概10秒。

 

主要是这四条sql语句耗时:

1、django分页sql:

SELECT COUNT(*) AS `__count` FROM `push_rule` WHERE (`push_rule`.`deleted` = 0 AND `push_rule`.`id` > 0)

 

2、 自定义ModelAdmin中list_filter的字段sql:

SELECT DISTINCT `push_rule`.`operator` FROM `push_rule` WHERE (`push_rule`.`deleted` = 0 AND `push_rule`.`id` > 0) ORDER BY `push_rule`.`operator` ASC

 

 3、自定义ModelAdmin的date_hierarchy选项sql:

SELECT MAX(`push_rule`.`insert_time`) AS `last`, MIN(`push_rule`.`insert_time`) AS `first` FROM `push_rule` WHERE (`push_rule`.`deleted` = 0 AND `push_rule`.`id` > 0)

 

 4、还是自定义ModelAdmin的date_hierarchy选项sql:

SELECT DISTINCT CAST(DATE_FORMAT(`push_rule`.`insert_time`, '%Y-%m-%d 00:00:00') AS DATETIME) AS `datetimefield` FROM `push_rule` WHERE (`push_rule`.`deleted` = 0 AND `push_rule`.`id` > 0 AND `push_rule`.`insert_time` BETWEEN '2019-01-01 00:00:00.000000' AND '2019-12-31 23:59:59.999999' AND EXTRACT(MONTH FROM `push_rule`.`insert_time`) = 7 AND `push_rule`.`insert_time` IS NOT NULL) ORDER BY `datetimefield` ASC

 


第一条暂未优化。

第二条重写一个OperatorFilter:

不从大表push_rule里查询文章的Operaor,直接从django自带的User模型类中查询Operator,User模型里的auth_user表一共也就几百个人,几乎是不用耗时的。不过也也会有点问题,User中展示的是所有user,而push_rule查到的是所有发布的文章中的所有所有作者,有些差别,不过问题不大。

OperatorFilter代码:

from django.contrib.auth.models import Userclass OperatorFilter(admin.SimpleListFilter):title = _('Who')parameter_name = 'operator'def lookups(self, request, model_admin):staff_operator_set = User.objects.filter(is_staff=1)return [(c,c) for c in sorted(staff_operator_set)]def queryset(self, request, queryset):return queryset.filter(operator=self.value()) if self.value() else queryset

设置list_filter: 

list_filter  = (OperatorFilter)

第三条第四条都是date_hierarchy的问题所以一起处理,这个date_hierarchy最耗时间:

搜索到了大神写好的解决方案:

https://hakibenita.com/scaling-django-admin-date-hierarchy?source=post_page---------------------------

这位大神写了好多django优化的文章。

没看原理,直接拿来用了。

1、安装写好的包django-admin-lightweight-date-hierarchy:

pip install django-admin-lightweight-date-hierarchy

安装要求:

Python 2.7, 3.4, 3.5, 3.6

Django 1.9, 1.10, 1.11, 2.0

2、注册INSTALL_APP

INSTALLED_APPS = ('django_admin_lightweight_date_hierarchy',
)

3、自定义ModelAdmin中设置:date_hierarchy_drilldown = False

class MyModelAdmin(admin.ModelAdmin):date_hierarchy = 'created'date_hierarchy_drilldown = False

到此本次优化基本结束:

再看一下耗时:

 

优化到2秒了,只剩django分页sql的比较耗时了。

 

这篇关于django的admin速度慢优化:date_hierarchy、list_filter的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/1049229

相关文章

Python如何使用__slots__实现节省内存和性能优化

《Python如何使用__slots__实现节省内存和性能优化》你有想过,一个小小的__slots__能让你的Python类内存消耗直接减半吗,没错,今天咱们要聊的就是这个让人眼前一亮的技巧,感兴趣的... 目录背景:内存吃得满满的类__slots__:你的内存管理小助手举个大概的例子:看看效果如何?1.

一文详解SpringBoot响应压缩功能的配置与优化

《一文详解SpringBoot响应压缩功能的配置与优化》SpringBoot的响应压缩功能基于智能协商机制,需同时满足很多条件,本文主要为大家详细介绍了SpringBoot响应压缩功能的配置与优化,需... 目录一、核心工作机制1.1 自动协商触发条件1.2 压缩处理流程二、配置方案详解2.1 基础YAML

Python使用date模块进行日期处理的终极指南

《Python使用date模块进行日期处理的终极指南》在处理与时间相关的数据时,Python的date模块是开发者最趁手的工具之一,本文将用通俗的语言,结合真实案例,带您掌握date模块的六大核心功能... 目录引言一、date模块的核心功能1.1 日期表示1.2 日期计算1.3 日期比较二、六大常用方法详

MySQL中慢SQL优化的不同方式介绍

《MySQL中慢SQL优化的不同方式介绍》慢SQL的优化,主要从两个方面考虑,SQL语句本身的优化,以及数据库设计的优化,下面小编就来给大家介绍一下有哪些方式可以优化慢SQL吧... 目录避免不必要的列分页优化索引优化JOIN 的优化排序优化UNION 优化慢 SQL 的优化,主要从两个方面考虑,SQL 语

Django序列化中SerializerMethodField的使用详解

《Django序列化中SerializerMethodField的使用详解》:本文主要介绍Django序列化中SerializerMethodField的使用,具有很好的参考价值,希望对大家有所帮... 目录SerializerMethodField的基本概念使用SerializerMethodField的

java streamfilter list 过滤的实现

《javastreamfilterlist过滤的实现》JavaStreamAPI中的filter方法是过滤List集合中元素的一个强大工具,可以轻松地根据自定义条件筛选出符合要求的元素,本文就来... 目录1. 创建一个示例List2. 使用Stream的filter方法进行过滤3. 自定义过滤条件1. 定

MySQL中慢SQL优化方法的完整指南

《MySQL中慢SQL优化方法的完整指南》当数据库响应时间超过500ms时,系统将面临三大灾难链式反应,所以本文将为大家介绍一下MySQL中慢SQL优化的常用方法,有需要的小伙伴可以了解下... 目录一、慢SQL的致命影响二、精准定位问题SQL1. 启用慢查询日志2. 诊断黄金三件套三、六大核心优化方案方案

Redis中高并发读写性能的深度解析与优化

《Redis中高并发读写性能的深度解析与优化》Redis作为一款高性能的内存数据库,广泛应用于缓存、消息队列、实时统计等场景,本文将深入探讨Redis的读写并发能力,感兴趣的小伙伴可以了解下... 目录引言一、Redis 并发能力概述1.1 Redis 的读写性能1.2 影响 Redis 并发能力的因素二、

使用国内镜像源优化pip install下载的方法步骤

《使用国内镜像源优化pipinstall下载的方法步骤》在Python开发中,pip是一个不可或缺的工具,用于安装和管理Python包,然而,由于默认的PyPI服务器位于国外,国内用户在安装依赖时可... 目录引言1. 为什么需要国内镜像源?2. 常用的国内镜像源3. 临时使用国内镜像源4. 永久配置国内镜

Spring Boot拦截器Interceptor与过滤器Filter详细教程(示例详解)

《SpringBoot拦截器Interceptor与过滤器Filter详细教程(示例详解)》本文详细介绍了SpringBoot中的拦截器(Interceptor)和过滤器(Filter),包括它们的... 目录Spring Boot拦截器(Interceptor)与过滤器(Filter)详细教程1. 概述1