对python中两种列表元素去重函数性能的比较方法
作者：HelloHaibo 发布时间：2021-04-01 13:37:59
标签：python,列表,去重,函数
测试函数：
第一种：list的set函数
第二种：{}.fromkeys().keys()
测试代码：
#!/usr/bin/python
#-*- coding:utf-8 -*-
import time
import random
l1 = []
leng = 10L
for i in range(0,leng):
temp = random.randint(1,10)
l1.append(temp)
print '测试列表长度为：',leng
#first set
last = time.clock()
l2 = list(set(l1))
print l2
now = time.clock()
print '第一种:',now-last
#second
last = time.clock()
l2 = {}.fromkeys(l1).keys()
print l2
now = time.clock()
print '第二种:',now-last
测试结果：
我们可以看出，当测试列表长度很短时，使用第二种方法较快，在1000时，第一种性能已经超过第二种了，列表越长，第一种方法优势越明显。当频繁的对短列表进行去重时（长度<=1000）建议使用第二种方法，当长度超过1000时建议使用第二种方法。
但归根结底，建议不要用python进行大规模的数据计算，建议使用matlab、或者python的matlab库，毕竟专业的还是厉害。
来源：https://blog.csdn.net/HelloHaibo/article/details/77606310
0
投稿猜你喜欢
Django是一个基于Python Web框架的高级Web框架，允许快速开发和干净，务实的设计。今天，我们将创建一个待办事项应用程序，以了解- 前言：处理图片需要，需把图片都转换成1920*1280的大小， python实现很方便，需要导入图片处理的Image包和匹配的glob包，很
- 本文实例讲述了Python大数据之使用lxml库解析html网页文件。分享给大家供大家参考，具体如下：lxml是Python的一个html/
- 一、成员 1.1 变量实例变量，属于对象，每个对象中各自维护自己的数据。类变量，属于类，可以被所有对象共享，一般用于给对象提供公共
- 笔者remove TensorFlow总共四次。 reinstall anaconda 三次。安装技巧可以根据这个博主的文章进行安装。htt
- 一，啥是Block Formatting Context当涉及到可视化布局的时候，Block Formatting Context提供了一个
- 本文实例为大家分享了python web框架实现原生分页的具体代码，供大家参考，具体内容如下原生分页器 示例 &nbs
- 官网： https://matplotlib.org一、版本# 01 matplotlib安装情况 import matplotlib ma
- 方式一：图片+文字row = 0 # 行号col = 1 # 列号icon = QTableWidgetItem(QIcon(".
- 1.视频分解图片我们使用cv2.VideoCapture来读取视频import cv2cap = cv2.VideoCapture('
- 本文实例讲述了python简单实现基于SSL的 IRC bot。分享给大家供大家参考。具体如下：#!/usr/bin/python# -*-
- 作为一个合格的开发者，在本地环境下完成开发还远远不够，我们需要把Web App部署到远程服务器上，这样，广大用户才能访问到网站。很多做开发的
- 目录Mock概念Mock类简单的例子体验下 Mock 的功能特点一个相对正式的 Mock 例子一个完整的测试例子断言方法Mock概念mock
- 素数（也称质数），是指除了1和该数本身，不能被任何正整数整除的正整数。判断一个正整数m是否为素数，只要判断m可否被2~根号m之中的任何一个正
- 两个例子package main import ( "fmt" "time")func Proces
- 大家都知道，linux里一切皆为文件，在linux/unix的根目录下，有个/proc目录，这个/proc 是一种内核和内核模块用来向进程（
- Python是当今日趋流行的一种脚本语言，它比Java更简单，比php更强大，并且还适用于做桌面应用的开发，在ubuntu中，更加是必须的一
- 本文的文字及图片来源于网络,仅供学习、交流使用,不具有任何商业用途,版权归原作者所有,如有问题请及时联系我们以作处理。以下文章来源于Pyth
- 如何使用Pytorch实现two-head（多输出）模型1. two-head模型定义先放一张我要实现的模型结构图：如上图，就是一个two-
- 安装TensorFlow后，在Python中输入 import tensorflow as tf 时 提示一下类似错误ImportError
