如何按两列或更多列对 pandas dataFrame 进行排序?

2024-11-28 08:37:00
admin
原创
206
摘要:问题描述:假设我有一个包含列a、b和 的数据框c。我想按列b升序对数据框进行排序,并按列c降序对数据框进行排序。我该怎么做?解决方案 1:从 0.17.0 版本开始,该sort方法被弃用,取而代之的是sort_values。 sort在 0.20.0 版本中被完全删除。参数(和结果)保持不变:df.sort_...

问题描述:

假设我有一个包含列ab和 的数据框c。我想按列b升序对数据框进行排序,并按列c降序对数据框进行排序。我该怎么做?


解决方案 1:

从 0.17.0 版本开始,该sort方法被弃用,取而代之的是sort_valuessort在 0.20.0 版本中被完全删除。参数(和结果)保持不变:

df.sort_values(['a', 'b'], ascending=[True, False])

您可以使用升序参数sort

df.sort(['a', 'b'], ascending=[True, False])

例如:

In [11]: df1 = pd.DataFrame(np.random.randint(1, 5, (10,2)), columns=['a','b'])

In [12]: df1.sort(['a', 'b'], ascending=[True, False])
Out[12]:
   a  b
2  1  4
7  1  3
1  1  2
3  1  2
4  3  2
6  4  4
0  4  3
9  4  3
5  4  1
8  4  1

正如@renadeen 所评论的那样

默认情况下,排序不是就地排序!因此,您应该将排序方法的结果分配给变量,或者在方法调用中添加 inplace=True。

也就是说,如果您想将 df1 重新用作已排序的 DataFrame:

df1 = df1.sort(['a', 'b'], ascending=[True, False])

或者

df1.sort(['a', 'b'], ascending=[True, False], inplace=True)

解决方案 2:

从 pandas 0.17.0 开始,DataFrame.sort()已弃用,并将在 pandas 的未来版本中删除。现在按数据框的值对其进行排序的方式是DataFrame.sort_values

因此,你的问题的答案现在是

df.sort_values(['b', 'c'], ascending=[True, False], inplace=True)

解决方案 3:

对于大型数字数据框,您可以numpy.lexsort通过使用一系列键执行间接排序来看到显着的性能提升:

import pandas as pd
import numpy as np

np.random.seed(0)

df1 = pd.DataFrame(np.random.randint(1, 5, (10,2)), columns=['a','b'])
df1 = pd.concat([df1]*100000)

def pdsort(df1):
    return df1.sort_values(['a', 'b'], ascending=[True, False])

def lex(df1):
    arr = df1.values
    return pd.DataFrame(arr[np.lexsort((-arr[:, 1], arr[:, 0]))])

assert (pdsort(df1).values == lex(df1).values).all()

%timeit pdsort(df1)  # 193 ms per loop
%timeit lex(df1)     # 143 ms per loop

一个特点是定义的排序顺序numpy.lexsort是相反的:首先(-'b', 'a')按系列排序a。我们对系列取反,b以反映我们希望该系列按降序排列。

请注意np.lexsort仅对数值进行排序,而 则可pd.DataFrame.sort_values对字符串或数值进行排序。使用np.lexsort字符串将得到:TypeError: bad operand type for unary -: 'str'

解决方案 4:

sort_values有一个稳定的排序选项,可以通过传递来调用kind='stable'。请注意,我们需要反转要排序的列才能正确使用稳定排序。

因此以下两种方法产生相同的输出,即df1df2是等效的。

df = pd.DataFrame(np.random.randint(10, size=(100,2)), columns=['a', 'b'])

df1 = df.sort_values(['a', 'b'], ascending=[True, False])  # sort by 'a' then 'b'

df2 = (
    df
    .sort_values('b', ascending=False)                     # sort by 'b' first
    .sort_values('a', ascending=True, kind='stable')       # then by 'a'
)

assert df1.eq(df2).all().all()

如果您需要更复杂的排序键,这将特别有用。

假设,df如下所示,您想要按'date'和排序'value',但将其'date'视为日期时间值,即使它们是字符串。直接sort_values使用两个排序依据列会产生错误的结果;但是,sort_values使用相关排序键调用两次会产生正确的输出。

df = pd.DataFrame({'date': ['10/1/2024', '10/1/2024', '2/23/2024'], 'value': [0, 1, 0]})

df1 = df.sort_values(['date', 'value'], ascending=[True, False])  # <--- wrong output

df2 = (
    df
    .sort_values('value', ascending=False)
    .sort_values('date', ascending=True, kind='stable', key=pd.to_datetime) 
)  # <--- correct output

注意:我们可以通过分配一个新的日期时间列并将其用作排序依据列来获得相同的输出,但在我看来,使用排序键的稳定排序更加清晰。

df3 = df.assign(dummy=pd.to_datetime(df['date'])).sort_values(['dummy', 'value'], ascending=[True, False]).drop(columns='dummy')

解决方案 5:

对于那些来这里寻求多列的人来说DataFrame,请使用tuple with elements corresponding to each level

具有与每个级别对应的元素的元组:

d = {}
d['first_level'] = pd.DataFrame(columns=['idx', 'a', 'b', 'c'],
                                         data=[[10, 0.89, 0.98, 0.31],
                                               [20, 0.34, 0.78, 0.34]]).set_index('idx')
d['second_level'] = pd.DataFrame(columns=['idx', 'a', 'b', 'c'],
                                          data=[[10, 0.29, 0.63, 0.99],
                                                [20, 0.23, 0.26, 0.98]]).set_index('idx')

df = pd.concat(d, axis=1)
df.sort_values(('second_level', 'b'))
相关推荐
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   1259  
  IPD(Integrated Product Development)流程管理作为一种先进的产品开发管理理念和方法,在提升企业创新能力方面发挥着至关重要的作用。它打破了传统产品开发过程中部门之间的壁垒,通过整合资源、优化流程,实现产品的快速、高效开发,为企业在激烈的市场竞争中赢得优势。IPD流程管理的核心概念IPD流程...
IPD流程中PDCP是什么意思   11  
  IPD(Integrated Product Development)流程管理作为一种先进的产品开发管理模式,旨在通过整合各种资源,实现产品的高效、高质量开发。在这一过程中,团队协作无疑是成功的关键。有效的团队协作能够打破部门壁垒,促进信息共享,提升决策效率,从而确保产品开发项目顺利推进。接下来,我们将深入探讨IPD流...
IPD培训课程   9  
  IPD(Integrated Product Development)研发管理体系作为一种先进的产品开发理念和方法,在众多企业中得到了广泛应用。它旨在打破部门壁垒,整合资源,实现产品开发的高效、协同与创新。在项目周期方面,IPD研发管理体系有着深远且多维度的影响,深入剖析这些影响,对于企业优化产品开发流程、提升市场竞争...
华为IPD流程   11  
  IPD(Integrated Product Development)流程管理是一种先进的产品开发管理模式,旨在通过整合企业的各种资源,实现产品的高效、高质量开发。它涵盖了从产品概念提出到产品退市的整个生命周期,对企业的发展具有至关重要的意义。接下来将详细阐述IPD流程管理的五个阶段及其重要性。概念阶段概念阶段是IPD...
IPD概念阶段   12  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用