如何按两列或更多列对 pandas dataFrame 进行排序?

2024-11-28 08:37:00
admin
原创
10
摘要:问题描述:假设我有一个包含列a、b和 的数据框c。我想按列b升序对数据框进行排序,并按列c降序对数据框进行排序。我该怎么做?解决方案 1:从 0.17.0 版本开始,该sort方法被弃用,取而代之的是sort_values。 sort在 0.20.0 版本中被完全删除。参数(和结果)保持不变:df.sort_...

问题描述:

假设我有一个包含列ab和 的数据框c。我想按列b升序对数据框进行排序,并按列c降序对数据框进行排序。我该怎么做?


解决方案 1:

从 0.17.0 版本开始,该sort方法被弃用,取而代之的是sort_valuessort在 0.20.0 版本中被完全删除。参数(和结果)保持不变:

df.sort_values(['a', 'b'], ascending=[True, False])

您可以使用升序参数sort

df.sort(['a', 'b'], ascending=[True, False])

例如:

In [11]: df1 = pd.DataFrame(np.random.randint(1, 5, (10,2)), columns=['a','b'])

In [12]: df1.sort(['a', 'b'], ascending=[True, False])
Out[12]:
   a  b
2  1  4
7  1  3
1  1  2
3  1  2
4  3  2
6  4  4
0  4  3
9  4  3
5  4  1
8  4  1

正如@renadeen 所评论的那样

默认情况下,排序不是就地排序!因此,您应该将排序方法的结果分配给变量,或者在方法调用中添加 inplace=True。

也就是说,如果您想将 df1 重新用作已排序的 DataFrame:

df1 = df1.sort(['a', 'b'], ascending=[True, False])

或者

df1.sort(['a', 'b'], ascending=[True, False], inplace=True)

解决方案 2:

从 pandas 0.17.0 开始,DataFrame.sort()已弃用,并将在 pandas 的未来版本中删除。现在按数据框的值对其进行排序的方式是DataFrame.sort_values

因此,你的问题的答案现在是

df.sort_values(['b', 'c'], ascending=[True, False], inplace=True)

解决方案 3:

对于大型数字数据框,您可以numpy.lexsort通过使用一系列键执行间接排序来看到显着的性能提升:

import pandas as pd
import numpy as np

np.random.seed(0)

df1 = pd.DataFrame(np.random.randint(1, 5, (10,2)), columns=['a','b'])
df1 = pd.concat([df1]*100000)

def pdsort(df1):
    return df1.sort_values(['a', 'b'], ascending=[True, False])

def lex(df1):
    arr = df1.values
    return pd.DataFrame(arr[np.lexsort((-arr[:, 1], arr[:, 0]))])

assert (pdsort(df1).values == lex(df1).values).all()

%timeit pdsort(df1)  # 193 ms per loop
%timeit lex(df1)     # 143 ms per loop

一个特点是定义的排序顺序numpy.lexsort是相反的:首先(-'b', 'a')按系列排序a。我们对系列取反,b以反映我们希望该系列按降序排列。

请注意np.lexsort仅对数值进行排序,而 则可pd.DataFrame.sort_values对字符串或数值进行排序。使用np.lexsort字符串将得到:TypeError: bad operand type for unary -: 'str'

解决方案 4:

sort_values有一个稳定的排序选项,可以通过传递来调用kind='stable'。请注意,我们需要反转要排序的列才能正确使用稳定排序。

因此以下两种方法产生相同的输出,即df1df2是等效的。

df = pd.DataFrame(np.random.randint(10, size=(100,2)), columns=['a', 'b'])

df1 = df.sort_values(['a', 'b'], ascending=[True, False])  # sort by 'a' then 'b'

df2 = (
    df
    .sort_values('b', ascending=False)                     # sort by 'b' first
    .sort_values('a', ascending=True, kind='stable')       # then by 'a'
)

assert df1.eq(df2).all().all()

如果您需要更复杂的排序键,这将特别有用。

假设,df如下所示,您想要按'date'和排序'value',但将其'date'视为日期时间值,即使它们是字符串。直接sort_values使用两个排序依据列会产生错误的结果;但是,sort_values使用相关排序键调用两次会产生正确的输出。

df = pd.DataFrame({'date': ['10/1/2024', '10/1/2024', '2/23/2024'], 'value': [0, 1, 0]})

df1 = df.sort_values(['date', 'value'], ascending=[True, False])  # <--- wrong output

df2 = (
    df
    .sort_values('value', ascending=False)
    .sort_values('date', ascending=True, kind='stable', key=pd.to_datetime) 
)  # <--- correct output

注意:我们可以通过分配一个新的日期时间列并将其用作排序依据列来获得相同的输出,但在我看来,使用排序键的稳定排序更加清晰。

df3 = df.assign(dummy=pd.to_datetime(df['date'])).sort_values(['dummy', 'value'], ascending=[True, False]).drop(columns='dummy')

解决方案 5:

对于那些来这里寻求多列的人来说DataFrame,请使用tuple with elements corresponding to each level

具有与每个级别对应的元素的元组:

d = {}
d['first_level'] = pd.DataFrame(columns=['idx', 'a', 'b', 'c'],
                                         data=[[10, 0.89, 0.98, 0.31],
                                               [20, 0.34, 0.78, 0.34]]).set_index('idx')
d['second_level'] = pd.DataFrame(columns=['idx', 'a', 'b', 'c'],
                                          data=[[10, 0.29, 0.63, 0.99],
                                                [20, 0.23, 0.26, 0.98]]).set_index('idx')

df = pd.concat(d, axis=1)
df.sort_values(('second_level', 'b'))
相关推荐
  为什么项目管理通常仍然耗时且低效?您是否还在反复更新电子表格、淹没在便利贴中并参加每周更新会议?这确实是耗费时间和精力。借助软件工具的帮助,您可以一目了然地全面了解您的项目。如今,国内外有足够多优秀的项目管理软件可以帮助您掌控每个项目。什么是项目管理软件?项目管理软件是广泛行业用于项目规划、资源分配和调度的软件。它使项...
项目管理软件   642  
  引言在当今快速变化的科技市场中,企业要想保持竞争力,就必须具备高效的产品开发流程。小米作为一家以创新驱动的科技公司,其集成产品开发(IPD)流程在业界颇受关注。其中,技术路线图规划作为IPD流程的核心环节,对于确保产品技术领先、满足市场需求以及实现长期战略目标至关重要。本文将深入探讨小米IPD流程中的技术路线图规划,分...
华为IPD是什么   0  
  在当今快速变化的商业环境中,项目管理的高效执行是企业成功的关键。为了应对日益复杂的产品开发挑战,企业纷纷寻求将产品开发流程(Product Development Process, PDCP)与集成产品开发(Integrated Product Development, IPD)流程相结合的策略,以实现更高效、更协同的...
IPD管理   0  
  在当今竞争激烈的市场环境中,提高客户满意度是企业持续发展和成功的关键。为了实现这一目标,企业需要不断优化其产品开发和管理流程。IPD(Integrated Product Development,集成产品开发)流程图作为一种高效的项目管理工具,能够帮助企业实现跨部门协作、优化资源配置,并最终提升客户满意度。本文将深入探...
IPD流程是谁发明的   0  
  在项目管理领域,集成产品开发(IPD, Integrated Product Development)流程被视为提升项目成功率的关键框架。IPD通过其系统化的方法,将产品开发过程中的各个阶段紧密连接,确保从概念到市场的每一步都经过深思熟虑和高效执行。本文将深入探讨IPD流程的六个核心阶段如何深刻影响项目成功,并为项目管...
IPD流程中CDCP   0  
热门文章
项目管理软件有哪些?
云禅道AD
禅道项目管理软件

云端的项目管理软件

尊享禅道项目软件收费版功能

无需维护,随时随地协同办公

内置subversion和git源码管理

每天备份,随时转为私有部署

免费试用