pandas/numpy常用方法/属性

关注

原创最新推荐文章于 2025-08-16 20:26:41 发布 3.1k 阅读 AI 写同款· GEO 优化 ›

大模型技术之numpy与pandas基础 NumPy是Python中用于科学计算的基础库，提供多维数组对象ndarray及各种数组操作方法。ndarray具有高效存储和运算能力，支持数学、统计、线性代数等操作。创建数组的方式包括zeros()、ones()、arange()等函数，并可指定数据类型如int32、float64等。数组支持切片索引操作，与Python列表类似。NumPy还提供随机数生成、矩阵运算等功能，但ndarray要求元素类型一致且形状固定。该库广泛应用于数据分析、机器学习等领域，是Python科学计算生态的核心组件。阅读详情

pandas/numpy常用方法/属性的坑

Numpy

DataFrame.searchsorted

DataFrame.searchsorted(q)返回一个由插入位置组成的ndarray对象1。q为一个数式，返回一个一维仅有一个数值的ndarray。
取[0]得到一个value

def get_quantile_count(group,q=0.5):
    group=group.sort_values(by='prop',ascending=False)
    return group.prop.cumsum().searchsorted(q)+1    

diversity=top1000.groupby(['year','sex']).apply(get_quantile_count)
diversity=diversity.unstack('sex')

不取[0]得到：

    return group.prop.cumsum().searchsorted(q)[0]+1

取[0]得到：
取[0]

DataFrame.head(n=5)

返回前n行，n默认为5.

ndarray切片

ndarray切片返回的对象是原ndarray对象的一个视窗，未产生新的对象，对切片操作时，即对原对象操作。

arr=np.arange(10)
#out:array([0, 1, 2, 3, 4, 5, 6, 7, 8, 9])
arr_slice=arr[5:8]
arr_slice[1]=12345

arr
#out:array([0,1,2,3,4,12,12345,12,8,9])

np.meshgrid(x,y)

传入：x轴上一个list, y轴上一个list
返回：平面上，x/y的直线相交形成的网格的x,y值矩阵。

nx,ny=（3,4)
x=np.linspace(0,2,nx)
y=np.linespace(3,6,ny)
xx,yy=np.meshgrid(x,y)
#xx:将一维数据x在0轴方向上拓展ny次
#xx:将一维数据y在1轴方向上拓展ny次

x = [0, 1, 2] ； y = ⎡ ⎣ ⎢ ⎢ ⎢ 3456 ⎤ ⎦ ⎥ ⎥ ⎥

$x=\left[\begin{matrix}0,1,2\end{matrix}\right]；y=\left[\begin{matrix}3\\4\\5\\6\end{matrix}\right]$

x x = ⎡ ⎣ ⎢ ⎢ ⎢ 0, 1, 2 0, 1, 2 0, 1, 2 0, 1, 2 ⎤ ⎦ ⎥ ⎥ ⎥ = ⎡ ⎣ ⎢ ⎢ ⎢ x x x x ⎤ ⎦ ⎥ ⎥ ⎥ ； y y = ⎡ ⎣ ⎢ ⎢ ⎢ 3, 3, 3 4, 4, 4 5, 5, 5 6, 6, 6 ⎤ ⎦ ⎥ ⎥ ⎥ = [y, y, y, y]

$xx=\left[\begin{matrix}0,1,2\\0,1,2\\0,1,2\\0,1,2\\\end{matrix}\right]=\left[\begin{matrix}x\\x\\x\\x\\\end{matrix}\right]；yy=\left[\begin{matrix}3,3,3\\4,4,4\\5,5,5\\6,6,6\end{matrix}\right]=\left[\begin{matrix}y,y,y,y\end{matrix}\right]$
用途：生成绘图时的(x, y)

求对数

#以e为底
np.log(x)
#以10为底
np.log10(x)

Pandas

Ipynb笔记

Pandas去重

参考资料

numpy.searchsorted — NumPy v1.13 Manual ↩

收录于

Notes

python

pandas

标签

#python #pandas #numpy

本内容遵循 CC 4.0 BY-SA 版权协议

Python预处理之pandas、numpy介绍和常用函数使用一、numpy基本介绍 1、什么是numpy NumPy（Numerical Python）是Python的一种开源的数值计算扩展。这种工具可用来存储和处理大型矩阵，比Python自身的嵌套列表（nested list structure)结构要高效的多（该结构也可以用来表示矩阵（matrix）），支持大量的维度数组与矩阵运算，此外也针对数组运算提供大量的数学函数库。 2、numpy的数据结构 numpy的数据结构是ndarray，它是一种N维的数组类型，它描述了相同类型的“items”的集合，同时阅读详情