心本无一物 何处惹尘埃
使用numba对python数组复杂运算加速1000倍以上 使用numba对python数组复杂运算加速1000倍以上
numba介绍Numba 是适用于 Python 的即时编译器(jit),最适用于使用 NumPy 数组和函数以及循环的代码。 使用 Numba 最常见的方法是通过它的装饰器集合,通过这些装饰器来标记函数使用 Numba 编译。 当调用 N
2022-11-12
如何使用pandas实现对40万样本集的快速运算 如何使用pandas实现对40万样本集的快速运算
说明近期在项目中,涉及到对大样本、高维数据集的分析建模,总体上样本数量有40万个,特征维度有近300个。整个分析建模采用python机器学习框架,涉及pandas进行数据清洗,其中需要依据判断条件对异常样本进行剔除。当在小样本情况下,无论多
2022-11-02
关于用pandas处理csv文件数据的一些事 关于用pandas处理csv文件数据的一些事
说明在做数据分析或者机器学习工作时,很多情况会涉及对csv格式的处理分析。pandas作为数据科学的常用工具包,对于csv格式数据的处理已经相当成熟。从对过去几个项目中的处理过的csv格式数据总结来看,发现有两个普遍而关键的处理用法: 关
2022-10-13