首页
学习
活动
专区
圈层
工具
发布

#pandas

Polars vs Pandas:我用真实项目数据跑了个对比测试

用户11081884

网上说Polars比Pandas快10倍、50倍、甚至100倍的文章满天飞,看得人一愣一愣的。

5700

盘点我常用的8个Python库,除了pandas还有这些神器

用户11081884

当数据量超过千万级,pandas开始力不从心时,polars就是我的救星。这个用Rust编写的库在性能上完胜pandas,特别是在处理大数据时。

9310

Python 处理 Excel 终极对比:openpyxl vs pandas vs xlwings

用户11081884

今天把三个最常用的库彻底对比一遍,openpyxl、pandas、xlwings,每个都说清楚:适合干嘛、不适合干嘛、哪些坑是我替你踩过的。

7800

Pandas 20个实战技巧,数据分析效率提升5倍

用户11081884

你是否还在用Excel处理几十万行数据?打开文件卡顿、计算公式刷新、筛选排序等待...这些操作每天都在消耗你的时间。更糟的是,Excel超过10万行后基本崩溃,...

4900

Python 15个Pandas技巧,提升数据分析效率

用户11081884

Pandas是Python数据分析的核心库,但许多用户只掌握了其基础功能。本文将介绍15个实用技巧,涵盖数据转换、处理、合并与优化等多个方面,帮助显著提升数据分...

6710

Python Pandas筛选数据的30种方法,效率翻倍

用户11081884

Pandas作为Python数据分析的核心库,其数据筛选功能直接影响着数据处理效率。本文将介绍30种实用的数据筛选方法,涵盖基础查询到高级操作,每种方法都有代码...

9610

Python 封装pandas连接数据库方法

用户11081884

在数据分析工作中,经常需要将数据库中的数据读取到pandas中进行处理,或者将pandas DataFrame写入数据库。通过封装这些操作可以提高代码复用性,简...

9710

Python 140个Pandas数据分析技巧

用户11081884

Pandas 常用于数据处理与分析,梳理了 140 个 Pandas 要点,帮助驾驭各类数据分析任务。

16300

Python Pandas自动化处理Excel数据,替代vlookup

用户11081884

在数据处理工作中,Excel的VLOOKUP函数曾是数据匹配的“标配”工具,但随着数据量增大和复杂度提高,VLOOKUP的局限性日益明显。Python的Pand...

4400

Python 用pandas自动化获取表格网页数据

用户11081884

在数据采集和分析工作中,经常需要从网页上获取表格数据。传统爬虫方法需要构造请求、解析网页、提取要素等多个步骤,代码量较大。而Python的pandas库提供了一...

7210

Python Pandas数据分析常用的30个函数

用户11081884

掌握这30个核心函数,能够高效处理90%以上的pandas数据分析任务。在实际业务场景中逐步掌握这些函数的灵活应用。

8810

基于 Pandas-TA 与 QuantDash 的自动化多标的技术指标扫描系统(附 GitHub 源码)

用户9138916

以下代码展示如何通过 QuantDash 沙盒公共 Token[4],调取腾讯控股(00700.HK)的日 K 线[5],并利用 pandas-ta 一键注入多...

13110

丢掉繁琐的 Event-Driven 框架:用 30 行 Pandas 向量化代码与 QuantDash 极速验证策略想法

用户9138916

很多刚从 Python 转向算法交易的开发者,都会被推荐去学 Backtrader、PyAlgoTrade 或者 Zipline。

16610

基于 Polars + QuantDash 极速处理海量股票行情与因子特征计算

用户9138916

在量化多因子策略研究中,数据清洗与特征工程(Feature Engineering)占用了研究员 80% 以上的时间。当我们面对成百上千只股票、几年的日线甚至分...

19510

如何利用腾讯云函数 (SCF) 零成本搭建每日自动化的金融行情数据同步通道?

用户9138916

由于代码中引入了 quantdash, pandas, sqlalchemy, pymysql 等第三方库,我们需要解决环境依赖问题。

19110

云上定时采集股票行情数据:任务调度、缓存、存储和告警

用户9138916

很多行情数据项目一开始是在本地脚本里跑的:手动执行 Python,拿到一份 K 线或行情快照。但只要进入长期使用阶段,就会遇到几个问题:

18510

开发者如何设计股票行情数据服务?以 QuantDash API 为例

用户9138916

在量化研究、行情看板、风控监控或投研系统中,股票行情数据通常不是“调用一次接口”这么简单。真正落地时,我们更关心的是:数据如何稳定获取、如何标准化、如何缓存、如...

20010

Polars 性能碾压 Pandas 吗?千万级真实业务数据实测给出答案

小白学大数据

to_pandas() 在底层使用 Arrow 零拷贝机制,转换耗时在毫秒级,不构成性能瓶颈。七、完整数据链路的性能优化在企业场景中,性能瓶颈不仅在分析阶段,也...

14910

Pandas 操作Excel Sheet

小田测测看

使用 sheet_name=None 将整个 Excel 文件加载为 OrderedDict,Key 为 Sheet 名,Value 为 DataFrame。

13610
领券