本项目旨在实现观远数据API的完整对接,包括数据获取、数据映射、数据入库等全流程开发,确保能够准确、高效地从观远平台获取业务数据并存储到目标数据库中。 观远API返回的数据主要包含以下几种结构: ...
Pandas 代码写得越多,越容易陷入一种惯性:用 apply() 逐行处理,用循环拼接结果,用 groupby 加 merge 绕一大圈完成本可以一行解决的操作。代码能跑结果正确,但行数膨胀、性能也大打折扣,审查时也让人读得费力。 Pandas 本身内置了大量面向列操作的方法 ...
全过程录屏准备中,将录制并上传至 Bilibili 中。 由于上图中导出的聊天记录中为全部聊天记录,所以我们需要将 2023 年以前的所有聊天记录进行删除。 由于导出的聊天记录文件可能较大(如我的 337 万行约 622MB),所以我们可以使用文本编辑器如VScode等对导出 ...
将冗长的纵向数据“压缩”为横向结构,让分析更高效。本文将通过实战案例,手把手教你掌握 SQL 中行转列的3 种核心方法,并揭示高手的隐藏技巧。 在数据世界中,数据的“形状”往往决定分析的效率。例如: 原始数据:季度销售额按行排列,难以直接生成 ...