• 本文记录工作中常遇到的几种Excel文件合并的情景 实际运到问题可以直接运行程序 输入要合并的文件所在的路径就可以实现自动合并 提升工作效率 情形一 Excel属于同一文件夹下 同一文件夹下多个Excel合并 import pandas a
  • 背景 实际工作 使用SQL语句对数据进行处理 有一大部分工作是对日期时间型数据进行处理 通过对字段的拼接或转换生成实际需要的格式的日期字段 本文章尽可能全面记录现在主流的数据库 MySQL和Hive 对日期格式的处理 形成一份工作速查文档
  • 数据分析工作中 Python和SQL是常用的两大工具 常见的数据类型有数值型 字符串型 日期型等 对日期型格式进行处理也是比较常见的情形 文章SQL中日期格式处理记录了SQL针对日期型字段的处理过程 本文记录Python对日期型数据的处理
  • 工作中一些项目 特别是系统或看板开发过程中 因为要保证日期在特定区间可能需要建立一张日期维度表 每天取过去某个日期到当天的日期 MySQL操作 MySQL可以编写并调用存储过程来实现 create table dim dim date DI
  • 在数据清洗和计算方面 Python比SQL的灵活性更强 本文记录使用Python读取Gbase数据库中的数据 建立数据库连接 无论什么方法读取读取或操作数据库中的数据 首先要建立数据库连接对象 import pandas as pd imp