位置: 编程技术 - 正文

Python进行数据提取的方法总结(python提取信息)

编辑:rootadmin

推荐整理分享Python进行数据提取的方法总结(python提取信息),希望有所帮助,仅作参考,欢迎阅读内容。

文章相关热门搜索词:python大批量数据提取,python提取信息,python数据提取方法,python 数据获取,python数据提取方法,python提取变量值,python从数据库中提取数据,python数据提取方法,内容如对您有帮助,希望把文章链接给更多的朋友!

准备工作

首先是准备工作,导入需要使用的库,读取并创建数据表取名为loandata。

设置索引字段

在开始提取数据前,先将member_id列设置为索引字段。然后开始提取数据。

按行提取信息

第一步是按行提取数据,例如提取某个用户的信息。下面使用ix函数对member_id为的用户信息进行了提取。

按列提取信息

第二步是按列提取数据,例如提取用户工作年限列的所有信息,下面是具体的代码和提取结果,显示了所有用户的工作年龄信息。

按行与列提取信息

第三步是按行和列提取信息,把前面两部的查询条件放在一起,查询特定用户的特定信息,下面是查询member_id为的用户的emp_length信息。

在前面的基础上继续增加条件,增加一行同时查询两个特定用户的贷款金额信息。具体代码和查询结果如下。结果中分别列出了两个用户的代码金额。

在前面的代码后增加sum函数,对结果进行求和,同样是查询两个特定用户的贷款进行,下面的结果中直接给出了贷款金额的汇总值。

除了增加行的查询条件以外,还可以增加列的查询条件,下面的代码中查询了一个特定用户的贷款金额和年收入情况,结果中分别显示了这两个字段的结果。

多个列的查询也可以进行求和计算,在前面的代码后增加sum函数,对这个用户的贷款金额和年收入两个字段求和,并显示出结果。

提取特定日期的信息

数据提取中还有一种很常见的需求就是按日期维度对数据进行汇总和提取,如按月,季度的汇总数据提取和按特定时间段的数据提取等等。

设置索引字段

首先将索引字段改为数据表中的日期字段,这里将issue_d设置为数据表的索引字段。按日期进行查询和数据提取。

Python进行数据提取的方法总结(python提取信息)

按日期提取信息

下面的代码查询了所有年的数据。

在前面代码的基础上增加月份,查询所有年3月的数据。

继续在前面代码的基础上增加日期,查询所有年6月日的数据。

除了按单独日期查询以外,还可以按日期段进行数据查询,下面的代码中查询了所有年1月至5月的数据。下面显示了具体的查询结果,可以发现数据的日期都是在1-5月的,但是按日期维度显示的,这就需要我们对数据按月进行汇总。

按日期汇总信息

Pandas中的resample函数可以完成日期的聚合工作,包括按小时维度,日期维度,月维度,季度及年的维度等等。下面我们分别说明。首先是按周的维度对前面数据表的数据进行求和。下面的代码中W表示聚合方式是按周,how表示数据的计算方式,默认是计算平均值,这里设置为sum,进行求和计算。

将W改为M,数据变成了按月聚合的方式。计算方式依然是求和。这里需要说明的是resample函数会显示出所有连续的时间段,例如前面按周的聚合操作会显示连续的周日期,这里的按月操作则会在结果中显示连续的月,如果某个时间段没有数据,会以NaN值显示。

将前面代码中的M改为Q,则为按季度对数据进行聚合,计算方式依然为求和。从下面的数据表中看,日期显示的都是每个季度的最后一天,如果希望以每个季度的第一天显示,可以改为QS。

将前面代码中的Q改为A,就是按年对数据进行聚合,计算方式依然为求和。

前面的方法都是对整个数据表进行聚合和求和操作,如果只需要对某一个字段的值进行聚合和求和,可以在数据表后增加列的名称。下面是将贷款金额字段按月聚合后求和,并用0填充空值。

在前面代码的基础上再增加一个数值字段,并且在后面的计算方式中增加len用来计数。在下面的结果中分别对贷款金额和利息收入按月聚合,并进行求和和计数计算

有时我们需要只对某一时间段的数据进行聚合和计算,下面的代码中对年1月至5月的数据按月进行了聚合,并计算求和。用0填充空值。

或者只对某些符合条件的数据进行聚合和计算。下面的代码中对于贷款金额大于的按月进行聚合,并计算求和。空值以0进行填充。

除了按周,月,季度和年以外,resample函数还可以按以下方式对日期进行聚合。

下面给出了具体的对应表和说明。

总结

标签: python提取信息

本文链接地址:https://www.jiuchutong.com/biancheng/386189.html 转载请保留说明!

上一篇:详解Python实现按任意键继续/退出的功能(python按位与操作)

下一篇:Python实现基本线性数据结构(用python绘制一条直线)

  • 从税法经济法角度分析冰冰偷漏税事件?
  • 房屋契税缴纳比例
  • 公账转法人私账的注意事项
  • 车辆购置税可以刷信用卡吗?
  • 年底计提是什么意思
  • 自产自用应税消费品的消费税,其纳税环节
  • 管理费用期末有余额么
  • 电子税务局财务负责人实名认证
  • 销售自己使用过的固定资产如何开票
  • 资金账簿印花税每年都要交吗?
  • 提取备用金如何在退回公司
  • 可变股权转让对价会计处理怎么做?
  • 固定资产可以一次抵扣吗
  • 招待费进项税额转出会计分录
  • 税务稽查补缴的税款怎么处理
  • 增值税普通发票可以抵扣吗
  • 小微企业几个人
  • 增值税发票开票限额怎么申请?
  • 管理费用属于什么现金流量项目
  • 股权转让怎么缴纳个人所得税
  • 注册资金印花税什么时候开始交
  • 我的初级备考经历怎么写
  • 现金流量表根据什么原则编制
  • 新成立的有限公司
  • 如何快速修复
  • arm on windows
  • win10 21h1正式版怎么样
  • 以固定资产对外投资交税吗
  • 什么叫做材料成型工艺
  • fpzs1是什么文件可以删除吗
  • 银行存放同业的钱安全吗
  • 设备租赁会计科目
  • 通行发票可以抵增值税吗
  • 计提营业税金及附加比例
  • 残疾人保证金的滞纳金怎么计算
  • 织梦前台的菜单怎么换
  • 企业发行债券的交易费用计入
  • 鲜花虫草开发票属于什么类别?
  • 高并发数据库解决方案
  • 公司买的茶叶怎么入账
  • 航天信息开票软件密码忘记了怎么办
  • 收入费用表本期盈余与资产负债表不一致
  • 如何查询工商局每天入驻情况
  • 支付与其他经营活动的现金为负数
  • 在租赁公司贷款买的车绿本上会有我的名字吗
  • 一般纳税人销售旧货税率
  • 研发人员工资是实发还是应发
  • 应付账款调整科目余额分录
  • 进项税额转出的几种情况
  • 医保卡收到钱
  • 补缴的增值税可以抵扣吗
  • 其他货币资金微信和支付宝的管理
  • 应付票据贴现利息收入会计分录
  • 银行日记账年底是0第二年年初怎么写
  • 本年利润有余额么
  • 税收会计记账方法
  • 会计备注一般写什么
  • 增强型图形文件
  • centos7 阿里云 yum
  • 资源管理器 windows
  • ubuntu操作系统入门
  • centos基本环境
  • mac itunes在哪儿
  • win7自动更新失败怎么删除更新启动
  • Win10系统CMD有哪些新功能? Win10 CMD命令提示符的七大使用技巧
  • win8怎么用
  • eclipse 单词
  • android ndk cmake
  • cocos code ide 1.0.0 RC0 使用教程
  • jquery提交表单调用serialize方法
  • js函数详解
  • android 启动器 设置
  • linux更改
  • shell错误日志输出
  • Unity3D WebCamTexture 调用外部摄像头
  • python字典添加多个键值对
  • js实现的功能
  • 粮食购销企业税收服务
  • 税控机怎么开发票
  • 2021年江苏省考常州职位表
  • 免责声明:网站部分图片文字素材来源于网络,如有侵权,请及时告知,我们会第一时间删除,谢谢! 邮箱:opceo@qq.com

    鄂ICP备2023003026号

    网站地图: 企业信息 工商信息 财税知识 网络常识 编程技术

    友情链接: 武汉网站建设