用Python简单批量处理数据

近期碰到一个问题，两套系统之间数据同步出了差错，事后才发现的，又不能将业务流程倒退，但是这么多数据手工处理量也太大了，于是决定用 Python 偷个小懒。

1 、首先分析数据。

两边数据库字段的值都是一样，先将这边数据库的数据查询导出，正好是 2 列 120 多行的数据。那么目标就是拼接成 update from_name set data= where id= 格式，将导出内容中的第 1 列和第 2 列内容放到等号 = 后面即可。

2 、下面开始动手。

前提肯定是要有一个 python 环境的，没有的去下载安装一个也很快。有了环境之后打开编辑器，这里用自带的 IDLE 或者 pycharm 都行，代码简单用哪个都不影响。

2.1 打开文件（注意文件存放路径），默认打开为 r   模式， seek(0) ：从起始位置读取内容。

2.2 读取文件中的数据，得到一个列表，用以 for 循环

输出 f1 查看数据格式，可以看出中间的制表符 \t 和换行符 \n

2.3 先将列表内容的换行符 \n 替换为 ; ，再从指标表 \t 位置进行切割，分开为两个字符。

输出结果：

2.4 然后就可以进行拼接了，使用最简单拼接方式，再将所有内容存到一个对象中

2.5 最后将成果封装写入到一个文件当中

检查电脑存放的路径中是否存在最终输出的文件，大功告成， 11 行代码就完了，简单粗暴又有效。

以上就是本文的全部内容，希望本文的内容对大家的学习或者工作能带来一定的帮助，也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

• Python数据处理（二）：处理 Excel 数据
• 自然语言处理之数据预处理
• Python数据处理(一)：处理 JSON、XML、CSV 三种格式数据
• R|数据处理|因子型数据
• Pandas多维特征数据预处理及sklearn数据不均衡处理相关技术实践-大数据ML样本集案例实战
• 大数据 -- 下一代数据处理技术

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。