用Python简单批量处理数据

栏目: IT技术 · 发布时间: 4年前

近期碰到一个问题,两套系统之间数据同步出了差错,事后才发现的,又不能将业务流程倒退,但是这么多数据手工处理量也太大了,于是决定用 Python 偷个小懒。

1 、首先分析数据。

两边数据库字段的值都是一样,先将这边数据库的数据查询导出,正好是 2 120 多行的数据。那么目标就是拼接成 update from_name set data= where id= 格式,将导出内容中的第 1 列和第 2 列内容放到等号 = 后面即可。

用Python简单批量处理数据

2 、下面开始动手。

前提肯定是要有一个 python 环境的,没有的去下载安装一个也很快。有了环境之后打开编辑器,这里用自带的 IDLE 或者 pycharm 都行,代码简单用哪个都不影响。

2.1 打开文件(注意文件存放路径),默认打开为 r   模式, seek(0) :从起始位置读取内容。

用Python简单批量处理数据

2.2 读取文件中的数据,得到一个列表,用以 for 循环

用Python简单批量处理数据

输出 f1 查看数据格式,可以看出中间的制表符 \t 和换行符 \n

用Python简单批量处理数据

2.3 先将列表内容的换行符 \n 替换为 ; ,再从指标表 \t 位置进行切割,分开为两个字符。

用Python简单批量处理数据

输出结果:

用Python简单批量处理数据

2.4 然后就可以进行拼接了,使用最简单拼接方式,再将所有内容存到一个对象中

用Python简单批量处理数据

2.5 最后将成果封装写入到一个文件当中

用Python简单批量处理数据

检查电脑存放的路径中是否存在最终输出的文件,大功告成, 11 行代码就完了,简单粗暴又有效。


以上就是本文的全部内容,希望本文的内容对大家的学习或者工作能带来一定的帮助,也希望大家多多支持 码农网

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

来自圣经的证明

来自圣经的证明

M.Aigner、G.M.Ziegler / 世界图书出版公司 / 2006-7 / 39.00元

作为一门历史悠久的学问,数学有她自身的文化和美学,就像文学和艺术一样。一方面,数学家们在努力开拓新领域、解决老问题;另一方面他们也在不断地从不同的角度反复学习、理解和欣赏前辈们的工作。的确,数学中有许多不仅值得反复推敲理解,更值得细心品味和欣赏的杰作。有些定理的证明不仅想法奇特、构思精巧,作为一个整体更是天衣无缝。难怪,西方有些虔诚的数学家将这类杰作比喻为上帝的创造。 本书已被译成8种文字。......一起来看看 《来自圣经的证明》 这本书的介绍吧!

JS 压缩/解压工具
JS 压缩/解压工具

在线压缩/解压 JS 代码

URL 编码/解码
URL 编码/解码

URL 编码/解码

UNIX 时间戳转换
UNIX 时间戳转换

UNIX 时间戳转换