shell通过通道批量插入大量数据到redis

栏目: 数据库 · 发布时间: 6年前

内容简介：当我们需要短时间内快速插入大量数据到redis中，就需要一个行之有效的方式。实践发现redis的(

前言：

当我们需要短时间内快速插入大量数据到 redis 中，就需要一个行之有效的方式。

实践发现redis的( Redis Mass Insertion – Redis )是个比较高效的方法。

借助于pipline插入

首先通过简单的脚本生成例如如下的：
```
SET Key0 Value0
SET Key1 Value1
...
SET KeyN ValueN
```
的目标文本文件。
转码

redis-cli中只支持dos格式的换行符 rn ，如果在 Linux 下、Mac下或者Windows下创建的文件，最好都转个码。没有转码的文件,执行会失败。

转换的方法有好多种：

a. 利用todos进行转化。如未进行安装可参考这里。
```
todos set_ins_redis.txt
```
b. 利用vim格式化
```
$ vim set_ins_redis.txt
:set fileformat=dos
:wq
```

最后执行如下命令：

cat set_ins_redis.txt | redis-cli  -p 8244 --pipe

执行成功后会出现如下信息：

All data transferred. Waiting for the last reply...
Last reply received from server.
errors: 0, replies: 10654294

Done

以上所述就是小编给大家介绍的《shell通过通道批量插入大量数据到redis》，希望对大家有所帮助，如果大家有任何疑问请给我留言，小编会及时回复大家的。在此也非常感谢大家对码农网的支持！

查看所有标签

猜你喜欢:

本站部分资源来源于网络，本站转载出于传递更多信息之目的，版权归原作者或者来源机构所有，如转载稿涉及版权问题，请联系我们。

码农书籍

网络空间导论

李良荣、方师师 / 复旦大学出版社 / 2018-6-1 / 38

在互联网蓬勃发展的今天，新闻传播学科该往何处去？在长达半个多世纪的深入研究后，李良荣教授及其团队给出了答案：从“小新闻”走向“大传播”，并撰写了这本开创性的教材：《网络空间导论》。在本书中，互联网被定义为“空间”——持续演进的数字化现实。为了深刻把握网络空间的内涵，本书提供了六个维度的观察：技术应用、组织架构、政治经济、媒介文化、网络素养、安全治理，并以大胆且富有建设性的观点重新定义了新闻......一起来看看《网络空间导论》这本书的介绍吧!

码农工具

XML 在线格式化

在线 XML 格式化压缩工具

HSV CMYK 转换工具

HSV CMYK互换工具