聊聊base64编码

栏目: IT技术 · 发布时间: 4年前

内容简介:二进制的数据,每个字符的取值范围都是比如,我用文本编辑器vim打开一张jpeg图片,会发现内容是乱码。以下是头两行数据:我在vim下输入

二进制的数据,每个字符的取值范围都是 [0, 255] ,作为ascii码解析时,只有部分可打印。

比如,我用文本编辑器vim打开一张jpeg图片,会发现内容是乱码。以下是头两行数据:

ÿØÿà^@^PJFIF^@^A^A^@^@^A^@^A^@^@ÿÛ^@C^@^F^D^E^F^E^D^F^F^E^F^G^G^F^H
^P

我在vim下输入 :%!xxd ,可以查看二进制数据对应的十六进值。以下是头两行数据:

00000000: ffd8 ffe0 0010 4a46 4946 0001 0100 0001  ......JFIF......
00000010: 0001 0000 ffdb 0043 0006 0405 0605 0406  .......C........

注意,下面的两行和上面的两行内容长度不一定是相同的。上面的数据是遇到ascii码为换行时换行,下面的数据是每16个字节换行。

比较上下两份数据,可以看到 JFIF 在上面也打印了,在下面的右半部分也打印了。说明他们的数据源确实是同一份,只是展示方式不同。

显然,如果我想肉眼看这份二进制数据,或者说作为文本拷贝这份数据,16进制的格式要优于二进制ascii码格式。

但是,16进制表示法,需要两个字节才能表示表示原始数据的一个字节。比如 4a464946 表示 JFIF 。即大小增加了一倍。

有点大?于是,有人发明了base64算法。它保持了编码后可打印特性的同时,大小只增加 1/3

base64算法原理

聊聊base64编码

base64将原始二进制数据每三个字节(也即24位)看成一个单元,然后将24位按每6位进行一次切割,切割成4个字节。切割后每个字节的范围是 [0, 63]

由于 [0, 63] 的ascii码也并不都是可打印的,于是将 [0, 63] 再一一对应换算成一个可打印的字符。

标准文档 RFC 4648 对该映射关系定义如下:

ABCDEFGHIJKLMNOPQRSTUVWXYZabcdefghijklmnopqrstuvwxyz0123456789+/"

也即0对应A,1对应B,63对应 /

换算之后,三个字节就变成可打印的四个字节的内容了。

解码方的逻辑,先将每个可打印的字符按刚才的映射表反算出对应的值。然后每4个字节看成一个单位,按位运算还原出原始的3个字节。比如:解码前第1个字节的低6位作为解码后第1个字节的高6位,解码前第2个字节的低6位的前2位作为解码后第1个字节的低2位,这样就得到了解码后的第1个字节。后续依次按顺序推算。

还有一个问题,原始数据长度如果不是3的倍数怎么办?

那么无非是两种情况,一种是最后剩1个字节,另一种是剩两个字节:

==
=

即base64保证了编码后的字符串长度为4的倍数。

作为url参数时有什么问题

有的人会把二进制数据用base64编码后,放入url的参数中,这么做有一个问题,base64编码后可能会出现 +/= 三个字符,而这三个字符会影响到整个url串的解析。

举个例子,url串 https://pengrl.com/all?key=value ,如果将其中的value设置成 1/2= ,则url串变成 https://pengrl.com/all?key=1/2= 。其中的 /= 是不是有点傻傻分不清楚呢?

那么如何解决呢?

编码后的 +/ 两个符号来源于上面给出的那张映射表。于是标准文档 RFC 4648 中给出另一张映射表,将其中的 + 替换成了中划线 -/ 替换成了下划线 _

这里额外说一句,base64并不适合用来做文本加密,因为算法是公开的,并且它只是一种简单的查表映射,有经验的web开发者,甚至看到末尾的 = 都能猜到是base64编码。即使编码和解码都使用自定义的映射表,根据文本规律,也很容易破解出映射表。

剩下 = ,上面也说过,是由于原始数据长度不是3的倍数填充得到的,解决方法也很简单,编码时不填充,解码时剩余的不够4字节的数据按顺序解就好。

上面的两种做法,都需要保证,编码端和解码端是能对上号的。

base64主要还是对二进制做可打印编码,如果是处理url参数,最好还是使用urlencode。urlencode是啥,下回再聊。

原文链接: https://pengrl.com/p/3487/

原文出处: yoko blog ( https://pengrl.com )

原文作者: yoko ( https://github.com/q191201771 )

版权声明:本文欢迎任何形式转载,转载时完整保留本声明信息(包含原文链接、原文出处、原文作者、版权声明)即可。本文后续所有修改都会第一时间在原始地址更新。

聊聊base64编码


以上所述就是小编给大家介绍的《聊聊base64编码》,希望对大家有所帮助,如果大家有任何疑问请给我留言,小编会及时回复大家的。在此也非常感谢大家对 码农网 的支持!

查看所有标签

猜你喜欢:

本站部分资源来源于网络,本站转载出于传递更多信息之目的,版权归原作者或者来源机构所有,如转载稿涉及版权问题,请联系我们

人月神话(40周年中文纪念版)

人月神话(40周年中文纪念版)

(美) 布鲁克斯(Brooks, F. P.) 著 / UML China翻译组,汪颖 译 / 清华大学出版社 / 2015-4-1 / 68.00元

在软件领域,很少能有像《人月神话》一样具有深远影响力和畅销不衰的著作。Brooks博士为人们管理复杂项目提供了最具洞察力的见解,既有很多发人深省的观点,又有大量软件工程的实践。本书内容来自Brooks博士在IBM公司SYSTEM/360家族和OS/360中的项目管理经验,该项目堪称软件开发项目管理的典范。该书英文原版一经面世,即引起业内人士的强烈反响,后又译为德、法、日、俄、中、韩等多种文字,全球......一起来看看 《人月神话(40周年中文纪念版)》 这本书的介绍吧!

随机密码生成器
随机密码生成器

多种字符组合密码

html转js在线工具
html转js在线工具

html转js在线工具

HSV CMYK 转换工具
HSV CMYK 转换工具

HSV CMYK互换工具