基于Base64编码的反爬虫

1. Base64的用法

# base64的用法
import base64encodestr &＃61; base64.b64encode(&＃39;abcr34r344r&＃39;.encode(&＃39;utf-8&＃39;))
print(encodestr) # b&＃39;YWJjcjM0cjM0NHI&＃61;&＃39;encodestr &＃61; base64.b64encode(&＃39;abcr34r344r&＃39;.encode(&＃39;utf-8&＃39;))
print(str(encodestr, &＃39;utf-8&＃39;)) # YWJjcjM0cjM0NHI&＃61;


以“&＃61;&＃61;”或者“&＃61;”结尾的加密字符串&＃xff0c;往往就是经过Base64加密得来的。如下代码&＃xff1a;

from base64 import b64decodecode &＃61; [&＃39;d3d3Lmh1YXdlaS5jb20&＃61;&＃39;, &＃39;d3d3Lmp1ZWppbi5pbQ&＃61;&＃61;&＃39;]
for c in code:string &＃61; b64decode(c).decode(&＃39;utf8&＃39;)print(string)


执行结果如下&＃xff1a;

www.huawei.com
www.juejin.im


基于Base64实现新的编码规则

Base64编码和解码时都是将原本的8位二进制转成6位的二进制数&＃xff0c;如果我们改动位数&＃xff0c;将其设置为5位或者4位&＃xff0c;就可以实现新的编码规则。代码如下&＃xff1a;

class Custom64:comparison &＃61; {&＃39;0&＃39;: &＃39;A&＃39;, &＃39;1&＃39;: &＃39;B&＃39;, &＃39;2&＃39;: &＃39;C&＃39;, &＃39;3&＃39;: &＃39;D&＃39;, &＃39;4&＃39;: &＃39;E&＃39;,&＃39;5&＃39;: &＃39;F&＃39;, &＃39;6&＃39;: &＃39;G&＃39;, &＃39;7&＃39;: &＃39;H&＃39;, &＃39;8&＃39;: &＃39;I&＃39;, &＃39;9&＃39;: &＃39;J&＃39;,&＃39;10&＃39;: &＃39;K&＃39;, &＃39;11&＃39;: &＃39;L&＃39;, &＃39;12&＃39;: &＃39;M&＃39;, &＃39;13&＃39;: &＃39;N&＃39;, &＃39;14&＃39;: &＃39;O&＃39;,&＃39;15&＃39;: &＃39;P&＃39;, &＃39;16&＃39;: &＃39;Q&＃39;, &＃39;17&＃39;: &＃39;R&＃39;, &＃39;18&＃39;: &＃39;S&＃39;, &＃39;19&＃39;: &＃39;T&＃39;,&＃39;20&＃39;: &＃39;U&＃39;, &＃39;21&＃39;: &＃39;V&＃39;, &＃39;22&＃39;: &＃39;W&＃39;, &＃39;23&＃39;: &＃39;X&＃39;, &＃39;24&＃39;: &＃39;Y&＃39;,&＃39;25&＃39;: &＃39;Z&＃39;, &＃39;26&＃39;: &＃39;a&＃39;, &＃39;27&＃39;: &＃39;b&＃39;, &＃39;28&＃39;: &＃39;c&＃39;, &＃39;29&＃39;: &＃39;d&＃39;,&＃39;30&＃39;: &＃39;e&＃39;, &＃39;31&＃39;: &＃39;f&＃39;, &＃39;32&＃39;: &＃39;g&＃39;, &＃39;33&＃39;: &＃39;h&＃39;, &＃39;34&＃39;: &＃39;i&＃39;,&＃39;35&＃39;: &＃39;j&＃39;, &＃39;36&＃39;: &＃39;k&＃39;, &＃39;37&＃39;: &＃39;l&＃39;, &＃39;38&＃39;: &＃39;m&＃39;, &＃39;39&＃39;: &＃39;n&＃39;,&＃39;40&＃39;: &＃39;o&＃39;, &＃39;41&＃39;: &＃39;p&＃39;, &＃39;42&＃39;: &＃39;q&＃39;, &＃39;43&＃39;: &＃39;r&＃39;, &＃39;44&＃39;: &＃39;s&＃39;,&＃39;45&＃39;: &＃39;t&＃39;, &＃39;46&＃39;: &＃39;u&＃39;, &＃39;47&＃39;: &＃39;v&＃39;, &＃39;48&＃39;: &＃39;w&＃39;, &＃39;49&＃39;: &＃39;x&＃39;,&＃39;50&＃39;: &＃39;y&＃39;, &＃39;51&＃39;: &＃39;z&＃39;, &＃39;52&＃39;: &＃39;0&＃39;, &＃39;53&＃39;: &＃39;1&＃39;, &＃39;54&＃39;: &＃39;2&＃39;,&＃39;55&＃39;: &＃39;3&＃39;, &＃39;56&＃39;: &＃39;4&＃39;, &＃39;57&＃39;: &＃39;5&＃39;, &＃39;58&＃39;: &＃39;6&＃39;, &＃39;59&＃39;: &＃39;7&＃39;,&＃39;60&＃39;: &＃39;8&＃39;, &＃39;61&＃39;: &＃39;9&＃39;, &＃39;62&＃39;: &＃39;&＃43;&＃39;, &＃39;63&＃39;: &＃39;/&＃39;, &＃39;65&＃39;: &＃39;&＃61;&＃39;,}def encode(self, value: str, threshold: int &＃61; 4) -> str:# 对传入的字符进行编码&＃xff0c;并返回编码结果value &＃61; &＃39;&＃39;.join([&＃39;0&＃39; &＃43; bin(ord(t))[2:] for t in value])inputs &＃61; self.shift(value, threshold)result &＃61; &＃39;&＃39;for i in inputs:if i &＃61;&＃61; &＃39;0&＃39; * threshold:# 全为0则视为补位encoding &＃61; 65else:encoding &＃61; 0for key, v in enumerate(i):# 二进制数按权相加得到十进制数val &＃61; int(v) * pow(2, len(i) - 1 - key)encoding &＃43;&＃61; val# 从对照表中取值after &＃61; self.comparison.get(str(encoding))result &＃43;&＃61; afterreturn resultdef decode(self, value: str, threshold: int, group: int &＃61; 8) -> str:"""对传入的字符串解码&＃xff0c;得到原字符"""result &＃61; []coder &＃61; self.str2binary(value, threshold&＃61;threshold)bins &＃61; self.shift(&＃39;&＃39;.join(coder), group)for i in range(len(bins)):binary &＃61; &＃39;&＃39;.join(bins)[i * group: (i &＃43; 1) * group]if binary !&＃61; &＃39;0&＃39; * group:# 如果全为0则视为补位&＃xff0c;无需处理result.append(&＃39;&＃39;.join([chr(i) for i in [int(b, 2) for b in binary.split(&＃39; &＃39;)]]))return &＃39;&＃39;.join(result)def str2binary(self, value: str, threshold: int &＃61; 6) -> list:"""字符串转十进制再转二进制"""result &＃61; []values &＃61; self.str2decimal(value)for i in values:# 判断是否为补位if i &＃61;&＃61; &＃39;65&＃39;:val &＃61; &＃39;0&＃39; * thresholdelse:val &＃61; &＃39;{:0{threshold}b}&＃39;.format(int(i), threshold&＃61;threshold)result.append(val)return result&＃64;staticmethoddef shift(value: str, threshold: int, group: int &＃61; 24) -> list:"""位数转换"""remainder &＃61; len(value) % groupif remainder:# 如果有余数&＃xff0c;则说明需要用0补位padding &＃61; &＃39;0&＃39; * (group - remainder)value &＃43;&＃61; padding# 按照threshold值切割字符result &＃61; [value[i:i &＃43; threshold] for i in range(0, len(value), threshold)]return resultdef str2decimal(self, value: str) -> list:"""使用Base64编码表做对照&＃xff0c;取出字符串对应的十进制数"""keys &＃61; []for t in value:for k, v in self.comparison.items():if v &＃61;&＃61; t:keys.append(k)return keysif __name__ &＃61;&＃61; &＃39;__main__&＃39;:# threshold 的值建议为 4/5/6cus &＃61; Custom64()encode_res &＃61; cus.encode(&＃39;async&＃39;, threshold&＃61;5)decode_res &＃61; cus.decode(encode_res, threshold&＃61;5)print(encode_res)print(decode_res)


执行结果如下&＃xff1a;

MFZXSbTD&＃61;A
async


注意&＃xff1a;threshold的值可以设置成4&＃xff0c;5&＃xff0c;6等。

encode_res &＃61; cus.encode(&＃39;async&＃39;, threshold&＃61;6)
decode_res &＃61; cus.decode(encode_res, threshold&＃61;6)