前写过一篇关于12306信息查询页面的文章,今天重新整理一下,我用的是flask+redis,由于数据十几万都放在mysql里,即使创建索引,我的vps还是有点吃紧。 redis可以做storage和cache,由于这些数据不是很重要,丢了大不了再导入一次,但是我们更在乎的是查询效率,所以redis做storage是很好的选择。 首先把文件里的数据导入redis,raw文件里的数据是以下格式的,文件名为result.txt 导入redis的代码如下:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23
# -*- coding: utf-8 -*- import redis import time start = time.clock() redisClient = redis.StrictRedis(host='localhost',port=6379,db=0,password='redis@123') f = open('result.txt','r') while True: line = f.readline() if not line: break lines = line.replace("\n","").replace("\r\n","").split("----") redisClient.hset(lines[0],"id",lines[0]) redisClient.hset(lines[0],"name",lines[1]) redisClient.hset(lines[0],"password",lines[2]) redisClient.hset(lines[0],"email",lines[3]) redisClient.hset(lines[0],"phone",lines[4]) f.close() end = time.clock() print "used:", end -start
13w数据不到一分半钟。。。 这里我的key都是id也就是***好,其它都是hash的数据结构形式存储的。redis的优点之一就是可以支持丰富的数据结构。登录redis,执行keys *看一下 ok,数据有了,那么开始上flask了,代码如下:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32
# -*- coding: utf-8 -*- from flask import Flask, request, render_template, jsonify, json import redis app = Flask(__name__) @app.route('/api/', methods=['GET']) def scan(id): redis_client = redis.StrictRedis(host='127.0.0.1',port=6379,db=0,password='redis@123') get_key = redis_client.keys(id) if not get_key : json_result = {'id' : None} return json.dumps(json_result,ensure_ascii=False) else: get_key = redis_client.hmget(id,'name','password','email','phone') json_result = {'id' : str(id), 'name' : get_key[0], 'pass' : get_key[1], 'email': get_key[2], 'phone': get_key[3] } return json.dumps(json_result,ensure_ascii=False) @app.route('/') def index(): return render_template('index.html') if __name__ == '__main__': app.run(host='0.0.0.0', port = 8080, debug=True)
我们要查询哪个用户就把传参数给flask封装的api,这就是给接口传参即可。 什么是接口?看下面的说明理解一下。 在浏览器里输入api地址,随便传一个不存在的参数,也就是***号。 接口返回值为null 如果传参是存在的,就会有正确的返回值。 最后就是前端页面展示了,我用的是bootstrap和jquery的ajax插件。代码如下:
1 2 3 4 5 6 7 8 9 10 11 12 13 14 15 16 17 18 19 20 21 22 23 24 25 26 27 28 29 30 31 32 33 34 35 36 37 38 39 40 41 42 43 44 45 46 47 48 49 50 51 52 53 54 55 56 57 58 59 60 61 62 63 64 65 66 67 68 69 70 71 72 73 74 75 76 77 78 79 80 81 82 83 84 85 86 87 88 89 90 91 92 93 94 95 96 97 98 99 100 101 102 103 104 105 106 107 108 109 110 111 112 113 114 115 116 117 118 119 120 121 122 123 124 125 126 127 128 129 130
本系统程序仅为用户确认个人信息是否已经泄露,切勿用作非法目的,否则一切后果自负! 请输入关键字:
type="text" name="id" id="keyword" class="form-control"> 查找一下
好了,启动webserver,看看页面查询情况: 输入一个***号,如果存在,页面就会返回 如果不存在,js就会alert一个弹框。 是不是还比较简单,我的好友强子想了解一下如何构建,所以分享一下。。。