热门标签 | HotTags
当前位置:  开发笔记 > 编程语言 > 正文

微信开源组件WCDB漫谈及Demo

代码地址如下:http:www.demodashi.comdemo12422.html前言移动端的数据库选型一直是一个难题,直到前段时间看到了WeMob

代码地址如下:
http://www.demodashi.com/demo/12422.html

前言

移动端的数据库选型一直是一个难题,直到前段时间看到了WeMobileDev(微信前端团队)放出了第三个开源组件-WCDB

WCDB(WeChat DataBase)是微信官方的移动端数据库组件,致力于提供一个高效、易用、完整的移动端存储方案

项目目录

目录

微信团队怎么说

  • 基于SQLCipher

  • WCDB-iOS/Mac

  • WCDB-Android

  • 数据库损坏修复工具WDBRepair

背景

WCDB的出现可以说解决了目前移动端数据库的几个难点

  • 首先在选型上,FMDB的SQL拼接、难以防止的SQL注入;CoreData虽然可以方便ORM,但学习成本高,稳定性堪忧,而且多线程鸡肋;另外基于C语言的sqlite我想用的人也应该不多;除了上述关系型数据库之外然后还有一些其他的Key-Value型数据库,如我用过的Realm,对于ObjC开发者来说,上手倒是没什么难度,但缺点显而易见,需要继承,入侵性强,对于单继承的OC来说这并不理想,而且对于集合类型不完全支持,复杂查询也比较无力。
  • 高效
    • 多线程高并发:WCDB支持多线程读与读、读与写并发执行,写与写串行执行。
    • 批量写操作性能测试:

      批量写ops/sec
      WCDB458000
      FMDB161000
  • 易用 WCDB支持一句代码即可将数据取出并组合为object
    • WINQ(WCDB语言集成查询):通过WINQ,开发者无须为了拼接SQL的字符串而写一大坨胶水代码。

    • ORM(Object Relational Mapping):WCDB支持灵活、易用的ORM。开发者可以很便捷地定义表、索引、约束,并进行增删改查操作。

    • 像这样

      [database getObjectsOfClass:WCTSampleConvenient.classfromTable:tableName where:WCTSampleConvenient.intValue>=10 limit:20];

  • 完整
    • 加密:WCDB提供基于SQLCipher的数据库加密。
    • 损坏修复:WCDB内建了Repair Kit用于修复损坏的数据库。
    • WCDB提供接口直接获取SQL的执行耗时,可用于监控性能。
    • 反注入:WCDB内建了对SQL注入的保护

ORM

在WCDB内,ORM(Object Relational Mapping)是指

  • 将一个ObjC的类,映射到数据库的表和索引;

  • 将类的property,映射到数据库表的字段;

这一过程。通过ORM,可以达到直接通过Object进行数据库操作,省去拼装过程的目的。

WCDB通过内建的宏实现ORM的功能。如下

dDqU6.md.jpg

dDOMd.md.jpg

PS:但我不建议这么做,首先要避免在.h文件中引用,因为你一旦引用,就需要改变.m文件为.mm文件,因为WCDB是基于objectiveC++;你可以使用Category特性将其隔离,在category中引用,并遵守WCTTableCoding协议,使用WCDB_PROPERTY将声明绑定到数据库表的字段。然后在模型类中引用category。达到不印象Controller和View的目的。这点官方wiki中也有提到,使用文件模板来创建。具体请见Demo

对于一个已有的ObjC类,

  • 引用WCDB框架头文件#import ,并定义类遵循WCTTableCoding协议

  • WCDB_PROPERTY用于在头文件中声明绑定到数据库表的字段。

  • WCDB_IMPLEMENTATION,用于在类文件中定义绑定到数据库表的类。同时,该宏内实现了WCTTableCoding。因此,开发者无须添加更多的代码来完成WCTTableCoding的接口

  • WCDB_SYNTHESIZE,用于在类文件中定义绑定到数据库表的字段。
  • WCDB_PRIMARY用于定义主键
  • WCDB_PRIMARY_AUTO_INCREMENT 用于定义自增主键
  • WCDB_INDEX用于定义索引

  • WCDB_UNIQUE用于定义唯一约束

  • WCDB_NOT_NULL用于定义非空约束

CRUD

得益于ORM的定义,WCDB可以直接进行通过object进行增删改查(CRUD)操作。

  • //插入
    Person *man = [[Person alloc] init];
    man.isAutoIncrement = YES;
    man.name = @"Hello, WCDB!";
    man.age = 12;
    return [database insertObject:man into:TABLE_WCDB_NAME];

  • return [database deleteObjectsFromTable:TABLE_WCDB_NAME where:Person.studentId == studentId];

  • Person *person = [[Person alloc] init];
    person.name = content;
    return [database updateRowsInTable:TABLE_WCDB_NAME onProperties:Person.name withObject:person where:Person.studentId == studentId];

  • NSArray * person = [database getObjectsOfClass:Person.class fromTable:TABLE_WCDB_NAME orderBy:Person.localID.order()];

Transaction

WCDB内可通过两种方式执行Transaction(事务),一是runTransaction:接口

dDH3J.md.jpg

这种方式要求数据库操作在一个BLOCK内完成,简单易用。

另一种方式则是获取WCTTransaction对象

dDEbr.md.jpg

WCTTransaction对象可以在类或函数间传递,因此这种方式也更具灵活性。

WINQ

WINQ(WCDB Integrated Query,音'wink'),即WCDB集成查询,是将自然查询的SQL集成到WCDB框架中的技术,基于C++实现。

  • 免去拼接SQL字符串、防注入
  • 借助IDE代码提示和编译器语法检查
  • 对于一个已绑定ORM的类,可以通过className.propertyName的方式,获得数据库内字段的映射
  • WINQ的接口包括但不限于:
    • 一元操作符:+、-、!等
    • 二元操作符&#xff1a;||、&&、&#43;、-、*、/、|、&、<<、>>、<、<&#61;、&#61;&#61;、!&#61;、>、>&#61;等
    • 范围比较&#xff1a;IN、BETWEEN等
    • 字符串匹配&#xff1a;LIKE、GLOB、MATCH、REGEXP等
    • 聚合函数&#xff1a;AVG、COUNT、MAX、MIN、SUM等
    • ...

原理

  • 初衷&#xff0c;适应WCDB&#43;ORM解决SQL字符串的代码冗余和难以被编译器进行语法检查而造成的错误和时间浪费。SQL字符串太容易被注入
  • SQL抽象
  • 封装常用操作&#xff0c;覆盖80%的使用场景
  • 暴露底层接口&#xff0c;适配剩余20%的特殊情况
  • 定义常用操作
  • 特殊场景所暴露的底层接口&#xff0c;应该以什么形式存在&#xff1f;
  • SELECT、DISTINCT、ALL等等大写字母是keyword&#xff0c;属于SQL的保留字。
  • result-column、&#96;&#96;table-or-subquery、expr等等小写字母是token。token可以再进一步地展开其构成的语法规则。
  • 将固定的keyword&#xff0c;封装为函数名&#xff0c;作为连接。
  • 将可以展开的token&#xff0c;封装为类&#xff0c;并在类内实现其不同的组合。
  • 在语法规则中&#xff0c;WHERE、LIMIT等都接受expr作为参数。因此&#xff0c;不管SQL多么复杂&#xff0c;StatementSelect也只接受Expr的参数。而其组合的能力&#xff0c;则在Expr类内实现。

数据库修复

  • 官方的Dump恢复方案
    • 遍历sqlite_master表&#xff0c;将未损坏的表和已损坏的前半部分读取出来将dump 出来的SQL语句逐行执行&#xff0c;最终可以得到一个等效的新DB
      功率约为30%。
    • 第一页就损坏后续无法读取
  • 备份恢复方案
    • COPY
    • 在DB完好的时候执行.dump
    • Backup API&#xff1a; SQLite自身提供的一套备份机制&#xff0c;按 Page 为单位复制到新 DB&#xff0c; 支持热备份。
    • 最终选择Dump &#43; 压缩&#xff0c;恢复成功率达到72%
  • 解析B-tree恢复方案&#xff08;RepairKit&#xff09;
    • 成功率约为78%
  • 不同方案的组合
    • RepairKit 尝试恢复最新数据
    • 备份恢复 遇到错误填补漏缺
    • Dump 最后的尝试

For Android

  • 基本功能
    • 基于SQLCipher的数据库加密
    • 使用连接池实现并发读写
    • 内建 Repair Kit 可用于修复损坏数据
    • 针对占用空间大小优化的数据库备份/恢复功能
    • 日志输出重定向以及性能跟踪接口
    • 内建用于全文搜索的 mmicu FTS3/4 分词器
  • 接入与迁移
    • WCDB for Android 可通过 Maven 或 AAR 包引用&#xff0c;API 接口与 Android SDK 非常相近&#xff0c; 所以将已有的 App 迁移到 WCDB 是相当容易的。
    • Android 接入与迁移
  • 数据库修复
    • Android 数据库修复
  • 从源码编译
    • 你可以使用预编译的依赖库&#xff08;OpenSSL crypto 和 SQLCipher&#xff09;来编译 WCDB for Android&#xff0c; 使用 Gradle 或 Android Studio 皆可。Android Studio 请导入 android 目录作为 Root Project。
    • 编译 WCDB 需要安装 Android NDK r11c 或以上&#xff0c;并在 android/local.properties 上配置好 SDK 与 NDK 路径。Android Studio 一般会帮你配置好。
    • 如果你需要自己编译 OpenSSL 等依赖项&#xff0c;你需要一个 Bash 环境&#xff08;Windows 可以安装 Cygwin 或 MSys&#xff09;、target 为本机的 C 编译器&#xff08;如 GCC&#xff09;、Perl 5 以及 Tcl。之后执行下面命令即可编译依赖项。

参考资料

微信移动端数据库组件WCDB系列&#xff08;一&#xff09;-iOS基础篇

微信移动端数据库组件WCDB系列&#xff08;二&#xff09; — 数据库修复三板斧

微信移动端数据库组件WCDB系列&#xff08;三&#xff09; — WINQ原理篇

微信移动数据库组件WCDB&#xff08;四&#xff09; — Android 特性篇微信开源组件WCDB漫谈及Demo

代码地址如下&#xff1a;
http://www.demodashi.com/demo/12422.html

注&#xff1a;本文著作权归作者&#xff0c;由demo大师代发&#xff0c;拒绝转载&#xff0c;转载需要作者授权




推荐阅读
  • 关于进程的复习:#管道#数据的共享Managerdictlist#进程池#cpu个数1#retmap(func,iterable)#异步自带close和join#所有 ... [详细]
  • 本文探讨了如何通过优化 DOM 操作来提升 JavaScript 的性能,包括使用 `createElement` 函数、动画元素、理解重绘事件及处理鼠标滚动事件等关键主题。 ... [详细]
  • Cookie学习小结
    Cookie学习小结 ... [详细]
  • 本文详细介绍了如何使用Python中的smtplib库来发送带有附件的邮件,并提供了完整的代码示例。作者:多测师_王sir,时间:2020年5月20日 17:24,微信:15367499889,公司:上海多测师信息有限公司。 ... [详细]
  • 在尝试加载支持推送通知的iOS应用程序的Ad Hoc构建时,遇到了‘no valid aps-environment entitlement found for application’的错误提示。本文将探讨此错误的原因及多种可能的解决方案。 ... [详细]
  • 利用 Calcurse 在 Linux 终端高效管理日程与任务
    对于喜爱使用 Linux 终端进行日常操作的系统管理员来说,Calcurse 提供了一种强大的方式来管理日程安排、待办事项及会议。本文将详细介绍如何在 Linux 上安装和使用 Calcurse,帮助用户更有效地组织工作。 ... [详细]
  • 问题描述现在,不管开发一个多大的系统(至少我现在的部门是这样的),都会带一个日志功能;在实际开发过程中 ... [详细]
  • 本文详细介绍了JQuery Mobile框架中特有的事件和方法,帮助开发者更好地理解和应用这些特性,提升移动Web开发的效率。 ... [详细]
  • Requests库的基本使用方法
    本文介绍了Python中Requests库的基础用法,包括如何安装、GET和POST请求的实现、如何处理Cookies和Headers,以及如何解析JSON响应。相比urllib库,Requests库提供了更为简洁高效的接口来处理HTTP请求。 ... [详细]
  • Flutter 核心技术与混合开发模式深入解析
    本文深入探讨了 Flutter 的核心技术,特别是其混合开发模式,包括统一管理模式和三端分离模式,以及混合栈原理。通过对比不同模式的优缺点,帮助开发者选择最适合项目的混合开发策略。 ... [详细]
  • RTThread线程间通信
    线程中通信在裸机编程中,经常会使用全局变量进行功能间的通信,如某些功能可能由于一些操作而改变全局变量的值,另一个功能对此全局变量进行读取& ... [详细]
  • 本文将深入探讨 iOS 中的 Grand Central Dispatch (GCD),并介绍如何利用 GCD 进行高效多线程编程。如果你对线程的基本概念还不熟悉,建议先阅读相关基础资料。 ... [详细]
  • 为什么多数程序员难以成为架构师?
    探讨80%的程序员为何难以晋升为架构师,涉及技术深度、经验积累和综合能力等方面。本文将详细解析Tomcat的配置和服务组件,帮助读者理解其内部机制。 ... [详细]
  • 协程作为一种并发设计模式,能有效简化Android平台上的异步代码处理。自Kotlin 1.3版本引入协程以来,这一特性基于其他语言的成熟理念,为开发者提供了新的工具,以增强应用的响应性和效率。 ... [详细]
  • 本文详细探讨了如何在PHP中有效防止SQL注入攻击,特别是在使用MySQL数据库时。文章通过具体示例和专业建议,帮助开发者理解和应用最佳实践。 ... [详细]
author-avatar
骏马奔腾09
这个家伙很懒,什么也没留下!
PHP1.CN | 中国最专业的PHP中文社区 | DevBox开发工具箱 | json解析格式化 |PHP资讯 | PHP教程 | 数据库技术 | 服务器技术 | 前端开发技术 | PHP框架 | 开发工具 | 在线工具
Copyright © 1998 - 2020 PHP1.CN. All Rights Reserved | 京公网安备 11010802041100号 | 京ICP备19059560号-4 | PHP1.CN 第一PHP社区 版权所有