聊聊怎么实现通用ORM?(附设计思路)
本篇文章主要是结合我之前面试的各种经历和实战开发中遇到的问题解决经验整理的,希望这篇《聊聊怎么实现通用ORM?(附设计思路)》对你有很大帮助!欢迎收藏,分享给更多的需要的朋友学习~
介绍
我们通用的ORM,基本模式都是想要脱离数据库的,几乎都在编程语言层面建立模型,由程序去与数据库打交道。虽然脱离了数据库的具体操作,但我们要建立各种模型文档,用代码去写表之间的关系等等操作,让初学者一时如坠云雾。我的想法是,将关系数据库拥有的完善设计工具之优势,来实现数据设计以提供结构信息,让json对象自动映射成为标准的SQL查询语句。只要我们理解了标准的SQL语言,我们就能够完成数据库查询操作。
依赖关系
本项目依赖 本人的 另一个项目 Zjson,此项目提供简洁、方便、高效的Json库。该库使用方便,是一个单文件库,只需要下载并引入项目即可。具体信息请移步 gitee-Zjson 或 github-Zjson 。
设计思路
ZORM 数据传递采用json来实现,使数据标准能从最前端到最后端达到和谐统一。此项目目标,不但在要C++中使用,还要作为动态链接库与node.js结合用使用,因此希望能像javascript一样,简洁方便的操作json。所以先行建立了zjson库,作为此项目的先行项目。设计了数据库通用操作接口,实现与底层实现数据库的分离。该接口提供了CURD标准访问,以及批量插入和事务操作,基本能满足平时百分之九十以上的数据库操作。项目基本目标,支持Sqlite3,Mysql,Postges三种关系数据库,同时支持windows、linux和macOS。
项目进度
现在已经实现了sqlit3与mysql的所有功能,postgres也做了技术准备。
我选择的技术实现方式,基本上是最底层高效的方式。sqlit3 - sqllit3.h(官方的标准c接口);mysql - c api (MySQL Connector C 6.1);postgres - pqxx 。
任务列表:
[x] Sqlite3 实现
[x] linux
[x] windows
[x] macos
[x] Mysql 实现
[x] linux
[x] windows
[x] macos
[x] Pstgre 实现
[x] linux
[ ] windows
[x] macos
数据库通用接口
应用类直接操作这个通用接口,实现与底层实现数据库的分离。该接口提供了CURD标准访问,以及批量插入和事务操作,基本能满足平时百分之九十以上的数据库操作。
DbLogClose : sql 查询语句显示开关
parameterized : 是否使用参数化查询
Sqlite3:
page, size, sort, 分页排序
在sqlit3与mysql中这比较好实现,limit来分页是很方便的,排序只需将参数直接拼接到order by后就好了。
查询示例:
ins, 数据库表单字段in查询,一字段对多个值,例:
查询示例:
Json p;
p.addSubitem("ins", "age,11,22,36");
(new DbBase(...))->select("users", p);
生成sql: SELECT * FROM users WHERE age in ( 11,22,26 )
ors, 数据库表多字段精确查询,or连接,多个字段对多个值,例:
查询示例:
count, 数据库查询函数count,行统计,例:
查询示例:
Json p;
p.addSubitem("count", "1,total");
(new DbBase(...))->select("users", p);
生成sql: SELECT *,count(1) as total FROM users
sum, 数据库查询函数sum,字段求和,例:
查询示例:
一个字段一个操作,示例:
查询示例:
Json p;
p.addSubitem("age", ">,10");
(new DbBase(...))->select("users", p);
生成sql: SELECT * FROM users WHERE age> 10
一个字段二个操作,示例:
查询示例:
Json p;
p.addSubitem("age", ">=,10,select("users", p);
生成sql: SELECT * FROM users WHERE age>= 10 and age
使用"="去除字段的fuzzy影响,示例:
查询示例:
Json p;
p.addSubitem("age", "=,18");
p.addSubitem("username", "john");
p.addSubitem("fuzzy", "1");
(new DbBase(...))->select("users", p);
生成sql: SELECT * FROM users WHERE age= 18 and username like '%john%'
具体使用方法,请参看uint test。
单元测试
有完整功能的单元测试用例,请参见tests目录下的测试用例。
测试用例运行结果样例
项目地址
https://gitee.com/zhoutk/zorm
或
https://github.com/zhoutk/zorm
运行方法
该项目在vs2019, gcc7.5, clang12.0下均编译运行正常。
git clone https://github.com/zhoutk/zorm
cd zorm
cmake -Bbuild .
---windows
cd build && cmake --build .
---linux & macos
cd build && make
run zorm or ctest
注在linux下需要先行安装mysql开发库, 并先手动建立数据库 dbtest。
在ubuntu下的命令是: apt install libmysqlclient-dev
相关项目
会有一系列项目出炉,网络服务相关,敬请期待...
今天带大家了解了MySQL、postgresql、ORM、C++、sqlite3的相关知识,希望对你有所帮助;关于数据库的技术知识我们会一点点深入介绍,欢迎大家关注golang学习网公众号,一起学习编程~
石原子科技正式加入科技制造开源社区!
- 上一篇
- 石原子科技正式加入科技制造开源社区!
- 下一篇
- 详解centos7安装percona xtrabackup以及备份恢复的操作方法
-
- 坚定的期待
- 这篇文章内容真及时,太全面了,很有用,收藏了,关注up主了!希望up主能多写数据库相关的文章。
- 2023-05-05 11:57:26
-
- 俊秀的灯泡
- 真优秀,一直没懂这个问题,但其实工作中常常有遇到...不过今天到这,看完之后很有帮助,总算是懂了,感谢博主分享文章内容!
- 2023-03-04 20:25:42
-
- 数据库 · MySQL | 19小时前 | MySQL · DDL · InnoDB · mysql innodb ALGORITHM=INSTANT Instant DDL
- Instant DDL 表结构限制怎么配置或排查
- 486浏览 收藏
-
- 数据库 · MySQL | 21小时前 | MySQL · 字符集 · REGEXP_LIKE · Collation · mysql 中文 排序规则 utf8mb4 REGEXP_LIKE
- REGEXP_LIKE 中文排序规则怎么配置或排查
- 169浏览 收藏
-
- 数据库 · MySQL | 22小时前 | MySQL · JSON_TABLE · 嵌套数组 · JSON_TABLE MySQL JSON
- JSON_TABLE 嵌套数组怎么配置或排查
- 181浏览 收藏
-
- 数据库 · MySQL | 23小时前 | MySQL · CTE · SQL排错 · mysql cte_max_recursion_depth 递归 CTE
- 递归 CTE 终止条件怎么配置或排查
- 338浏览 收藏
-
- 数据库 · MySQL | 1天前 | MySQL · 索引 · Invisible Index ·
- Invisible Index 灰度验证怎么配置或排查
- 156浏览 收藏
-
- 前端进阶之JavaScript设计模式
- 设计模式是开发人员在软件开发过程中面临一般问题时的解决方案,代表了最佳的实践。本课程的主打内容包括JS常见设计模式以及具体应用场景,打造一站式知识长龙服务,适合有JS基础的同学学习。
- 543次学习
-
- GO语言核心编程课程
- 本课程采用真实案例,全面具体可落地,从理论到实践,一步一步将GO核心编程技术、编程思想、底层实现融会贯通,使学习者贴近时代脉搏,做IT互联网时代的弄潮儿。
- 516次学习
-
- 简单聊聊mysql8与网络通信
- 如有问题加微信:Le-studyg;在课程中,我们将首先介绍MySQL8的新特性,包括性能优化、安全增强、新数据类型等,帮助学生快速熟悉MySQL8的最新功能。接着,我们将深入解析MySQL的网络通信机制,包括协议、连接管理、数据传输等,让
- 500次学习
-
- JavaScript正则表达式基础与实战
- 在任何一门编程语言中,正则表达式,都是一项重要的知识,它提供了高效的字符串匹配与捕获机制,可以极大的简化程序设计。
- 487次学习
-
- 从零制作响应式网站—Grid布局
- 本系列教程将展示从零制作一个假想的网络科技公司官网,分为导航,轮播,关于我们,成功案例,服务流程,团队介绍,数据部分,公司动态,底部信息等内容区块。网站整体采用CSSGrid布局,支持响应式,有流畅过渡和展现动画。
- 485次学习
-
- H2O EvalGPT
- H2O EvalGPT是H2O.ai推出的开源LLM评估平台,提供详细的大模型性能排行榜、行业特定基准测试及A/B测试功能,助您快速选择最适合项目的高性能大语言模型。
- 125次使用
-
- LMArena
- LMArena是加州大学伯克利分校推出的AI模型匿名评测平台。通过盲测投票机制,用户可对比不同大模型回答并生成实时排行榜,助力开发者优化模型及用户选择最佳AI工具。
- 45次使用
-
- HELM
- 深入了解斯坦福推出的HELM(Holistic Evaluation of Language Models)大模型评测体系。本文解析其核心功能、安装配置步骤及应用场景,涵盖准确性、公平性、鲁棒性等多维度指标,助力开发者全面优化语言模型性能。
- 11次使用
-
- OpenCompass
- OpenCompass是上海AI实验室推出的开源大模型评测平台,提供CompassKit、CompassHub和CompassRank三大核心组件,支持LLM及多模态模型的一站式标准化评估与排行榜查询。
- 66次使用
-
- AGI-Eval
- AGI-Eval是由上海交大等高校联合发布的大模型评测社区,提供公正透明的LLM能力榜单、多领域评测集及Data Studio数据服务,助力AI模型性能评估与NLP科研开发。
- 42次使用
-
- MySQL 明明加了索引,为什么查询还是很慢?先查这 6 个点
- 2026-06-27 374浏览
-
- golang MySQL实现对数据库表存储获取操作示例
- 2022-12-22 499浏览
-
- golang 基于 mysql 简单实现分布式读写锁
- 2023-01-07 384浏览
-
- Golang连接并操作PostgreSQL数据库基本操作
- 2023-01-12 240浏览
-
- 详解如何利用GORM实现MySQL事务
- 2023-01-07 184浏览


