ZStack的SQL相关内容踩坑一览

1. org.zstack.core.db.SQL存在的问题

String sql = "SELECT snapshot.uuid" +
                " FROM BackupDBSnapshotVO AS snapshot" +
                " LEFT JOIN" +
                " (SELECT volumeSnapshotUuid, COUNT(volumeUuid) AS copyCount" +
                " FROM VolumeSnapshotCloneVO" +
                " GROUP BY volumeSnapshotUuid) AS clone" +
                " ON snapshot.volumeSnapshotUuid = clone.volumeSnapshotUuid" +
                " WHERE snapshot.importance = :importance" +
                " AND snapshot.backupDBUuid = :backupDBUuid" +
                " AND clone.copyCount is null" +
                " ORDER BY snapshot.backupDate LIMIT 1";
        List<String> auschwitz = SQL.New(sql)
                .param("importance", BackupDBSnapshotImportance.Normal.toString())
                .param("backupDBUuid", this.getTargetResourceUuid())
                .list();

以上是利用SQL类来执行一个比较复杂的SQL语句, 该语句包含了函数, 子查询, 分组, 排序, 左外连接. 实际执行的时候会报错. 大抵意思是"我Hibernate就是饿死, 死外边, 从这里跳下去, 也不认你这个语法!"
平时写写SELECT FROM这样简单的SQL语句的时候, SQL类君还是比较正常的, 那么这次抽风的问题是在哪呢?
直接将报错原因丢去百度, 看到一句"JPQL语句和SQL原生语句有些不同, 复杂的语法会导致Hibernate无法解析", 根本原因get.
下一步查看源代码, 在SQL类的构造函数中看到这玩意:

    private SQL(String sql) {
        this.sql = sql;
        query = dbf.getEntityManager().createQuery(this.sql);
    }

点击createQuery进去一探究竟.

/**
     * Create an instance of <code>Query</code> for executing a
     * Java Persistence query language statement.
     * @param qlString a Java Persistence query string
     * @return the new query instance
     * @throws IllegalArgumentException if the query string is
     * found to be invalid
     */
    public Query createQuery(String qlString);

根据介绍可以得知该方法是创建一个JPQL语句的查询实例, 那么不难想到这周围肯定会有创建原生SQL语句的查询实例, 果然:

    /**
     * Create an instance of <code>Query</code> for executing
     * a native SQL statement, e.g., for update or delete.
     * @param sqlString a native SQL query string
     * @return the new query instance
     */
    public Query createNativeQuery(String sqlString);

由此, 根据此方法对一开始的查询语句进行改造:

List<String> auschwitz = dbf.getEntityManager().createNativeQuery(sql)
                .setParameter("importance", BackupDBSnapshotImportance.Normal.toString())
                .setParameter("backupDBUuid", this.getTargetResourceUuid())
                .getResultList();

Hibernate: "真香".

2. *.sql文件中Timestamp类型隐藏的坑点

由于ZStack所应用的数据库依然是5.5.56版本的MariaDB(当前稳定版本是10.3.9), 会有很多潜在的问题.

2.1 建表报错

CREATE TABLE `zstack`.`CornHubVO` (
 `uuid` varchar(32) NOT NULL UNIQUE COMMENT 'uuid',
 `oldestTime` timestamp,
 `latestTime` timestamp,
 `lastOpDate` timestamp ON UPDATE CURRENT_TIMESTAMP,
 `createDate` timestamp,
  PRIMARY KEY (`uuid`),
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

上表是一个虚拟的VO, 只留有必要的字段. 这种表创建语句乍看没有问题, 实际在进行测试的时候:

SQL State : HY000
Error Code : 1293
Message : Incorrect table definition; there can be only one TIMESTAMP column with CURRENT_TIMESTAMP in DEFAULT or ON UPDATE clause
Location : /root/zstack/conf/tools/flyway-3.2.1/sql/V2.3.1.1.1__schema.sql (/root/zstack/conf/tools/flyway-3.2.1/sql/V2.3.1.1.1__schema.sql)
Line : 1

Surprise? 为什么我们只有一个Timestamp设定了CURRENT_TIMESTAMP, 却依然报错? 这其实是Mysql 5.7版本前的一个Bug.
当同时满足:

  1. 表中有1个以上的Timestamp字段,
  2. 其中一个Timestamp字段X设定了DEFAULT CURRENT_TIMESTAMP或ON UPDATE CURRENT_TIMESTAMP
  3. X字段之前有别的Timestamp

三种条件时, 就会触发该Bug.
由于MariaDB 10 才对应到Mysql 5.6, 因此在该版本中, 这个Bug显然是存在的.
介于此, 在不升级版本的情况下, 解决办法有两种:

  1. 给X以外的所有Timestamp设定默认值, 例如:
CREATE TABLE `zstack`.`CornHubVO` (
 `uuid` varchar(32) NOT NULL UNIQUE COMMENT 'uuid',
 `oldestTime` timestamp NOT NULL DEFAULT '0000-00-00 00:00:00',
 `latestTime` timestamp NOT NULL DEFAULT  '0000-00-00 00:00:00',
 `lastOpDate` timestamp ON UPDATE CURRENT_TIMESTAMP,
 `createDate` timestamp,
  PRIMARY KEY (`uuid`),
) ENGINE=InnoDB DEFAULT CHARSET=utf8;
  1. 将X以外所有的Timestamp置于X的后面:
 `uuid` varchar(32) NOT NULL UNIQUE COMMENT 'uuid',
 `lastOpDate` timestamp ON UPDATE CURRENT_TIMESTAMP,
 `createDate` timestamp,
 `oldestArchiveTime` timestamp,
 `latestArchiveTime` timestamp,
  PRIMARY KEY (`uuid`),

2.2 Timestamp的DEFAULT及(NOT) NULL关键字的特殊行为

CREATE TABLE `zstack`.`CornHubVO` (
 `uuid` varchar(32) NOT NULL UNIQUE COMMENT 'uuid',
 `oldestTime` timestamp NULL DEFAULT '0000-00-00 00:00:00',
 `latestTime` timestamp NOT NULL DEFAULT '0000-00-00 00:00:00',
 `lastOpDate` timestamp ON UPDATE CURRENT_TIMESTAMP,
 `createDate` timestamp,
  PRIMARY KEY (`uuid`),
) ENGINE=InnoDB DEFAULT CHARSET=utf8;

oldestTime设置为NULL, latestTime设置为NOT NULL, 两个字段都设置了默认值
实际插入数据(所有的时间戳字段均未主动赋值)后表中数据如下:

uuid: 746a876edb5f45b3baa3bdf615061393
oldestTime: NULL
latestTime: 2018-08-23 21:04:37
lastOpDate: 2018-08-23 21:04:38
createDate: 2018-08-23 21:04:37
  1. 可以看出, oldestTime和latestTime默认值本来应该是1970-1-1 08:00:00这样的时间, 实际上没有卵用
  2. 设定为NULL的oldestTime没有被赋值
  3. lastOpDate, createDate和设定为NOT NULL的latestTime一样都被赋值为当前时间了(虽然这个赋值行为也在意料之外)

总结:

  1. Timestamp的Default关键字实际上没有卵用
  2. 当Timestamp设定为NULL时, 插入数据不赋值的情况下此列值为NULL
  3. 当Timestamp设定为NOT NULL或不设定的时候, 插入数据不赋值的情况下, 此列会赋值为当前的时间
最后编辑于
©著作权归作者所有,转载或内容合作请联系作者
  • 序言:七十年代末,一起剥皮案震惊了整个滨河市,随后出现的几起案子,更是在滨河造成了极大的恐慌,老刑警刘岩,带你破解...
    沈念sama阅读 218,386评论 6 506
  • 序言:滨河连续发生了三起死亡事件,死亡现场离奇诡异,居然都是意外死亡,警方通过查阅死者的电脑和手机,发现死者居然都...
    沈念sama阅读 93,142评论 3 394
  • 文/潘晓璐 我一进店门,熙熙楼的掌柜王于贵愁眉苦脸地迎上来,“玉大人,你说我怎么就摊上这事。” “怎么了?”我有些...
    开封第一讲书人阅读 164,704评论 0 353
  • 文/不坏的土叔 我叫张陵,是天一观的道长。 经常有香客问我,道长,这世上最难降的妖魔是什么? 我笑而不...
    开封第一讲书人阅读 58,702评论 1 294
  • 正文 为了忘掉前任,我火速办了婚礼,结果婚礼上,老公的妹妹穿的比我还像新娘。我一直安慰自己,他们只是感情好,可当我...
    茶点故事阅读 67,716评论 6 392
  • 文/花漫 我一把揭开白布。 她就那样静静地躺着,像睡着了一般。 火红的嫁衣衬着肌肤如雪。 梳的纹丝不乱的头发上,一...
    开封第一讲书人阅读 51,573评论 1 305
  • 那天,我揣着相机与录音,去河边找鬼。 笑死,一个胖子当着我的面吹牛,可吹牛的内容都是我干的。 我是一名探鬼主播,决...
    沈念sama阅读 40,314评论 3 418
  • 文/苍兰香墨 我猛地睁开眼,长吁一口气:“原来是场噩梦啊……” “哼!你这毒妇竟也来了?” 一声冷哼从身侧响起,我...
    开封第一讲书人阅读 39,230评论 0 276
  • 序言:老挝万荣一对情侣失踪,失踪者是张志新(化名)和其女友刘颖,没想到半个月后,有当地人在树林里发现了一具尸体,经...
    沈念sama阅读 45,680评论 1 314
  • 正文 独居荒郊野岭守林人离奇死亡,尸身上长有42处带血的脓包…… 初始之章·张勋 以下内容为张勋视角 年9月15日...
    茶点故事阅读 37,873评论 3 336
  • 正文 我和宋清朗相恋三年,在试婚纱的时候发现自己被绿了。 大学时的朋友给我发了我未婚夫和他白月光在一起吃饭的照片。...
    茶点故事阅读 39,991评论 1 348
  • 序言:一个原本活蹦乱跳的男人离奇死亡,死状恐怖,灵堂内的尸体忽然破棺而出,到底是诈尸还是另有隐情,我是刑警宁泽,带...
    沈念sama阅读 35,706评论 5 346
  • 正文 年R本政府宣布,位于F岛的核电站,受9级特大地震影响,放射性物质发生泄漏。R本人自食恶果不足惜,却给世界环境...
    茶点故事阅读 41,329评论 3 330
  • 文/蒙蒙 一、第九天 我趴在偏房一处隐蔽的房顶上张望。 院中可真热闹,春花似锦、人声如沸。这庄子的主人今日做“春日...
    开封第一讲书人阅读 31,910评论 0 22
  • 文/苍兰香墨 我抬头看了看天上的太阳。三九已至,却和暖如春,着一层夹袄步出监牢的瞬间,已是汗流浃背。 一阵脚步声响...
    开封第一讲书人阅读 33,038评论 1 270
  • 我被黑心中介骗来泰国打工, 没想到刚下飞机就差点儿被人妖公主榨干…… 1. 我叫王不留,地道东北人。 一个月前我还...
    沈念sama阅读 48,158评论 3 370
  • 正文 我出身青楼,却偏偏与公主长得像,于是被迫代替她去往敌国和亲。 传闻我的和亲对象是个残疾皇子,可洞房花烛夜当晚...
    茶点故事阅读 44,941评论 2 355

推荐阅读更多精彩内容