dataCompare

发表于2023-03-23|更新于2026-02-24

|浏览量:

真正的好人，是那个和所有的大家认为坏的人在一起的人。——纪伯伦

分享一个项目：https://gitee.com/dromara/data-compare

介绍
dataCompare 是一个大数据数据比对和数据探测平台

(1)支持hive表数据比对，mysql、Doris 数据比对，实现自动化配置进行数据比对，避免频繁写sql 进行处理

(2)支持少量配置即可实现数据探测

对比结果展示：

相关推荐

Zero date value prohibited

世界上最大的谎言就是你不行。——《垫底辣妹》报Zero date value prohibited错的时候在连接mysql的URL上加入&zeroDateTimeBehavior=convertToNull即可原因是因为我们存入数据库中的date类型字段有为0的数据加了此参数，即可让mysql处理的时候，把为0的日期当作null处理

mybatis的call-setters-on-nulls

一个结婚以后的朋友，无论如何不是从前的朋友了，男人的灵魂现在羼入了一些女人的灵魂。——罗曼·罗兰我们在使用org.apache.ibatis.session.SqlSession#selectMap(java.lang.String, java.lang.String) 时会遇到字段值为null的时候，这个时候返回的map会丢失掉对应的entry节点只需要配置mybatis.configuration.call-setters-on-nulls为true即可保留对应的entry

为什么总说不要循环调用dao

我要让全世界都记住我的温柔。——曼德拉上次咱们测试过了单表多次查询和连表一次查询的性能比较这次咱们又抽了点时间进行了一次循坏调用dao查询性能测试同样是那一百万条数据，最后测试结果出乎意料 123456789101112131415@Testpublic void cycleTest() { long startTime = System.nanoTime(); List<Film> films = filmMapper.selectList(Wrappers.lambdaQuery()); List<Map<String, Object>> collect = films.stream().map(film -> { Language language = languageMapper.selectById(film.getLanguageId()); Language language1 = languageMapper.selectById(film.ge...

javadoc @apiNote、@implSpe、@implNote不识别问题

在逆风里把握方向，做暴风雨中的海燕，做不改颜色的孤星。——余光中我们使用maven-javadoc-plugin进行生成javadoc时，发现没有识别jdk8新标签解决方式见：https://github.com/nipafx/demo-javadoc-8-tags/blob/master/pom.xml?ts=4#L110-L133 手动配置tags即可 1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677787980<build> <plugins>  <plugin> <groupId>org.apache.maven.plugins</groupId> ...

sentinel流控降级与熔断

人们因为能忘却，所以自己能渐渐的脱离了受过的苦痛，也因为能忘却，所以照样得再犯前人的错误。——鲁迅引入依赖 1234567891011<dependency> <groupId>com.alibaba.cloud</groupId> <artifactId>spring-cloud-starter-alibaba-sentinel</artifactId></dependency><dependency> <groupId>com.alibaba.csp</groupId> <artifactId>sentinel-transport-simple-http</artifactId> <version>1.7.1</version></depen...

十二时辰与现代时间的互转（精确版）

内抑怒气，外制愠色，处世待人，心平气和。——圣德太子最新版优化了一版，支持了宋以后把十二时辰中每个时辰平分为初、正两部分，这样，子初、子正、丑初、丑正……依次下去，恰为二十四时辰，同现在一天二十四小时时间一致 hutool-core/src/main/java/org/dromara/hutool/core/date/chinese/ShiChen.java · dromara/hutool - Gitee.com 1234567891011121314151617181920212223242526272829303132333435363738394041424344454647484950515253545556575859606162636465666768697071727374757677787980818283848586878889909192939495969798991001011021031041051061071081091101111...

阿超

我的名字叫阿超年龄25岁家在北京市职业是软件开发每天最晚也会在八点前回家不抽烟酒浅尝辄止晚上十二点上床保证睡足八个小时睡前写一篇博客再做二十分钟俯卧撑暖身然后再睡觉基本能熟睡到天亮像婴儿一样不留下任何疲劳和压力就这样迎来第二天的早晨健康检查结果也显示我很正常我想说明我是一个不论何时都追求内心平稳的人不拘泥于胜负不纠结于烦恼不树立使我夜不能寐的敌人这就是我在这社会的生活态度

数据加载中