dataCompare

发表于2023-03-23|更新于2026-02-24

|浏览量:

真正的好人，是那个和所有的大家认为坏的人在一起的人。——纪伯伦

分享一个项目：https://gitee.com/dromara/data-compare

介绍
dataCompare 是一个大数据数据比对和数据探测平台

(1)支持hive表数据比对，mysql、Doris 数据比对，实现自动化配置进行数据比对，避免频繁写sql 进行处理

(2)支持少量配置即可实现数据探测

对比结果展示：

相关推荐

重要的不是知识的数量，而是知识的质量。有些人知道的很多很多，但却不知道最有用的东西——列夫·托尔斯泰多层for循环中如果想要跳出循环，可以使用标签： 12345678910111213List<Integer> list = asList(0, 1, 2);Assertions.assertNotNull(list);outerOfList:for (Integer integer : list) { for (Integer i : list) { System.out.println(i); // 直接跳出最外层循环 break outerOfList; } // 不会执行 System.out.println(integer);} 执行结果

微微怪时间不能保存情绪,保存那一切情绪所曾流连的境界。——《你是人间的四月天》 Apache Linkis 是一款由 Apache 基金会孵化的开源项目，它致力于在上层应用和底层数据计算引擎之间构建一层计算中间件。通过 Linkis，开发者可以轻松连接 Spark、Hive、Flink、Presto 等底层引擎，实现资源的统一管理、计算任务治理、脚本与数据的跨平台互通。它在数据计算平台中的应用广泛，被许多企业用作大数据处理的统一入口。 Linkis 的目标与优势Linkis 的核心目标是解决复杂的计算资源管理问题。传统的大数据系统中，不同引擎之间通常存在高度耦合、复杂的调用关系，而 Linkis 通过提供 REST、WebSocket、JDBC 等标准接口将这些引擎解耦。这样一来，开发者只需面向 Linkis 进行统一操作，而无需直接对接各类底层计算引擎，大幅降低了系统的复杂性和运维成本。 Linkis 的优势包括：多引擎支持：支持 Spark、Hive、Flink、Trino、Python 等多种计算引擎，适用于离线批处理、实时流处理、交互式查询等多种场景。统一管理...

枚举的使用及校验

今天聊聊枚举咋用先定义一个枚举 12345678910111213141516171819202122232425262728293031323334353637383940414243444546package com.ruben.enumration;import com.alibaba.fastjson.annotation.JSONType;import com.fasterxml.jackson.annotation.JsonFormat;/** * @ClassName: GenderEnum * @Description: * @Date: 2020/8/18 19:03 * * * @author: achao<achao1441470436 @ gmail.com> * @version: 1.0 * @since: JDK 1.8 */@JSONType(serializeEnumAsJavaBean = true)@JsonFormat(shape = JsonFormat.Shape.OBJECT)public enum GenderEnum...

一个有点好用的工具类

就算人生是出悲剧，我们要有声有色地演这出悲剧，不要失掉了悲剧的壮丽和快慰。――尼采官网这是apache官方提供的工具类，功能强大标准Java库无法提供用于操纵其核心类的足够方法。Apache Commons Lang提供了这些额外的方法。 Lang为java.lang API提供了大量帮助程序实用程序，特别是字符串操作方法，基本数值方法，对象反射，并发，创建和序列化以及系统属性。此外，它包含对java.util.Date的基本增强，以及一系列专用于帮助构建方法的实用程序，例如hashCode，toString和equals。 api 依赖 123456<dependency> <groupId>org.apache.commons</groupId> <artifactId>commons-lang3</artifactId> &l...

谎言说得越来越真诚，最终连她自己也从中得到了安慰。——《百年孤独》方式很简单，无需引入外部依赖 123456789101112131415161718192021222324import java.nio.charset.StandardCharsets;import java.security.MessageDigest;import java.security.NoSuchAlgorithmException;class Scratch { public static void main(String[] args) { System.out.println(getSha1("我的世界")); } public static String getSha1(String input) { MessageDigest mDigest = null; try { mDigest = MessageDigest.getInsta...

模拟slf4j+logback输出的日志

宿命论是那些缺乏意志力的弱者的借口。——罗曼·罗兰实现 12345678910111213141516171819202122232425262728293031323334353637383940414243package com.ruben.utils;import lombok.extern.slf4j.Slf4j;import java.lang.management.ManagementFactory;import java.lang.management.RuntimeMXBean;import java.time.LocalDateTime;import java.time.format.DateTimeFormatter;/** * @ClassName: LineUtils * @Description: 我还没有写描述 * @Date: 2021/3/17 0017 21:45 * * * @author: <achao1441470436@gmail.com> * @version: 1.0 * @since: JDK 1.8 */@Slf...

阿超

我的名字叫阿超年龄25岁家在北京市职业是软件开发每天最晚也会在八点前回家不抽烟酒浅尝辄止晚上十二点上床保证睡足八个小时睡前写一篇博客再做二十分钟俯卧撑暖身然后再睡觉基本能熟睡到天亮像婴儿一样不留下任何疲劳和压力就这样迎来第二天的早晨健康检查结果也显示我很正常我想说明我是一个不论何时都追求内心平稳的人不拘泥于胜负不纠结于烦恼不树立使我夜不能寐的敌人这就是我在这社会的生活态度

数据加载中