README.zh-CN.md

DataVines

---

数据质量是用于保证数据在集成、处理过程中的数据准确性，也是DataOps的核心组成部分。DataVines 是一个简单易用、支持多种Metric检查的数据质量服务平台。

架构设计

安装

使用Maven3.6.1以及以上版本

$ mvn clean package -Prelease -DskipTests

DataVines 的特性

• 简单易用
• 内置多种类型如Metric、ExpectedType、ResultFormula插件
  • Metric 插件列表
  • ExpectedType 插件列表
  • ResultFormula 插件列表
• 模块化和插件化，易于扩展
  • Engine 插件列表
  • Connector 插件列表
  • Register 插件列表
  • Notification 插件列表
• 支持 Spark 2.x、JDBC 执行引擎

环境依赖

1. Java 运行环境:Jdk8
2. DataVines 支持 JDBC 引擎，如果你的数据量较小或者只是想做功能验证，可以使用 JDBC 引擎
3. 如果您要想要基于 Spark 来运行 DataVines ，那么需要保证你的服务器具有运行 Spark 应用程序的条件

快速入门

请参考官方文档：快速入门指南

开发指南

请参考官方文档：开发指南

如何贡献

如果你想要参与贡献, 请参考官方文档: 贡献指南

项目计划

V1.0.0 RoadMap

欢迎联系

[email protected]

License

DataVines 基于 Apache License 2.0 协议。DataVines 依赖了一些第三方组件，它们的开源协议也为 Apache License 2.0 或者兼容 Apache License 2.0， 此外 DataVines 也直接引用或者修改了 Apache DolphinScheduler、SeaTunnel 以及 Dubbo 中的一些代码，均为 Apache License 2.0 协议的，感谢这些项目的贡献。