snowflake-cloud-data-platform - 有没有人有“最佳实践”与雪花共享单元/集成/回归测试？

Question

我们正在着手一个同时使用 Matillion 和 Snowflake 的项目，并希望进行一些单元/集成/回归测试。

自动化会很棒，但手动也会很好。

我们可以自己发明一些东西（简单）……但最好从其他人的经验中受益。

Answer 1

Indeed there is a lack of possibility to unit/integration testing your models within Matillion. You need some external tools to implement these - we were using a Spring Boot Microservice with the following steps:

1. Setup the Testdata with some Plain SQL scripts via JDBC connection to the underlying Database
2. Run the correspondig job via the Matillion REST API
3. Using JUnit to make assertion and verify the outcome

Answer 2

看起来 Matillion 刚刚在 1.46 版中发布了对象验证。我还没有尝试过，但我想这将允许用户设置单元测试，然后可以在它正在测试的编排作业之后安排或运行单元测试。