我们希望在具有条件期望的 DataBricks 中实现 Great_Expectations'。根据 GE 的文档https://docs.greatexpectations.io/docs/reference/expectations/conditional_expectations仅适用于 Pandas，默认情况下此参数必须设置为“pandas”，因此需要适当的语法。未来可能会实施其他引擎。
有谁知道它是否可以在与 Pandas API 集成的 Spark 3.2.1 中实现？如果没有，有什么建议可以使用 Spark 3.2.1 处理 DataBricks 中的条件期望吗？