小编Kas*_*ady的帖子

从 Google Dataflow 连接到 CloudSql

从 Google Dataflow 作业连接到 CloudSql 时

public String cnstr = "jdbc:google:mysql://xxx:zzz:yyy/dbname?user=root&password=****";
Connection conn = DriverManager.getConnection(cnstr);
                PreparedStatement st = conn.prepareStatement(selectSql))
Run Code Online (Sandbox Code Playgroud)

我收到此错误:

No suitable driver found for jdbc:google:mysql://
Run Code Online (Sandbox Code Playgroud)

任何帮助?

google-cloud-sql google-cloud-platform google-cloud-dataflow

4
推荐指数
1
解决办法
1115
查看次数

使用Google数据存储区以流模式检查项目

我想将项目插入Google Datastore(如果它们不存在).我写了一个数据流流媒体作业.

工作

static class RawToObjectConverter extends DoFn<String, Entity> {
    @Override
    public void processElement(ProcessContext c) {      

        Query<Entity> query = Query.entityQueryBuilder().kind("Post").filter(PropertyFilter.eq("postid", rq.postid))
                .build();
        QueryResults<Entity> posts = datastore.run(query);

        if (posts == null || !posts.hasNext()) {
            Entity post = Entity.builder(datastore.newKeyFactory().newKey("Post"))                 
                     .set("postid", "1")
                    .set("title", "p1")
                    .build();
            c.output(post);
        }           
    }
}
Run Code Online (Sandbox Code Playgroud)

问题

lines.apply(ParDo.of(new RawToObjectConverter()))
    .apply(DatastoreIO.v1().write().withProjectId(projectid));
Run Code Online (Sandbox Code Playgroud)

apply(PTransform<? super PCollection<Entity>,OutputT>)类型中的方法PCollection<Entity>不适用于参数(DatastoreV1.Write)

我也应该使用com.google.cloud.datastore.Datastorecom.google.datastore.v1.Entity

google-cloud-datastore google-cloud-platform google-cloud-dataflow

1
推荐指数
1
解决办法
165
查看次数