使用Objectify Appengine存储大blob

Question

我有这个类,我想使用Objectify持久化,这个类将表示大于1MB的数据,因此有一个Blob对象列表,它表示存储的字节数组的片段,其大小小于1MB:

@Entity
public class BigBlob {

    @Id
    private Long id;
    public static final int FRAGMENT_LIMIT = 777 * 1024;
    @Serialized
    private List<Blob> fragments = new ArrayList<Blob>();

    ...

}

然而,"片段"是@Serialized,它将使这个BigBlob类/对象的大小大于1MB.

导致此错误:

com.google.apphosting.api.ApiProxy$RequestTooLargeException: The request to API call datastore_v3.Put() was too large.

如果我使用@Embedded注释,我会收到此错误:

Cannot place array or collection properties inside @Embedded arrays or collections

如何确保"片段"作为单独的实体存储？

顺便说一下,我已经有了字节分块逻辑,它会切断整个字节数组并将片段放入其中List,Blob因此这个问题与如何切割字节无关.

我想知道的更多是坚持不懈的一面.

Answer 1

Rick 的答案确实是最好的 - 将 blob 存储在 blobstore 中，特别是如果您是 GAE 新手并且对数据存储有概念问题的话。

另一方面，使用分割实体来存储 blob 有一些充分的理由，特别是当您存储接近 1M 边缘的数据时。您不会希望使用 100MB blob 来执行此操作，但 2MB blob 是有意义的。

首先，您不需要序列化或嵌入。这些只是在单个实体内构建数据的简单方法。

此外，没有神奇的注释可以让您跨实体分割 blob。你必须手工完成这一切。您不需要实际创建“主”或根实体；只需创建所有具有由 id 定义的父级（但没有实际实体）的实体片段，并使用祖先（）查询来获取所有片段。