标签: nosql

我正在考虑使用我的域模型 (DDD) 作为 RavenDb 中的文档。这是一个坏主意吗？

如果没有，我正在使用TodoListId包含id 的 id 类（如）（在乌鸦的情况下todolists/3等）。我如何告诉 Raven/JSON.NET 将它们用作 ID？

public class TodoListId
{
    public class TodoListId(string id)
    {
        //validate the id and set internal var
    }

    //override ToString to return the id
}

public class TodoList
{
    public TodoList(TodoListId id)
    {}

    public TodoListId Id{get;set;}
    public TodoListId Parent {get;set;}
    public string SomeBasicProperty {get;set;}
}

此外，当我使用 nhibernate 时，我通常将所有 setter 设置为 protected 以确保正确使用域模型。RavenDb 客户端也可以这样做吗？或者不会序列化工作呢？

todoList.Id.ToString()会回来todolists/1。

有没有人有一个示例 java 代码在 dynamoDB 表上执行扫描操作，其中扫描操作仅使用吞吐量限制的特定百分比？提前致谢。

如果我有 2 张表员工和部门

1）在服务器端加入数据

SELECT * FROM employee CROSS JOIN department;

我们这里只使用一个连接来获取数据

2）要在客户端加入数据，我们将获取 2 个表并使用 2 个连接

SELECT * FROM employee;

并将其存储在一个数组中

SELECT * FROM department;

并将其存储在另一个数组中，并通过在客户端使用例如 Javascript 进行编程来合并这两个数组。

第二种方法可能更复杂，但优点是您可以将员工表存储在一个服务器上，将部门表存储在另一台服务器上，这样您可以减少自己服务器上的负载并使每台客户端机器完成其工作

但是我在问我是否要加入 2000 表哪个性能更好，速度更快：在客户端或服务器端进行连接？

我刚刚开始使用 MongoDB（我的第一次 NoSQL 数据库体验）。这是一个未来将处理大量数据的项目。我正在编写数据访问的框架。经过很多思考，我仍然很困惑是应该为 MongoDB 选择像 morphia 这样的 ORM，还是应该使用 MongoDB 驱动程序类提供的接口并从头开始编写 DAO。我知道这里在性能和易于开发之间存在权衡。同时，与关系数据库不同，我猜在大多数情况下，NoSQL 数据库不一定需要 ORM 映射器。请建议我将 ORM for MongoDB 用于大数据初创公司？

我最近从 rdbms 切换到 Hbase 来处理数百万条记录。但作为一个新手，我不确定设计 Hbase 方案的有效方法是什么。实际上，场景是我有文本文件，其中有成百上千和数百万条记录，我必须读取并存储到 Hbase 中。因此，有两组文本文件（RawData 文件、标签文件）相互链接，因为它们属于同一用户，对于这些文件，我制作了两个单独的表（RawData 和标签），并将它们的信息存储在那里. 因此 RawData 文件和 RawData 表如下所示：

所以你可以在我的 RawData 表中看到我有行键，它实际上是文本文件（01-01-All-Data.txt）的文件名，每行文本文件的行号。列族只是随机的“r”，列限定符是文本文件的列，值是列的值。这就是我在表中插入记录的方式，我有第三个表（MapFile），我将文本文件的名称存储为用户的行键用户 ID 作为列限定符，将文本文件的记录总数存储为值，如下所示：

            01-01-All-Data.txt       column=m:1, timestamp=1375189274467, value=146209  

我将使用 Mapfile 表来逐行读取 RawData 表。

你对这种 Hbase Schema 有什么建议？这是一个正确的方法吗？或者它在 Hbase 概念中没有意义？

此外，值得一提的是，在 Hbase 中插入具有 146207 行的 21 mbs 文件大约需要 3 分钟。

请指教。

谢谢

例如，在阅读有关 NoSQL 数据库的文章时，FoundationDB我经常遇到 "storage substrate". 我试图storage substrate在数据库的上下文中找到什么是 a 的一些正式或确切的定义，但没有找到任何东西，只是提到没有定义。

有人可以为我澄清什么是 astorage substrate吗？它是数据库的同义词还是它的一部分？只需一个小的定义或链接就会有所帮助。谢谢

我正在使用 MongoDB 构建照片/视频共享社交网络。该社交网络具有提要、个人资料和关注者模型。对于我的“社交提要”设计，我基本上遵循了与本文类似的方法。具体来说，当用户发布故事时，我使用扇出写入桶方法。

我的问题是当用户“喜欢”一个故事时。我目前也在使用写时扇出方法，该方法基本上为每个用户的提要增加/减少故事的“喜欢计数”。我认为这可能是一个糟糕的设计，因为用户“喜欢”比他们发布的频率更高。用户可以通过喜欢和不喜欢热门帖子来快速使服务器饱和。

你们在这里推荐什么设计模式？我应该在读取时使用扇出吗？继续在后台工作人员写入时使用扇出？如果解决方案是“后台工作人员”，您建议后台工作人员使用什么方法？正在使用 Node.js。

任何帮助表示赞赏！

谢谢，亨利

下面按照我的场景：

CREATE TABLE `CustomerOrder` (
  `id` bigint(11) unsigned NOT NULL AUTO_INCREMENT,
  `data` json DEFAULT NULL,
  PRIMARY KEY (`id`)
);

我们可以使用这个 Customer Order json 作为例子：

{ 
    "creation": "2015-07-30 14:27:51",
    "customer": {
        "id": 2,
        "email": "foo@bar.com"
    },
    "item": [
        {
            "sku": 182,
            "unitPrice": 0.89,
            "qty": 10
        }, {
            "sku": 712,
            "unitPrice": 12.99,
            "qty": 2
        }
    ]
}

在 MySQL 控制台上运行此 SQL：

SELECT json_extract(data, '$.item[*].unitPrice') AS price FROM CustomerOrder;

我会有这个输出：

[ 0.89, 12.99 ]

现在我如何评估 [0.89 + 12.99] 或 1..N 个项目元素的总和？

对于我的测试，我使用了这个版本的 …

如果此字段以前不存在，我正在尝试在集合的每个文档中插入一个字段。为此，我正在尝试：

db.people.update(
   { city.postcode: "" },
   {
      city.postcode: "W1"
   },
   { multi: true }
)

但不幸的是它不起作用；请问有什么提示吗？

更新：

这里的文档：http : //docs.mongodb.org/manual/reference/method/db.collection.update/

我有一个包含 250 万条数据的 mongo 集合，并且可能会增长到 300 万条。我正在使用 spring 批处理，并试图将该集合复制到另一个集合。我使用的方法如下：

• 在 tasklet 中，我创建了一个 ProcessBuilder 对象并调用了一个执行 mongo 查询的 shell 脚本。shell脚本的内容如下：

  >  mongo $serverURL/$dbName js-file-to-execute.js
  
  // js file contains copy command (db.collection.copyto('newCollection'))
  

  Run Code Online (Sandbox Code Playgroud)

对于较少的数据（< 200 k），它工作正常，但对于 200 万数据，它挂起 mongo 服务器并且作业因 Socket Exception 而失败

• 使用 mongo 模板并执行查询

dbMongoTemplate.getDb().getCollection("collection").aggregate(Arrays.asList((DBObject) new BasicDBObject("$out","newCollection")));

这将执行一个 mongo 聚合查询 db.collection.aggregate({$out : "newCollection"})

这也适用于数据较少的集合，但对于较大的数据集，它会一直运行，直到发生套接字超时并最终使作业失败。

请建议复制数据的有效方法？