标签: scalability

我在 digitalocean 上有一个 8GB 的​​ Droplet。我们今天推出了我们的网站，流量非常大，大约有 3000 名并发用户。

我尝试提高并发连接数（根据 apache2buddy 的建议），但建议的 MaxRequestWorkers 为 482。以下是文件：

<IfModule mpm_prefork_module>
        ServerLimit             482
        StartServers              5
        MinSpareServers           5
        MaxSpareServers          10
        MaxRequestWorkers         482
        MaxConnectionsPerChild   0
</IfModule>

Apache2 使用 mdm_prefork ，我们已经了解到使用mdm_worker会更好。

所以我尝试禁用 mdm_prefork，以便我可以启用 mdm_worker：

 a2dismod mpm_prefork

我收到以下错误：

ERROR: The following modules depend on mpm_prefork and need to be disabled first: php7.3

我需要做什么才能启用 mpm_worker？

我需要建立一个MySQL环境,支持随着时间的推移添加许多独特的数据库(实际上是数千个).我假设在某些时候我需要开始添加MySQL服务器,并希望我的环境事先为案例做好准备,以便轻松过渡到第2,第3,第100服务器.

只是为了让它变得有趣,如果对解决方案进行建模,那么查询数据库的应用程序会将所有查询发送到单个地址并接收结果,这将非常方便.它应该不知道服务器的数量和位置.数据库名称是唯一的,可用于确定哪个服务器拥有数据库.

我已经做了一些研究,并且MySQL Proxy作为主要候选者弹出,但是我还没有找到任何关于如上所述使其执行的具体内容.

任何人？

我编写了一个算法来计算和存储DAG的所有路径,它在小图上运行得很好 - 但现在我希望提高它在大图上运行的效率.该算法的核心逻辑在下面的createSF()和makePathList()中,其他方法是帮助器 - 我可以看到append是一个瓶颈.但是,我想最大的帮助是设计一个可以在字典中存储路径的数据结构,因为许多路径都是由其他路径组成的,这是我的问题的症结所在.

private Multiset<String> paths = new Multiset<String>();    

public Multiset<String> createSF(DAGNode n) {

    for (DAGNode succ : n.getSuccessors())
        createSF(succ);
    if (!n.isVisited())
        for (String s : makePathList(n)) 
            paths.put(s);

    n.setVisited(true);
    return paths;
}

private List<String> makePathList(DAGNode n) {
    List<String> list = new ArrayList<String>();

    list.add(n.getLabel());
    for (DAGNode node : n.getSuccessors())
        list.addAll(append(n.getLabel(), makePathList(node)));

return list;
}

private List<String> append(String s, List<String> src) {
    List<String> ls = new ArrayList<String>();
    for (String str : src) 
    ls.add(s + "/" + str);

    return ls;
} …

有关设置mongodb以进行分片/可伸缩性的建议读数吗？

我正在寻找最佳实践.我不太了解分片或扩展数据库解决方案.有实际的现实世界的例子吗？

如果我使用错误的条款,我道歉.

1. 我的理解是正确的,因为mongodb就像一个"单一数据库",但知道如何跨mongodb的不同实例分发数据(可能位于不同的位置等)
2. 每个实例都称为分片吗？是在所有实例中复制数据吗？

这是我面临的问题.我们有一个后缀服务器,需要解析从某个用户的帐户转发的电子邮件,并从中提取一些数据.通常每个用户大约有200封电子邮件.我们已经用5个用户对它进行了测试,这一切都很好,但是如果用户数量达到更大的数量,例如10000或100000,该怎么办？您是否有任何想法如何使后缀解决方案可扩展,以便它可以支持这种繁重的负载.

我们当前的postfix服务器资源是Ubuntu 10.04机器,512MB RAM.

此致,Mladjo

我有一个关于Ruby VM(Ruby解释器)的一般问题.它如何与多处理器一起使用？关于Ruby中的并行性和并发性,假设我有4个处理器.VM是否会通过内核自动为处理器分配任务？通过扩展,可以说我的ruby进程占用了大量的CPU资源; 如果添加新处理器会发生什么？OS是否负责将任务分配给处理器,或者每个VM是否在一个处理器上运行？扩展我的ruby应用程序的最佳方法是什么？我尽可能地分离我的进程并使用amqp队列.还有其他想法吗？

如果你能给我链接以获得更多解释,那就太好了.

提前致谢.

我想知道Django管理员是否可以处理大量的记录.

假设我有200万用户,例如如何处理分页？它是否会死得很慢,因为每次记录所有记录都会被提供给偏移量？

注意:我打算使用PostgreSQL.

谢谢.

Firebase有一个有趣的功能/滋扰,当您收听数据引用时,您将获得所有已添加到该引用的数据.因此,例如,当您收听'child_added'时,您将获得从一开始就添加到该ref的所有孩子的重播.我们正在编写一个评论系统,其数据集看起来像这样:

/comments
/sites
/sites/articles
/users

网站有很多文章和文章有很多评论,用户有很多评论.

我们希望能够跟踪用户所做的所有评论,因此我们认为将评论放在单独的ref中是明智的,而不是根据它们所属的文章对它们进行分区.我们有一个后端监听器,它需要在新的评论到达时做一些事情(增加他们的子计数,调整用户的统计数据等).我担心的是,经过一段时间后,如果它必须处理所有评论的重播,那么这个听众需要很长时间才能启动.

我想过可能只在文章中存储注释并在每个注释中存储对每个注释的siteId/articleId/commentId的引用,这样我们仍然可以找到给定用户的所有注释,但这会使后端变得复杂,因为它可能需要每个站点甚至每篇文章都有一个单独的监听器,这可能使管理这么多听众变得困难.

想象一下,如果这些文章中的一篇文章位于人流量很大的网站上,每篇文章都有成千上万的文章和数千条评论.缩放答案是否以某种方式跟踪每个站点的流量级别,并以分配给不同工作进程的方式对它们进行设置和分区？那么启动时间的问题以及每次加载工作人员时重播所有数据需要多长时间？

我手头有一个相当简单的任务:给定一个(小写的)big字符串和一个(小写的)字符串数组,small如果所有small字符串都在字符串中,我需要产生1 big,否则为0.所以这样做的pythonic方法就是:

>>> big = 'the quick brown fox jumps over the lazy dog'
>>> smallTrue = ["quick","dog","fox"]
>>> smallFalse = ["quick","fox","wolf"]
>>> int(all([s in big for s in smallTrue]))
1
>>> int(all([s in big for s in smallFalse]))
0

问题在于是否有一种不同的方法可以使得0和1更好地扩展到更长的bigs(显然更长)(想想"典型"科学论文的摘要)加上大量small更长的数组？

缩放意味着处理时间,因为我的机器有很多RAM.因此,如果我需要以某种方式预处理数据,这将需要更多的RAM,这将是好的.

问的原因是因为我遇到了一些类似字符串操作任务的可伸缩性问题.

我目前Rectangles在我的应用程序中有一套我这样定义的内容XAML;

<Rectangle Fill="LightBlue"/>

目前我可能<10,Rectangles因此改变Coloura Rectangle不是太大的问题.

然而,随着我的应用程序的增长,我无疑会有更多,更多Rectangles,如果确定他们的颜色需要改变,我可以看到可扩展性将是一个大问题.

什么是存储的最有效的方法Background的Rectangle,这样我可以在一个地方改变所有的改变它Rectangles在我的计划？

这也可以延伸到a的风格TextBox.如果我想为TextBox整个应用程序中的每一个设置一个自定义样式,那么可扩展的方法是什么？