问题列表 - 第2903页

处理大型数据库表的策略

我正在寻找构建一个Rails应用程序,它将拥有一些超过5亿行的超大表.为了让事情变得活泼,我目前正在研究如何将大表拆分为更易于管理的块.我看到,从MySQL 5.1开始,有一个分区选项,这是一个可能的选项,但我不喜欢确定分区的列必须是表中主键的一部分的方式.

我真正想做的是根据写入的值拆分AR模型写入的表,但据我所知,没有办法做到这一点 - 是否有人对如何实现这一点有任何建议或任何替代策略?

谢谢

Arfon

ruby mysql database ruby-on-rails

10
推荐指数
1
解决办法
2278
查看次数

在组织中采用开源软件

为组织采用开源软件有哪些优缺点?有没有人在那里完成了这项工作,以及他们采用的软件的一些例子以及它如何使用的情况如何?

通常贡献是因为人们把它作为一种爱好,那么我们如何才能确保继续支持呢?恕我直言,如果是专有软件,就会激励组织(资金),只要软件有利可图,他们就会继续雇用人才来保持其发展.如果我错了,请纠正我.对于可能反对使用开源软件的建议的经理,我可以期待什么?

open-source organization

5
推荐指数
1
解决办法
433
查看次数

在同一个表达式中拆分两次?

想象一下,我有以下几点:

inFile = "/adda/adas/sdas/hello.txt"

# that instruction give me hello.txt
Name = inFile.name.split("/") [-1]

# that one give me the name I want - just hello
Name1 = Name.split(".") [0]
Run Code Online (Sandbox Code Playgroud)

有没有机会简化只用一个表达式做同样工作的事情?

python

5
推荐指数
1
解决办法
2116
查看次数

autotools可以创建多平台makefile

我有一个插件项目,我已经开发了几年,插件与[主应用程序版本,第三方库版本,32位与64位]的多种组合一起工作.是否有一种(干净的)方法来使用autotools来创建构建插件的所有版本的单个makefile.

从浏览autotools文档我可以看出,与我想要的最接近的是拥有项目的N个独立副本,每个副本都有自己的makefile.这对于测试和开发来说似乎有点不理想,因为(a)我需要在所有不同的副本中不断传播代码更​​改,并且(b)在复制项目时有很多浪费的空间.有没有更好的办法?

编辑:

我已经推出了自己的解决方案一段时间,我有一个花哨的makefile和一些perl脚本来搜索各种第三方库版本等.因此,我对其他非autotools解决方案持开放态度.对于其他构建工具,我希望它们对于最终用户来说非常容易安装.这些工具还需要足够智能,以便在没有大量麻烦的情况下搜索各种第三方库和标题.我主要是在寻找一个Linux解决方案,但也适用于Windows和/或Mac的解决方案.

64-bit 32-bit makefile multiplatform autotools

2
推荐指数
2
解决办法
2230
查看次数

我们应该在数据库表命名约定中使用前缀吗?

我们正在决定工作开发团队的表,列,程序等的命名约定.单数复数表命名已经确定,我们使用单数.我们正在讨论是否为每个表名使用前缀.我想阅读有关使用前缀的建议,以及原因.

它是否提供任何安全性(对于可能的入侵者至少还有一个障碍)?我认为用前缀命名它们通常会更舒服,以防我们在代码中使用表名,所以不要将它们与变量,属性等混淆.但我想阅读更有经验的开发人员的意见.

sql database naming-conventions

11
推荐指数
3
解决办法
9763
查看次数

从bash变量中删除空格

假设变量包含空格,换行符和制表符后跟一些文本,为什么会这样:

${var#"${var%%[![:space:]]*}"}  # strip var of everything 
                                # but whitespace
                                # then remove what's left 
                                # (i.e. the whitespace) from var
Run Code Online (Sandbox Code Playgroud)

删除空格并保留文本,但是这样:

${var##[:space:]*}  # strip all whitespace from var
Run Code Online (Sandbox Code Playgroud)

才不是?

bash

8
推荐指数
1
解决办法
2万
查看次数

查询与视图

我想知道查询和视图在性能方面有什么区别.如果视图成本高昂,除了查询之外还可以做些什么来提高性能?

database database-design

6
推荐指数
2
解决办法
2万
查看次数

数字VS Varchar(2)主键

我现在对项目的这一点,我需要设计我的数据库(Oracle).通常,对于status和countries表,我不使用数字主键

STATUS (max 6)
AC --> Active
DE --> Deleted

COUNTRIES (total 30)
UK --> United Kingdom
IT --> Italy
GR --> Greece
Run Code Online (Sandbox Code Playgroud)

这些表是静态的,不是通过应用程序更新的,并且预计将来不会进行更改,因此在使用这些值作为外键的表中不会出现更新问题.

该应用程序的主表将使用状态和国家(不止一次,例如来源国,目的地国家),预计每年将增加600000行

所以我的问题是,当查询3个表的连接时,这些VARCHAR(2)键是否会对性能产生影响.第一个会明显慢于第二个吗?

SELECT m.*,
       s.status_name,
       c.country_name
  FROM main m, status s, countries c
 WHERE m.status_cd = s.status_cd
   AND m.country_cd = c.country_cd
   AND m.status_cd = 'AC'
   AND m.country_cd = 'UK'

SELECT m.*,
       s.status_name,
       c.country_name
  FROM main m, status s, countries c
 WHERE m.status_cd = s.status_cd
   AND m.country_cd = c.country_cd
   AND m.status_cd = 1
   AND m.country_cd = 2 …
Run Code Online (Sandbox Code Playgroud)

performance varchar numbers primary-key

11
推荐指数
2
解决办法
1万
查看次数

你有什么建议可以给我写一个有意义的基准?

我已经开发了一个框架,供我们组织中的几个团队使用.在这个框架之上开发的那些"模块"可以表现得完全不同,但它们都是非常耗费资源的,即使有些模块比其他模块更多.它们都在输入中接收数据,分析和/或转换数据,并进一步发送.

我们计划购买新硬件,我的老板让我根据模块定义和实施基准测试,以便比较我们获得的不同报价.

我的想法是简单地用一组精心选择的数据作为输入顺序开始每个模块.

你有什么建议吗?关于这个简单程序的任何评论?

benchmarking

5
推荐指数
1
解决办法
1450
查看次数

在Python中解析大型XML文档的最快方法是什么?

我目前正在根据Python Cookbook的第12.5章运行以下代码:

from xml.parsers import expat

class Element(object):
    def __init__(self, name, attributes):
        self.name = name
        self.attributes = attributes
        self.cdata = ''
        self.children = []
    def addChild(self, element):
        self.children.append(element)
    def getAttribute(self,key):
        return self.attributes.get(key)
    def getData(self):
        return self.cdata
    def getElements(self, name=''):
        if name:
            return [c for c in self.children if c.name == name]
        else:
            return list(self.children)

class Xml2Obj(object):
    def __init__(self):
        self.root = None
        self.nodeStack = []
    def StartElement(self, name, attributes):
        element = Element(name.encode(), attributes)
        if self.nodeStack:
            parent = self.nodeStack[-1]
            parent.addChild(element)
        else:
            self.root …
Run Code Online (Sandbox Code Playgroud)

python xml performance parsing

57
推荐指数
5
解决办法
6万
查看次数