小编She*_*jie的帖子

Jenkins maven将jar部署到nexus - artifact命名

我的java/maven项目叫做"testproject",它与我的jenkins和nexus repo联系在一起:

我的pom.xml看起来像:

....    
<distributionManagement>
    <!-- use the following if you're not using a snapshot version. -->
    <repository>
        <id>nexus</id>
        <name>RepositoryProxy</name>
        <url>http://nexus:8080/nexus/content/repositories/releases</url>
    </repository>
    <!-- use the following if you ARE using a snapshot version. -->
    <snapshotRepository>
        <id>nexus</id>
        <name>RepositoryProxy</name>
        <url>http://nexus:8080/nexus/content/repositories/snapshots</url>
    </snapshotRepository>
</distributionManagement>
......
Run Code Online (Sandbox Code Playgroud)

在我的jenkins设置中,我有:

Build - maven3 - clean deploy
Run Code Online (Sandbox Code Playgroud)

正如预期的那样,jenkins将工件上传到jenkins构建的控制台输出的Nexus.Look,如下所示:

[INFO] --- maven-jar-plugin:2.3.1:jar (default-jar) @ testproject ---
[INFO] Building jar: /var/lib/jenkins/workspace/testproject/target/testproject-0.1-SNAPSHOT.jar
[INFO] 
[INFO] --- maven-install-plugin:2.3.1:install (default-install) @ testproject ---
[INFO] Installing /var/lib/jenkins/workspace/testproject/target/testproject-0.1-SNAPSHOT.jar to /var/lib/jenkins/.m2/repository/com/dummy/testproject/0.1-SNAPSHOT/testproject-0.1-   SNAPSHOT.jar
[INFO] Installing /var/lib/jenkins/workspace/testproject/pom.xml to /var/lib/jenkins/.m2/repository/com/dummy/testproject/0.1-SNAPSHOT/testproject-0.1-SNAPSHOT.pom
[INFO] …
Run Code Online (Sandbox Code Playgroud)

nexus maven jenkins

6
推荐指数
1
解决办法
1万
查看次数

什么是汇集Hive JDBC连接的最佳实践

我正在使用Hive JDBC驱动程序对我的HDFS数据存储执行sql查询.我一直在尝试使用c3p0来处理连接池.我不太确定这是正确的方法,因为Hive查询有时会花费很长时间,这意味着连接将持续很长时间而不会被释放回池中,我很难想到最大数量的正确设置号c3p0配置中的连接也是如此.

是否有任何最佳实践来汇集hive jdbc连接?C3P0?DBCP?

MAX_POOL_SIZE怎么样?它应该大于RDB的正常设置吗?

hadoop hive connection-pooling jdbc hdfs

5
推荐指数
1
解决办法
7074
查看次数

接口中方法的java泛型类型参数

我想在这里实现的是由子类决定是否要将java.lang.String或java.util.HashMap作为参数传递给query()方法.接口只需要声明子类必须实现查询方法,但我不关心什么类型的参数子类想要传入.

我有一个界面,如:

interface A<T>{
    public void query(T type);
}
Run Code Online (Sandbox Code Playgroud)

两个子类如:

public class B implements A<String> {
    public void query(String type);
}

public class C implements A<HashMap> {
    public void query(HashMap type);
}
Run Code Online (Sandbox Code Playgroud)

然后我有一个工厂类来生产B或C:

public class AFactory {
    public static A<?> getType(String type)  {
        if(type.equals("B")){
            return new B();
        } else if(type.equals("C")) {
            return new C();
        } 
   }
}
Run Code Online (Sandbox Code Playgroud)

这个想法是客户端可以使用如下的接口,而不依赖于B,C,如:

A instance = AFactory.getType("B");
String a = "test";
instance.query(a); 
Run Code Online (Sandbox Code Playgroud)

我在这里遇到的问题是:eclipse在instance.query(a)行上给出了错误:

类型A中的方法查询(捕获#2-of?)不适用于参数(String).

我认为问题是接口契约不知道查询应该期待String或HashMap.我只能想到解决这个问题的方法是,我必须将结果转换为:

B instance = (B)AFactory.getType("B");
String a = "test";
instance.query(a); …
Run Code Online (Sandbox Code Playgroud)

java generics inheritance interface

5
推荐指数
1
解决办法
4884
查看次数

通过使用不同的maven配置文件更改maven依赖项的版本

我有两个项目,项目A取决于项目B,所以通常,我在projectA/pom.xml中有以下部分:

<dependency>
   <artifactId>projectB</artifactId>
   <groupId>blabla</groupId>
   <version>version1</version>
</dependency>
Run Code Online (Sandbox Code Playgroud)

我想要实现的是非常直接的,maven配置文件允许我做任何事情:

if(profileA) {
    <version>version1</version>
}
else {
    <version>version2</version>
}
Run Code Online (Sandbox Code Playgroud)

dependencies build maven maven-profiles

5
推荐指数
1
解决办法
2542
查看次数

shell脚本 - 检查mongod服务器是否正在运行

我有一个shell脚本来做一些mongo db动作:

例如 mongo testdb --eval "db.dropDatabase()"

但是,如果mongod服务器没有运行,我得到:

MongoDB shell version: 2.0.4
connecting to: testdb
Tue May 14 04:33:58 Error: couldn't connect to server 127.0.0.1 shell/mongo.js:84
Run Code Online (Sandbox Code Playgroud)

有没有办法在mongo我可以检查连接状态?最终我想要这样的东西:

if(mongod is running):
    mongo testdb --eval "db.dropDatabase()"
else:
    echo "pls make sure your mongod is running"
    exit 1
Run Code Online (Sandbox Code Playgroud)

shell mongodb

5
推荐指数
1
解决办法
9805
查看次数

为什么绿色线程不能在多个核心上工作

在维基百科上:Green_threads被描述为通常不能在多核上运行而不解释原因.

在多核处理器上,本机线程实现可以自动将工作分配给多个处理器,而绿色线程实现通常不能.

我理解本机线程可以由OS分配给多核.有人可以解释为什么绿色线程不能在多核上运行吗?是因为绿色线程是从本机线程派生/生成的,它们无法从本机线程移动到另一个线程?

multithreading green-threads

5
推荐指数
2
解决办法
1343
查看次数

java.concurrent.ReentrantLock - 为什么我们想要多次获取相同的锁

我知道如果使用ReentrantLock,它允许同一个线程多次获取相同的锁.在内部,它有一个计数器来计算锁定采集的数量.如果您两次获得相同的锁定,则需要将其释放两次.但我的问题是,如果有一次获得足够的话,为什么有人想多次获得锁?有人可以给我一个常见的用例吗?

java multithreading reentrantlock

5
推荐指数
2
解决办法
4656
查看次数

使用storm从两个不同的dbs连接两个表

我是暴风雨的新手.只是想我是否可以使用storm来合并/连接来自两个不同dbs的两个表(coz,两个表有某种外键关系,恰好存在于不同的dbs /系统中),任何想法我是如何构成的拓扑?比如有两个分开的喷嘴周期性地从两个dbs读取并有一个螺栓来进行连接工作?

这甚至是暴风雨的正确用例吗?

任何想法都表示赞赏!

apache-storm

5
推荐指数
2
解决办法
1660
查看次数

sqoop可以在没有hadoop的情况下运行吗?

只是想知道sqoop可以在没有hadoop集群的情况下运行吗?在独立模式下?有没有人试图在spark上运行sqoop,请分享一些经验.

hadoop sqoop

5
推荐指数
1
解决办法
2315
查看次数

如何增加greenplum并发性和每秒查询次数

我们有一个相当大的Greenplum v4.3集群.18个主机,每个主机有3个段节点.每个主机有大约40个内核和60G内存.

我们的表是30列宽,有1亿行.当没有并发压力时,我们正在测试的查询有3-10秒的响应时间.随着我们增加并行触发的查询数量,延迟从平均3秒减少到50毫秒,如预期的那样.

但是我们发现无论我们并行发射多少个查询,我们只有非常低的QPS(每秒查询数),几乎只有3-5个查询/秒.我们设置了max_memory = 60G,memory_limit = 800MB和active_statments = 100,希望CPU和内存可以被高度利用,但它们仍然使用不足,比如30%-40%.

我有一种强烈的感觉,我们试图并行地支持集群,希望能够充分利用CPU和内存利用率.但它不像我们预期的那样有效.设置有什么问题吗?还是还有其他我不知道的事情?

greenplum

5
推荐指数
1
解决办法
380
查看次数