小编Jac*_*ack的帖子

了解 bash 中 = 和 =~ 运算符的区别 [[ ]]

  1. if [[ 23ab = *ab ]] ; then echo yes; fi

    上面的代码是正则表达式吗?

    请参阅以下内容:

  2. if [[ 23ab =~ [0-9]{1,2}ab ]] ; then echo yes; fi

那么哪一行是正则表达式?如果第一行不是正则表达式,为什么当我们使用 * 时它会起作用?如果是,但是当我们不只是=~使用 时=,比如 if [[ 23ab = [0-9]{1,2}ab ]],它现在就不起作用了。

你能解释一下两条线之间的区别吗?

regex bash

3
推荐指数
1
解决办法
321
查看次数

如何在现有Hbase表上启用压缩?

我有一个非常大的Hbase表apData,但它在创建时没有设置为压缩.现在它是1.5TB.所以我想在这张桌子上启用压缩功能.我做了以下事情:

(1)disable apData
(2)alter apData,{NAME=>'cf1',COMPRESSION=>'snappy'}
(3)enable 'apData'.
Run Code Online (Sandbox Code Playgroud)

但是当我"desc apData"用来查看配置时,它仍然显示:

COMPRESSION => 'NONE'

为什么没有生效?我应该如何压缩表格,并确保未来的数据在插入时会自动压缩.

提前致谢!

compression hbase

3
推荐指数
1
解决办法
7383
查看次数

如果三个节点中的一个失败,zookeeper如何变为高可用性

如果我有三个zookeeper节点,一个领导者和两个粉丝.如果领导人死了,会发生什么,是否会从剩下的两个领导者中选出新的领导者?好吧,让我们假设一个人被选为新的领导者,如果新的领导者也去世了.最后一个还在服务吗?谢谢!

high-availability apache-zookeeper

3
推荐指数
1
解决办法
3393
查看次数

ElasticSearch 中索引刷新间隔如何工作?

我设置了index.refresh_interval=-1,这意味着indexReader不会永远刷新,但为什么我在索引一段时间后仍然可以找到一些新文档?还有其他参数可以控制索引刷新吗?

假设有一个名为 的参数maxDocsRefresh,这意味着当新文档达到限制时 IndexReader 会自动刷新。然而,问题是,由于部分文档未达到索引刷新的限制,可能存在一些无法搜索的文档。

lucene elasticsearch

3
推荐指数
1
解决办法
4730
查看次数

当master宕机时zookeeper怎么办

标题可能看起来很傻,但我真的无法理解当master宕机时zookeeper的故障转移策略,尽管我读了很多关于Zookeeper的文档。我的问题如下:

  1. 如果我有三个节点zookeeper,那么master挂了,那么剩下的两个节点如何选举新的master(现在是偶数个节点,它们如何以多数票投票)。
  2. 如果剩下的两个节点之一宕机,那么最后一个节点将成为主节点并继续提供服务,对吧?
  3. 如果偶数个Zookeeper节点可以运行得很好,为什么我必须设置奇数个Zookeeper节点?

apache-zookeeper

3
推荐指数
1
解决办法
1181
查看次数

无法理解为什么 Hbase 在 CAP 中不是 A

我读过一篇文档说Hbase在CAP理论上是一致性和分区的。

但是我不明白为什么Hbase不是A?我认为 Hbase 可以始终保持服务可用,那为什么不是 A?

我对 Hbase 的理解 NOT A:当一个新行被插入到 Hbase 中时,因为 Hbase 是立即一致的,它需要等待 HDFS 完成 3 个副本,但是在此副本同步时间内无法看到新行,这就是为什么 Hbase不是 A. 但我不确定这一点。

hbase

3
推荐指数
1
解决办法
1092
查看次数

Hbase KeyValue的大小太大

我正在使用Spark Streaming下载网页并插入Hbase.我遇到以下异常:

WARN scheduler.TaskSetManager: Lost task 13.1 in stage 21.0 (TID 121,test1.server): java.lang.IllegalArgumentException: KeyValue size too large
    at org.apache.hadoop.hbase.client.HTable.validatePut(HTable.java:1378)
    at org.apache.hadoop.hbase.client.HTable.validatePut(HTable.java:1364)
    at org.apache.hadoop.hbase.client.HTable.doPut(HTable.java:974)
    at org.apache.hadoop.hbase.client.HTable.put(HTable.java:941)
    at org.apache.hadoop.hbase.mapreduce.TableOutputFormat$TableRecordWriter.write(TableOutputFormat.java:126)
    at org.apache.hadoop.hbase.mapreduce.TableOutputFormat$TableRecordWriter.write(TableOutputFormat.java:87)
    at org.apache.spark.rdd.PairRDDFunctions$$anonfun$12.apply(PairRDDFunctions.scala:1000)
    at org.apache.spark.rdd.PairRDDFunctions$$anonfun$12.apply(PairRDDFunctions.scala:979)
    at org.apache.spark.scheduler.ResultTask.runTask(ResultTask.scala:61)
    at org.apache.spark.scheduler.Task.run(Task.scala:64)
    at org.apache.spark.executor.Executor$TaskRunner.run(Executor.scala:203)
    at java.util.concurrent.ThreadPoolExecutor.runWorker(ThreadPoolExecutor.java:1145)
    at java.util.concurrent.ThreadPoolExecutor$Worker.run(ThreadPoolExecutor.java:615)
    at java.lang.Thread.run(Thread.java:745)
Run Code Online (Sandbox Code Playgroud)

我试图增加hbase.client.keyvalue.maxsize,并设置hbase.client.keyvalue.maxsize = 0表示没有限制.另外,我增加了hdfs.blocksize = 256M.但是当我重新启动集群时,我仍然遇到同样的错误:keyvalue to large.请提出任何想法,提前致谢!

hbase

2
推荐指数
1
解决办法
4326
查看次数

如何获得 ElasticSearch 集群配置

如何获取 ElasticSearch 集群配置,例如我想知道discovery.zen.minimum_master_nodes 的当前值。

elasticsearch

2
推荐指数
1
解决办法
1952
查看次数

如何添加多个德鲁伊过滤器

例如,我有以下德鲁伊查询:

"filter": {
    "type": "and",
    "fields": [
      {
        "type": "selector",
        "dimension": "city",
        "value": "landon"
      },
      {
        "type": "selector",
        "dimension": "name",
        "value": "Tom"
      }
    ]
  }
Run Code Online (Sandbox Code Playgroud)

现在我想添加一个 NOT 字段,我应该在哪里插入它?映射 SQL 如下: select * from User where city='landon' and name="Tom" and title<>"teacher"。

druid

2
推荐指数
1
解决办法
1335
查看次数

如何在scala中存储不同的值类型

我可能有一个简单的愚蠢问题,如何使用Scala Map存储不同的值类型,例如,我想要Map存储字符串和double值,我尝试了以下代码:

var yaraMap: Map[String, AnyRef] = Map()
yaraMap+={"as"->10.0}
yaraMap+={"bb"->'val'}
Run Code Online (Sandbox Code Playgroud)

但它告诉类型不匹配,我该如何解决这个问题,谢谢!

scala

1
推荐指数
1
解决办法
313
查看次数