小编Dev*_*per的帖子

在Yarn Cluster上运行的Spark作业java.io.FileNotFoundException:文件在主节点上退出时不会退出

我对Spark很新.我尝试过搜索,但我找不到合适的解决方案.我在两个盒子(一个主节点和另一个工作节点)上安装了hadoop 2.7.2我按照以下链接设置了集群http://javadev.org/docs/hadoop/centos/6/installation/multi- node-installation-on-centos-6-non-sucure-mode / 我以root用户身份运行hadoop和spark应用程序来测试集群.

我已在主节点上安装了spark,并且spark正在启动而没有任何错误.但是,当我使用spark submit提交作业时,我发现File Not Found异常,即使该文件存在于错误中同一位置的主节点中.我正在执行Spark Submit命令下面,请在下面找到日志输出命令.

/bin/spark-submit  --class com.test.Engine  --master yarn --deploy-mode      cluster /app/spark-test.jar
Run Code Online (Sandbox Code Playgroud)
16/04/21 19:16:13 WARN NativeCodeLoader: Unable to load native-hadoop library for your platform... using builtin-java classes where applicable
16/04/21 19:16:13 INFO RMProxy: Connecting to ResourceManager at /0.0.0.0:8032
16/04/21 19:16:14 INFO Client: Requesting a new application from cluster with 1 NodeManagers
16/04/21 19:16:14 INFO Client: Verifying our application has not requested more than the maximum memory capability of the cluster (8192 MB per …

hadoop hadoop-yarn apache-spark spark-streaming

9
推荐指数
1
解决办法
2万
查看次数

vue JS没有将更改从父级传播到组件

我是Vue Framework的新手.我试图在添加或删除属性时将更改从父级传播到子级,或者在稍后阶段在组件外部更新.在下面的代码片段中,我尝试编写一个组件,该组件根据节点的name属性显示问候消息,该节点作为属性从父节点传递.

如果节点在初始化时包含属性"name"(在下面的代码段中注释),则一切正常.但是如果在后面的执行阶段添加了name属性(这里为了演示目的,我添加了一个设置超时并应用了).该组件抛出错误,并且不会反映更改.我不知道如何传播组件中动态属性的更改,这些更改是基于组件外部的其他事件生成的.

基本上我想基于传递给它的属性以动态方式更新基于服务器响应显示不同类型小部件的组件.每当属性得到更新时,我希望组件自己更新.为什么双向绑定在Vuejs中无法正常工作?

Vue.component('greeting', {
    template: '#treeContainer',
    props: {'message':Object},
    watch:{
        'message': {
            handler: function(val) {
                console.log('###### changed');
            },
            deep: true
        }
    }
});

var data = {
    note: 'My Tree',
    // name:"Hello World",
    children: [
      { name: 'hello' },
      { name: 'wat' }
    ]
}

function delayedUpdate() {
    data.name='Changed World';
    console.log(JSON.stringify(data));
}

var vm = new Vue({
    el: '#app',
    data:{
        msg:data
    },
    method:{ }
});

setTimeout(function(){ delayedUpdate() ;}, 1000)
Run Code Online (Sandbox Code Playgroud)
<script src="https://vuejs.org/js/vue.js"></script>
<div id="app">
  <greeting :message="msg"></greeting>
</div>
<script  type="text/x-template"  id="treeContainer"> …
Run Code Online (Sandbox Code Playgroud)

javascript vue.js vue-component vuejs2

3
推荐指数
1
解决办法
2646
查看次数