小编GEO*_*HET的帖子

为简单的hadoop mapreduce作业运行两个映射器和两个reducer

我只是想更好地理解使用多个映射器和reducers.我想尝试使用一个简单的hadoop mapreduce字数计数作业.我想为这个wordcount作业运行两个映射器和两个reducer.我需要在那里手动配置配置文件或仅仅对WordCount.java文件进行更改就足够了.

我在单个节点上运行这个工作.我正在运行这个工作

$ hadoop jar job.jar输入输出

我已经开始了

$ hadoop namenode -format
$ hadoop namenode

$ hadoop datanode
Run Code Online (Sandbox Code Playgroud)

sbin $ ./yarn-daemon.sh start resourcemanager sbin $ ./yarn-daemon.sh start resourcemanager

我正在运行hadoop-2.0.0-cdh4.0.0

我的WordCount.java文件是

package org.apache.hadoop.examples;

import java.io.IOException;
import java.util.StringTokenizer;
import org.apache.commons.logging.Log;
import org.apache.commons.logging.LogFactory;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.io.IntWritable;
import org.rg.apache.hadoop.fs.Path;
import oapache.hadoop.io.Text;
import org.apache.hadoop.mapreduce.Job;
import org.apache.hadoop.mapreduce.Mapper;
import org.apache.hadoop.mapreduce.Reducer;
import org.apache.hadoop.mapreduce.lib.input.FileInputFormat;
import org.apache.hadoop.mapreduce.lib.output.FileOutputFormat;
import org.apache.hadoop.util.GenericOptionsParser;

public class WordCount {
private static final Log LOG = LogFactory.getLog(WordCount.class);

  public static class TokenizerMapper
       extends Mapper<Object, Text, Text, IntWritable>{ …
Run Code Online (Sandbox Code Playgroud)

java hadoop mapreduce

5
推荐指数
1
解决办法
1万
查看次数

将asp.net mvc4应用程序部署到godaddy

我在Visual Studio 2012上使用C#创建了一个ASP.NET MVC4应用程序.但是在部署它时遇到了困难.我将项目的所有文件夹上传到我的服务器(godaddy).但仍然无法查看我的网站运行情况.

我的问题:这足以部署我的网站吗?还是需要什么?

asp.net asp.net-mvc-4

5
推荐指数
1
解决办法
2万
查看次数

我可以登录PayPal Sandbox测试帐户,但无法进入个人资料或设置

在从Chrome删除PayPal Cookie之前,我无法登录到我的PayPal开发者帐户.这使我可以登录,但在"配置文件"下拉列表中单击"配置文件"或"设置"会导致出现错误页面"请登录以使用PayPal沙箱功能".

再次登录没有帮助.创建一个新帐户(买方或卖方)也没有帮助.

这是在新的Sandbox环境中.

paypal paypal-sandbox

5
推荐指数
1
解决办法
3634
查看次数

CollectionViewSource"值不在预期范围内."

为什么此代码会在Windows 8 XAML应用程序中产生错误?

价值不在预期范围内.

XAML:

    <SemanticZoom>
        <SemanticZoom.ZoomedInView>
            <ListView
                Style="{StaticResource HorizontalListViewStyle}"
                SelectionMode="None"
                ScrollViewer.IsHorizontalScrollChainingEnabled="False"
                ItemsSource="{Binding BoardItems}" 
                ItemContainerStyle="{StaticResource ZoomedOutListViewItemContainerStyle}"
...
Run Code Online (Sandbox Code Playgroud)

MVVM代码:

ObservableCollection<WritingBoardModel> boards = new ObservableCollection<WritingBoardModel>();

... // Add item models to boards.

CollectionViewSource v = new CollectionViewSource()
{
    Source = boards,
};

this.ViewModel.Add(BoardItemsViewModelKey, v);
Run Code Online (Sandbox Code Playgroud)

如果我跳过CollectionViewSource并直接将boards实例添加到我的视图模型中,那么一切正常.

我想我需要使用a CollectionViewSource才能使一些语义缩放选择行为起作用.

卢克

xaml winrt-xaml windows-store-apps

5
推荐指数
2
解决办法
3987
查看次数

VBA中的均方根(rms)函数?

所以我在我的工作表中计算基本统计数据,它包括如下代码:

xxx = Application.worksheetfunction.平均等(等等)

yyy = Application.worksheetfunction.min(等等等

zzz = Application.worksheetfunction.最大(等等等

我的问题:是否有一个RMS等效函数,我可以简单地将其插入代替我在该代码中具有'average,min,max'函数的位置?如果没有,那么编写RMS解决方案的最有效方法是什么?

我希望我已经明确地说明了目标.我很好奇VBA是否有预定义的RMS功能,或者我是否需要创建某种用户定义的功能?〜其中我也很新,所以如果没有简单的代码行为此写,我将不得不在UDF上做更多的阅读.

编辑:

我有大约30,000行,为简单起见:想象两列.A列具有年份,即1941年或其他任何直至2008年.B列是数值.我只是想把代码放在一起,给出平均值,最小值,最大值和RMS值的十年摘要.

excel vba worksheet-function

5
推荐指数
1
解决办法
6905
查看次数

在SQL Server 2008中使用PDF文件进行全文搜索

我有SQL Server 2008 R2,我正在尝试在PDF BLOB上实现全文搜索.

我已经从Adobe安装了iFilter并确认已安装

运用

EXEC sp_help_fulltext_system_components 'filter';
Run Code Online (Sandbox Code Playgroud)

过滤器.pdf E8978DA6-047F-4E3D-9C78-CDBE46041603
C:\ Program Files\Adob​​e\Adob​​e PDF iFilter 11 for 64-bit platforms\bin\PDFFilter.dll
11.0.1.36 Adob​​e Systems,Inc.

然后,我为FT索引创建了一个全文目录,并创建了FT索引

CREATE FULLTEXT INDEX ON Compliance_Updates
( 
FileDesc
 Language 1033,
 FileData
   TYPE COLUMN FileDataType
) 
 KEY INDEX PK_Compliance_Updates
     ON FT_Compliance_Updates; 
Run Code Online (Sandbox Code Playgroud)

然后,我在向表中添加了一些PDF后强制重建索引.指数显示..

目录大小:0MB
项目数:2
唯一钥匙数:7
姓名:FT_Compliance_Updates
最后一页人口日期:12/11/2013 09:36
人口状况:空闲

但是,当我执行以下搜索时,我得到零结果......

SELECT FileID, FileDesc, PubDate 
FROM Compliance_Updates 
WHERE CONTAINS(FileData, 'mortgage')
Run Code Online (Sandbox Code Playgroud)

我已经尝试删除目录,删除所有表记录和索引(包括PK),重新运行iFilter安装

exec sp_fulltext_service 'load_os_resources', 1;
exec sp_fulltext_service 'verify_signature', 0;
Run Code Online (Sandbox Code Playgroud)

重新启动SQL Server,重新创建索引和FT目录,似乎什么都没有用?

pdf full-text-search sql-server-2008

5
推荐指数
1
解决办法
4693
查看次数

如何设置Facebook共享图像(仅作为后备)?

我们当然可以使用以下方法设置默认共享图像:

<meta property="og:image" content="http://website.com/images/icon.png" />
Run Code Online (Sandbox Code Playgroud)

但是,有没有办法将其设置为仅后备,而不是默认?意思是,只有在Facebook无法从博客文章中找到更大,更合适的图像时才能使用.

注意 - Facebook已经自动搜索,没有网站所有者的任何帮助,试图找到最合适的图像.只是,如果没有使用图像或者图像太小,如果它使用用户定义的回退而不是页面上找到的其他一些非相关的任意图像,那将是很好的.

更好地了解为Facebook共享抓取机器人设定的标准将有很大帮助.或者,如果可以简单地指定仅从特定div ID或类中收集图像,并且如果没有找到使用回退的图像.

html facebook

5
推荐指数
1
解决办法
8174
查看次数

任务返回类型不是所有代码路径都返回一个值

我有一个从接口实现的方法,如下所示..

public Task CreateAsync(ApplicationUser user)
{
     if (user == null)
     {
         throw new ArgumentNullException("user");
     }
     Task.Factory.StartNew(() => { Console.WriteLine("Hello Task library!"); }); 
     //I even tried
     //Task.Run(() => { Console.WriteLine("Hello Task library!"); });

}
Run Code Online (Sandbox Code Playgroud)

上面的代码给出了一个错误,并非所有代码路径都返回一个值.

c#

5
推荐指数
2
解决办法
5226
查看次数

ASP.NET 核心 0x80004005

我是 ASP.NET Core 的新手,我正在尝试将基本的 ASP.NET Core Web 应用程序部署到 Windows 2012 R2 服务器。

我可以使用 Visual Studio express 在本地构建和运行项目,但是当我部署到服务器时,我收到 502.5 错误,确切的代码是 (0x80004005)。

日志文件为空白,事件查看器仅提供上述错误代码以外的信息。

我怀疑我的 Project.json 文件有问题,如下所示:

{
  "dependencies": {
    "Microsoft.NETCore.App": {
      "version": "1.0.1",
      "type": "platform"
    },
    "Microsoft.ApplicationInsights.AspNetCore": "1.0.0",
    "Microsoft.AspNetCore.Mvc": "1.0.1",
    "Microsoft.AspNetCore.Routing": "1.0.1",
    "Microsoft.AspNetCore.Server.IISIntegration": "1.0.0",
    "Microsoft.AspNetCore.Server.Kestrel": "1.0.1",
    "Microsoft.Extensions.Configuration.EnvironmentVariables": "1.0.0",
    "Microsoft.Extensions.Configuration.FileExtensions": "1.0.0",
    "Microsoft.Extensions.Configuration.Json": "1.0.0",
    "Microsoft.Extensions.Logging": "1.0.0",
    "Microsoft.Extensions.Logging.Console": "1.0.0",
    "Microsoft.Extensions.Logging.Debug": "1.0.0",
    "Microsoft.Extensions.Options.ConfigurationExtensions": "1.0.0"
  },

  "tools": {
    "Microsoft.AspNetCore.Server.IISIntegration.Tools": "1.0.0-preview2-final"
  },

  "frameworks": {
    "netcoreapp1.0": {
      "imports": [
        "dotnet5.6",
        "portable-net45+win8"
      ]
    }
  },

  "buildOptions": {
    "emitEntryPoint": true,
    "preserveCompilationContext": …
Run Code Online (Sandbox Code Playgroud)

c# .net-core asp.net-core

5
推荐指数
1
解决办法
1万
查看次数

将一个 git 存储库的问题链接到另一个存储库的提交

我有两个项目“项目-A”和“项目-B”。这些问题在“项目-A”中报告,但实际开发在“项目-B”中进行。

在每个提交评论中引用“project-A”是具有挑战性的。我正在探索一个更好的选择来将“项目-A”的问题链接到“项目-B”代码提交。一个简单的问题是,如果开发人员在“project-B”中提交评论“#23 fixed”,它应该在“project-A”的相关问题评论历史中可见。

git github repository

5
推荐指数
1
解决办法
3220
查看次数