小编Tob*_*and的帖子

我是Spark和Spark SQL的新手.

如何createOrReplaceTempView在Spark工作？

如果我们将一个RDD对象注册为一个表,那么火花会将所有数据保存在内存中吗？

我在排序包含不是英文字母的字符串时遇到问题(š,č,ž,..)

这是小提琴:http://fiddle.jshell.net/vhhgh/

这些字母来自斯洛文尼亚字母.

我正在尝试加载位于项目文件夹中的XML文件(使用Visual Studio 2012).

结构是这样的:

solutionRoot\
-  service\
--   ServiceClass.cs
--   AppValues.xml  <-- this is the file I want to load

在我的ServiceClass中,我尝试使用以下代码从XML文件中读取:

public String GetXmlElement(String elementName)
{
    [....]
    XDocument document = XDocument.Load(@"\service\AppValues.xml");
    [...]
}

当我尝试测试代码时,会出现以下错误:

Test method PandaTests.ServiceTest.ReadXmlCanReadXml threw exception: 
System.IO.DirectoryNotFoundException: Could not find a part of the path 
'C:\Users\MyName\Documents\GitHub\project\Project22\PandaTests\bin\Debug\service\AppValues.xml'.

这显然是我的路径的问题,但我无法弄清楚如何使相对路径正确.我在这里查看了有关堆栈溢出的其他问题,但其中许多似乎过度参与.是否有一种简单的方法来加载XML文件而不提供绝对路径？

我正在尝试创建一个委托身份验证提供程序来执行逻辑,然后根据某些任意逻辑决定选择哪个authenticationProvider; 为了这个例子,如果用户名以前缀开头.

我目前的SecurityConfig将一次尝试一个身份验证提供程序:

public class SecurityConfig extends WebSecurityConfigurerAdapter {

    private final MyCustomCredentialAuthProvider myAuthProvider;

    ...

    @Override
    protected void configure(AuthenticationManagerBuilder auth) {
        auth
          .ldapAuthentication().configuration(...).here(...).etc(...).and() // ldapAuthenticationProvider is created here
          .authenticationProvider(myAuthProvider).and()
          // more authentication providers to be added in the future
    }
}

根据用户名,我想选择是否要使用尝试提供商,因此如果用户名不是以特定前缀("ldap","custom","ad")开头,则不会调用它们,"等"......),所以:

@Component
public class DelegatingProvider implements AuthenticationProvider {

    // Problem: How do I create this ldapAuthenticationProvider bean?
    private final LdapAuthenticationProvider ldapAuthenticationProvider;
    private final MyCustomCredentialAuthProvider myAuthProvider;

    ...

    @Override
    public Authentication authenticate(final Authentication authentication) throws AuthenticationException {
        if (authentication.getName() == null) { …

我正在研究一个内部管理用户和会话的java Spring Boot项目。它依靠OIDC（AWS Cognito是身份提供者）进行登录，我希望可以注销用户。我从OIDC规范中了解到的反向通道注销信息是：

1. 我必须在后端应用程序中提供注销端点。我在Java Spring Boot应用程序中将Pac4J用作我的OIDC库，并且已logout按照Pac4J Spring Security文档启用了端点

2. 如果用户从身份提供者注销，则身份提供者AWS Cognito应该向注销端点发送请求

3. 当我在此终结点上收到有效的呼叫（按照OIDC规范）时，我必须销毁与我的应用程序进行的用户会话。

但是，从身份提供者（AWS Cognito）注销的用户似乎并未导致对我的应用程序的注销端点的调用。

我无法在AWS Cognito文档中找到有关此反向通道行为的文档。

1. 我是否正确了解反向通道注销？
2. OIDC注销仍处于草案状态（截至2019年3月12日），当前是否不支持此功能？

应用程序通过 Open ID Connect 协议与AWS Cognito 进行通信，AWS Cognito连接到ADFS，通过 SAML 进行通信。Cognito 本质上是“代理”ADFS 服务器。

ADFS 拥有应用程序所需的组映射，我想将这些组作为实际的 Cognito 组导入 Cognito - 然后应用程序将从cognito:groupsCognito 提供的 ID 令牌中读取该组。

在 AWS Cognito 用户池设置中，我没有看到将 ADFS 组映射到 Cognito 组的方法——我必须绝对依赖我的用户池的自定义属性，我可以映射到 ADFS 属性，还是我错过了一些允许 Cognito 动态创建新组并自动将用户分配到 Cognito 中的组的配置？

编辑：澄清一下，是否可以设置 Cognito 在导入用户时添加/创建组（不是作为自定义属性，而是实际可管理的认知组）？

与Regex to Validate JSON一样，出于纯粹的兴趣和新颖性的原因，我正在寻找一个正则表达式来验证包含 GraphQL 查询的字符串在语法上是否有效。

我知道有很多库可以让我用不同的语言验证 GraphQL，但我专门寻找使用正则表达式的解决方案。

有没有人破解了正则表达式的情况，可以确定字符串是否具有有效的 GraphQL 查询语法 - 根据spec.graphql.org的最新规范？

我在点击按钮时从URL加载图像,并将其存储为位图.现在我想知道如何将下载的图像保存到SD卡以及系统中.

我试图通过以下方式实现:

package com.v3.thread.fetchImage;

import java.io.File;
import java.io.FileOutputStream;
import java.io.IOException;
import java.io.InputStream;
import java.net.HttpURLConnection;
import java.net.MalformedURLException;
import java.net.URL;
import android.app.Activity;
import android.graphics.Bitmap;
import android.graphics.BitmapFactory;
import android.os.Bundle;
import android.os.Environment;
import android.provider.MediaStore;
import android.util.Log;
import android.view.View;
import android.widget.Button;
import android.widget.EditText;
import android.widget.ImageView;
import android.widget.Toast;

public class MainThreadActivity extends Activity {
    ImageView imView;
    EditText ed1;
    Bitmap bmImg;
    Button bt, btSave;
    String imageUrl = "";
    int visibilty = 0;

    /** Called when the activity is first created. */
    @Override
    public void onCreate(Bundle icicle) { …

如何显示存储过程中的消息？

显示消息是否存在行的正确语法是什么？

在SQL Server中,PRINT在WORKBENCH中显示消息bat ...

CREATE PROCEDURE `new_proced` (
    in myid     int(3)
)
BEGIN
    if not exists (select id from table where id = myid)
then
    show message 'Row no exists';
else
    show message 'Row exists';
end if;
END

粗略浏览一下Spark代码库后，我还没有找到它们。在大多数文档和教程示例中，人们似乎正在使用“裸”字符串文字来指定联接类型。Spark是否提供了将“ leftouter”，“ inner”，“ cartesian”等定义为public val的对象或类，还是仅依赖于字符串常量？

也就是说，是否可以替代：

dataframe.join(
  right = anotherDataFrame,
  joinExprs = expr("1 = 1"),
  joinType = "leftouter"
)

看起来像：

dataframe.join(
  right = anotherDataFrame, 
  joinExprs = expr("1 = 1"),
  joinType = SparkJoins.LeftOuter
)

？

我正在尝试从http://en.wikipedia.org/wiki/List_of_FIFA_World_Cup_finals的 “决赛列表”表（第二表）中删除Year＆Winners（第一和第二列） ：我正在使用以下代码：

import urllib2
from BeautifulSoup import BeautifulSoup

url = "http://www.samhsa.gov/data/NSDUH/2k10State/NSDUHsae2010/NSDUHsaeAppC2010.htm"
soup = BeautifulSoup(urllib2.urlopen(url).read())
soup.findAll('table')[0].tbody.findAll('tr')
for row in soup.findAll('table')[0].tbody.findAll('tr'):
    first_column = row.findAll('th')[0].contents
    third_column = row.findAll('td')[2].contents
    print first_column, third_column

通过上面的代码，我能够获得第一列和第三列。但是，当我使用与相同的代码时http://en.wikipedia.org/wiki/List_of_FIFA_World_Cup_finals，它找不到tbody作为其元素，但是当我检查该元素时可以看到tbody。

url = "http://en.wikipedia.org/wiki/List_of_FIFA_World_Cup_finals"
soup = BeautifulSoup(urllib2.urlopen(url).read())

print soup.findAll('table')[2]

    soup.findAll('table')[2].tbody.findAll('tr')
    for row in soup.findAll('table')[0].tbody.findAll('tr'):
        first_column = row.findAll('th')[0].contents
        third_column = row.findAll('td')[2].contents
        print first_column, third_column

这是我从评论错误中得到的：

'
---------------------------------------------------------------------------
AttributeError                            Traceback (most recent call last)
<ipython-input-150-fedd08c6da16> in <module>()
      7 # print soup.findAll('table')[2]
      8 
----> 9 soup.findAll('table')[2].tbody.findAll('tr')
     10 for row in soup.findAll('table')[0].tbody.findAll('tr'): …

我有多语言字符串格式如下:

[en]这是英语[es] estoesespañol[fr]C'estfrançaise[it]Questoèitaliano

语言的顺序并不总是相同,并不是所有语言都可用.

我正在尝试提取特定的语言字符串,但没有成功.语言字符串包含HTML,以及任何类型的特殊字符,空格,换行符,制表符等.

假设我想提取英语部分; 我需要一个正则表达式能够匹配[en]部分之后的所有内容(新行,回车符,特殊字符,制表符等),直到新语言字符串的开头:([az] {2})

这不起作用:还返回法语字符串,如果西班牙语字符串位于过去位置,则不返回任何内容.

/\[es\]((.|\n|\t|\r)*)(\[([a-z]{2})\])/u

我不能写一个正则表达式:"[es]之后的任何东西,不是括号内的两个字母或字符串的结尾"

任何帮助都感激不尽!