小编ohe*_*ohe的帖子

S3中文件名的最大长度是多少

也许我是盲人但在S3文档中我找不到可以在S3上传的最大文件名长度.

amazon-s3 amazon-web-services

73
推荐指数
1
解决办法
4万
查看次数

在Matplotlib中,有没有办法知道可用输出格式的列表

根据Matplotlib文档,matplotlib.figure.save_fig采用可选参数format(参见matplotlib.figure文档).

此参数采用"活动后端支持的文件扩展名之一"(如官方文档所述).

我的观点是:对于特定的后端,如何知道支持的扩展名列表?

可访问的可用后端列表可通过matplotlib.rcsetup.all_backends.这些后端可用,matplotlib.backends但我找不到检索支持的扩展的方法.

python matplotlib

30
推荐指数
1
解决办法
1万
查看次数

为什么dict_items对象不支持索引?

我知道您可以强制dict_items转换list为允许项目索引.但我不知道为什么不允许直接进行此操作.是因为dict_items物体是发电机吗?如果是这样的话,当我看到的时候

>>> {"foo": "bar", "baz": "qux"}.items()
dict_items([('foo', 'bar'), ('baz', 'qux')]) 
Run Code Online (Sandbox Code Playgroud)

repr什么时候调用Python来评估我的生成器?

python dictionary

7
推荐指数
1
解决办法
626
查看次数

类型错误'class'对象不可调用

我有一个类MyStreamListener,我试图从另一个文件调用,但我得到了type error 'MyStreamListener' not callable.从我在引用用户创建的类时所读到的,可能是因为我试图在python中访问保留关键字,但我已经尝试更改类的名称.还有什么我做错了吗?

functionality.py

from authenticate import CONSUMER_KEY, CONSUMER_SECRET, ACCESS_TOKEN, ACCESS_TOKEN_SECRET
from twitter_stream import MyStreamListener

def oauth_authenticate():
        auth = tweepy.OAuthHandler(CONSUMER_KEY, CONSUMER_SECRET)
        auth.set_access_token(ACCESS_TOKEN, ACCESS_TOKEN_SECRET)
        api = tweepy.API(auth)

        return api

def streaming():
        api = oauth_authenticate()
        streamListener = MyStreamListener()

        stream = tweepy.Stream(auth=api.auth, listener=streamListener())

if __name__ == '__main__':
        print "wanting to stream"
        streaming()
        print "EXITING"
Run Code Online (Sandbox Code Playgroud)

twitter_stream.py

import tweepy

class MyStreamListener(tweepy.StreamListener):

        def on_status(self, status):
                print(status.text)
Run Code Online (Sandbox Code Playgroud)

python tweepy

6
推荐指数
1
解决办法
6660
查看次数

与文件名中的冒号“:”作斗争

我有以下代码,用于加载大量“csv.gz”并将它们转储到其他文件夹中,并将源文件名作为一列。

object DailyMerger extends App {
  def allFiles(path:File):List[File]= {
    val parts=path.listFiles.toList.partition(_.isDirectory)
    parts._2 ::: parts._1.flatMap(allFiles)
  }

  val sqlContext = SparkSession.builder().appName("DailyMerger").master("local").getOrCreate()
  val files = allFiles(new File("/Logs/"))
      .map(_.getAbsolutePath())
      .filter(_.endsWith(".csv.gz"))

  val df = sqlContext
      .read
      .format("com.databricks.spark.csv")
      .option("header", "true")
      .option("inferSchema", "true").load(files:_*)
      .withColumn("SENSOR", input_file_name())
      .write
      .option("header", "true")
      .option("compression", "gzip")
      .csv("/tmp/out")
 }
Run Code Online (Sandbox Code Playgroud)

它对我的测试数据来说就像一个魅力。但在我的“真实”数据中,我有很多文件名称中包含“:”。

当 Hadoop 尝试生成关联的 crc 文件时,会导致以下异常:

java.lang.IllegalArgumentException: java.net.URISyntaxException: Relative path in absolute URI: .ac:a3:1e:c6:5c:7c.csv.gz.crc
    at org.apache.hadoop.fs.Path.initialize(Path.java:206)
    at org.apache.hadoop.fs.Path.<init>(Path.java:172)
    at org.apache.hadoop.fs.Path.<init>(Path.java:94)
    at org.apache.hadoop.fs.ChecksumFileSystem.getChecksumFile(ChecksumFileSystem.java:90)
    at org.apache.hadoop.fs.ChecksumFileSystem$ChecksumFSInputChecker.<init>(ChecksumFileSystem.java:145)
    at org.apache.hadoop.fs.ChecksumFileSystem.open(ChecksumFileSystem.java:346)
    at org.apache.hadoop.fs.FileSystem.open(FileSystem.java:766)
    at org.apache.hadoop.mapreduce.lib.input.LineRecordReader.initialize(LineRecordReader.java:85)
    at org.apache.spark.sql.execution.datasources.HadoopFileLinesReader.<init>(HadoopFileLinesReader.scala:46)
    at org.apache.spark.sql.execution.datasources.text.TextFileFormat$$anonfun$buildReader$2.apply(TextFileFormat.scala:105)
    at …
Run Code Online (Sandbox Code Playgroud)

hadoop scala apache-spark

6
推荐指数
1
解决办法
6198
查看次数

如何使用“this”在反应组件中编写内联js事件处理程序代码

我有一个 html 代码,我可以用 jsx 重写它

<div id="parent">                      
    <div id="child" onclick="this.parentElement.style.background = 'orange';">                          
        <img src="img/img2.png"></img>
    </div>
</div>;
Run Code Online (Sandbox Code Playgroud)

这里,在jsx中,this指的是react组件。但是,在上面的 html 代码中,this指的是#child.

谁能告诉我如何#child在不编写单独的处理程序函数的情况下编写 jsx 中的 onclick 代码,但与上面编写的方法相同。

html javascript reactjs

5
推荐指数
1
解决办法
1万
查看次数

如何生成python语法以及解释器如何理解它

我想知道如何生成Python语言的语法以及解释器如何理解它.

在python中,该文件graminit.c似乎实现了语法,但我不清楚它.

更广泛地说,生成语法的不同方法是什么,并且在Perl,Python或Lua等语言中如何实现语法之间存在差异.

python grammar

4
推荐指数
1
解决办法
786
查看次数

是否有(简单)方法在Python中解析CRL?

我正在尝试做一些愚蠢的事情:加载CRL并输出已撤销的证书序列号列表.

使用M2Crypto加载CRL完成:

import M2Crypto
crl = M2crypto.X509.load_crl('my.crl')
Run Code Online (Sandbox Code Playgroud)

但我真的很惊讶返回的对象只有一个有用的

crl.as_text()
Run Code Online (Sandbox Code Playgroud)

使用一些正则表达式,我可以解析输出以检索已撤销的连续出版物.但还有另一种方法吗?

有关信息,这是一个经典的CRL as_text输出.

Certificate Revocation List (CRL):
        Version 2 (0x1)
        Signature Algorithm: sha1WithRSAEncryption
        Issuer: /C=FR/ST=IDF/L=Paris/O=XXXXX/OU=XXXXX/CN=XXXXX Certificate Authority
        Last Update: Nov  6 21:49:51 2010 GMT
        Next Update: Nov  7 21:49:51 2010 GMT
Revoked Certificates:
    Serial Number: 02
        Revocation Date: Aug 10 15:40:09 2010 GMT
    Serial Number: 03
        Revocation Date: Sep  9 15:12:24 2010 GMT
    Serial Number: 05
        Revocation Date: Aug 17 14:18:22 2010 GMT
    Serial Number: 06
        Revocation Date: Aug 18 08:57:15 …
Run Code Online (Sandbox Code Playgroud)

python pki certificate-revocation x509

3
推荐指数
1
解决办法
4994
查看次数

使用libssl进行Bad Base64编码

假设以下代码,我的base64编码有奇怪的错误.

#include <openssl/bio.h>
#include <openssl/buffer.h>
#include <stdio.h>
#include <string.h>

char * base64(unsigned char * input, int length) {

    BIO *b64 = NULL;
    BIO * bmem = NULL;
    BUF_MEM *bptr = NULL;
    char * output = NULL;

    b64 = BIO_new((BIO_METHOD *)BIO_f_base64());
    BIO_set_flags(b64, BIO_FLAGS_BASE64_NO_NL);
    bmem = BIO_new(BIO_s_mem());
    b64 = BIO_push(b64, bmem);
    BIO_write(b64, input, length);
    BIO_flush(b64);
    BIO_get_mem_ptr(b64, &bptr);

    output = (char *) calloc (bptr->length, sizeof(char));
    memcpy(output, bptr->data, bptr->length);

    BIO_free_all(b64);

    return output;
}


int main(int argc, char *argv[]) {


    char * based_string = NULL; …
Run Code Online (Sandbox Code Playgroud)

c base64 openssl

2
推荐指数
1
解决办法
1712
查看次数

模块重新加载时的isinstance行为

给定以下两个.py文件:

aclass.py

class A(object):
    pass
Run Code Online (Sandbox Code Playgroud)

main.py

def importer(klass):
    """
    Used to import classes from there python qalname
    """
    import_ = lambda m, k: getattr(__import__(m, fromlist=k), k)
    klass = klass.split('.')
    module = '.'.join(klass[:-1])
    klass = klass[-1]
    return import_(module, klass)

from aclass import A

import_A = importer('aclass.A')
print isinstance(A(), import_A)  # Expected to be true 
print isinstance(import_A(), A)  # Expected to be true 
Run Code Online (Sandbox Code Playgroud)

在此阶段,一切正常(我的程序打印True\nTrue),但是如果我修改importer方法以强制重新加载,即:

这行:

    import_ = lambda m, k: getattr(__import__(m, fromlist=k), k)
Run Code Online (Sandbox Code Playgroud)

替换为:

    import_ = lambda m, …
Run Code Online (Sandbox Code Playgroud)

python import reload isinstance

2
推荐指数
1
解决办法
701
查看次数