小编Jes*_*dge的帖子

为什么对 localhost 的 python 请求很慢?

我有一个简单的烧瓶服务器,定义如下:

import sys

import flask
from flask import request

app = flask.Flask(__name__)
port = 4057

@app.route('/search', methods=['POST'])
def search():
  request.json['query']
  results = ['fake', 'data']
  return flask.jsonify(results)

if __name__ == '__main__':
 app.config['TEMPLATES_AUTO_RELOAD'] = True
 app.run(host='0.0.0.0', port=port, debug=(port != 80))
Run Code Online (Sandbox Code Playgroud)

我有一个这样定义的简单客户端:

import json

import requests

headers = {'content-type': 'application/json'}
resp = requests.post('http://localhost:4057/search', json.dumps({'query': 'foo'}), headers=headers)
print resp.content
Run Code Online (Sandbox Code Playgroud)

客户端可以工作,但完成请求大约需要 3 秒钟。

curl 在半秒内完成:

curl 'http://localhost:4057/search' -H 'Content-Type: application/json' -d '{"query": "foo"}'

python python-requests

3
推荐指数
1
解决办法
2395
查看次数

使用索引以递归方式快速获取目录中的所有文件

尝试#2:

人们似乎并没有理解我想要做的事情.让我看看我是否可以更清楚地说明:

1)读取文件列表比走一个目录要快得多.

2)所以让我们有一个遍历目录并将结果列表写入文件的函数.现在,在将来,如果我们想要获取该目录中的所有文件,我们就可以读取此文件而不是遍历目录.我将此文件称为索引.

3)显然,随着文件系统的更改,索引文件变得不同步.为了解决这个问题,我们有一个独立的程序挂钩到操作系统,以监视文件系统的变化.它将这些更改写入称为监视器日志的文件.在我们读取特定目录的索引文件之后,我们立即使用监视器日志将各种更改应用于索引,以便它反映目录的当前状态.

因为阅读文件比走一个目录要便宜得多,所以这比第一次调用之后的所有调用要快得多.

原帖:

我想要一个递归获取任何给定目录中的所有文件并根据各种参数过滤它们的函数.而且我希望它快速 - 就像比简单地走dir快一个数量级.而我更喜欢用Python来做.跨平台是首选,但Windows是最重要的.

这是我如何解决这个问题的想法:

我有一个名为all_files的函数:

def all_files(dir_path, ...parms...):
    ...
Run Code Online (Sandbox Code Playgroud)

我第一次调用这个函数时,它将使用os.walk构建所有文件的列表,以及有关文件的信息,例如它们是否被隐藏,符号链接等.我会将这些数据写入文件在目录中名为".index".在后续调用all_files时,将检测到.index文件,我将读取该文件而不是遍历目录.

这使得索引在添加和删除文件时不同步的问题.为此,我将在启动时运行第二个程序,检测对整个文件系统的所有更改,并将它们写入名为"mod_log.txt"的文件中.它可以检测通过Windows信号的变化,像描述的方法在这里.此文件每行包含一个事件,每个事件由受影响的路径,事件类型(创建,删除等)和时间戳组成..index文件在上次更新时也会有一个时间戳.在我读取all_files中的.index文件之后,我将拖尾mod_log.txt并查找.index文件中时间戳之后发生的任何事件.它将采用这些最近的事件,找到适用于当前目录的任何事件,并相应地更新.index.

最后,我将获取所有文件的列表,根据各种参数对其进行过滤,然后返回结果.

您如何看待我的方法?有一个更好的方法吗?

编辑:

检查此代码.通过递归步行读取缓存列表,我看到了极大的加速.

import os
from os.path import join, exists
import cProfile, pstats

dir_name = "temp_dir"
index_path = ".index"

def create_test_files():
    os.mkdir(dir_name)
    index_file = open(index_path, 'w')
    for i in range(10):
        print "creating dir: ", i
        sub_dir = join(dir_name, str(i))
        os.mkdir(sub_dir)
        for i in range(100):
            file_path = join(sub_dir, str(i))
            open(file_path, 'w').close() 
            index_file.write(file_path + "\n")
    index_file.close()
#

#  0.238 seconds
def …
Run Code Online (Sandbox Code Playgroud)

python directory indexing performance all-files

2
推荐指数
1
解决办法
3873
查看次数

Firebase延迟加载

我可以让firebase懒洋洋地加载我的数据吗?假设我的应用程序由一个包含一百万个节点的树组成,用户可以折叠,展开和修改.绝大多数节点将在绝大多数时间内保持崩溃状态,因此将所有内容保存在内存中是没有意义的.据我所知,firebase在启动时将数据库中的所有内容传输到客户端,并不打算以任何其他方式使用.那是对的吗?

lazy-loading firebase

2
推荐指数
1
解决办法
1374
查看次数

在Javascript中获取派生构造函数的名称

是否可以在以下示例中获取派生的"类"的名称?我想以某种方式将输出设置为"ChildClass",而不是它的"ParentClass".

function ParentClass() { this.name = 'Bob' }
function ChildClass() { this.name = 'Fred' }
ChildClass.prototype = Object.create(ParentClass.prototype);

var child_instance = new ChildClass()
console.log('ChildClass type:', child_instance.constructor.name)
Run Code Online (Sandbox Code Playgroud)

我意识到我可以this.my_type = 'ChildClass'在ChildClass构造函数中做,但是我有许多扩展ParentClass的类,并且在任何地方都这样做会很不方便.

javascript inheritance

2
推荐指数
1
解决办法
1151
查看次数

Backbone.js - 更改事件未触发

<div class='container'></div>

<script>
// Define models.  View is a div with a counter.
Tasks = Backbone.Collection.extend({localStorage: new Store("tasks")})
Tasks = new Tasks
Tasks.bind('add', function (task_model) {
  task_model.bind('change', function(){ render(this) })
  $('.container').append(render(task_model))
})

function render(model) {
  console.log('rendering, daily_times: ', model.get('daily_times'))
  var div = '<div class="current task_time" task_id="%id">%time</div>'
  var time_str = model.get('daily_times')['Jun 28 2011']
  div = div.replace('%id', model.id).replace('%time', time_str)
  $('div[task_id="%id"]'.replace('%id', model.id)).replaceWith(div)
  return div
}

// Start pinging
setInterval(ping, 1000)
Tasks.create({daily_times:{'Jun 28 2011':0}})
function ping() { 
  console.log('ping')
  Tasks.each(function(task) {
    var times = task.get('daily_times') …
Run Code Online (Sandbox Code Playgroud)

javascript jquery backbone.js

1
推荐指数
1
解决办法
5428
查看次数

为什么 `git blame` 与 GitHub blame 不同?

如果我克隆引导程序: git clone https://github.com/twbs/bootstrap

然后做一个 git 责备: git blame js/src/alert.js

看起来每一行最后都被同一个人触动过:

^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   1) import Util from './util'
^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   2)
^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   3)
^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   4) /**
^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   5)  * --------------------------------------------------------------------------
^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   6)  * Bootstrap (v4.0.0-alpha.6): alert.js
^7ffb61a (Patrick H. Lauke 2017-04-17 00:04:49 +0100   7)  * Licensed …
Run Code Online (Sandbox Code Playgroud)

git github

0
推荐指数
2
解决办法
325
查看次数