小编mor*_*030的帖子

使用代理与scrapy-splash

我正在尝试使用代理(proxymesh)和scrapy-splash.我有以下(相关)代码

PROXY = """splash:on_request(function(request)
    request:set_proxy{
        host = http://us-ny.proxymesh.com,
        port = 31280,
        username = username,
        password = secretpass,
    }
    return splash:html()
end)"""
Run Code Online (Sandbox Code Playgroud)

并在start_requests中

def start_requests(self):
    for url in self.start_urls:
        print url
        yield SplashRequest(url, self.parse,
            endpoint='execute',
            args={'wait': 5,
                  'lua_source': PROXY,
                  'js_source': 'document.body'},
Run Code Online (Sandbox Code Playgroud)

但它似乎没有用.self.parse完全没有被调用.如果我将端点更改为'render.html',我会点击self.parse方法,但是当我检查标题(response.headers)时,我可以看到它不会通过代理.我确认当我将http://checkip.dyndns.org/设置为启动URL并在解析响应时看到我的旧ip地址.

我究竟做错了什么?

python splash-screen scrapy

4
推荐指数
1
解决办法
3478
查看次数

具有多对多关系模型的 Flask-Admin 视图

我有这个基本的烧瓶管理员设置,包含用户和用户角色

class Role(db.Model, RoleMixin):
    id = db.Column(db.Integer(), primary_key=True)
    name = db.Column(db.String(80), unique=True)
    description = db.Column(db.String(255))

class User(db.Model, UserMixin):
    id = db.Column(db.Integer, primary_key=True)
    email = db.Column(db.String(255), unique=True)
    password = db.Column(db.String(255))
    active = db.Column(db.Boolean())
    confirmed_at = db.Column(db.DateTime())
    roles = db.relationship('Role', secondary="roles_users",
                            backref=db.backref('users', lazy='dynamic'))
class RolesUsers(db.Model):
    __tablename__="roles_users"
    id = db.Column(db.Integer(), primary_key=True)
    user_id = db.Column(db.Integer(), db.ForeignKey('user.id', ondelete='CASCADE'))
    role_id = db.Column(db.Integer(), db.ForeignKey('role.id', ondelete='CASCADE'))
Run Code Online (Sandbox Code Playgroud)

我想显示将显示特定用户具有的角色的用户视图。对于一对多的关系,我会做这样的事情

class UserView(ModelView):
    column_hide_backrefs = False

class Role(db.Model, RoleMixin):
    ...
    def __str__(self):
        return self.name
Run Code Online (Sandbox Code Playgroud)

我将如何在多对多关系中做到这一点

python flask flask-admin

1
推荐指数
1
解决办法
3093
查看次数

标签 统计

python ×2

flask ×1

flask-admin ×1

scrapy ×1

splash-screen ×1