标签: proxy

Javascript:REGEX将所有相对Urls更改为Absolute

我正在创建一个Node.js webscraper/proxy,但是我在解析源代码的脚本部分中找到的相对Urls时遇到了问题,我认为REGEX可以解决这个问题.虽然我不知道如何实现这一目标.

无论如何我可以解决这个问题吗?

此外,我对这样做更容易,因为我对其他代理如何解析网站感到困惑.我认为大多数只是美化的网站刮刀,可以读取网站的来源中继所有链接/表格回到代理.

javascript regex proxy node.js web-scraping

10
推荐指数
1
解决办法
2万
查看次数

Python:在urllib2中禁用http_proxy

我使用代理集作为环境变量(export http_proxy = example.com).对于使用urllib2的一个调用,我需要暂时禁用它,即.取消设置http_proxy.我已经尝试了文档和互联网中建议的各种方法,但到目前为止一直无法取消代理.到目前为止,我尝试过:

# doesn't work
req = urllib2.Request('http://www.google.com')
req.set_proxy(None,None)
urllib2.urlopen(req)

# also doesn't work
urllib.getproxies = lambda x = None: {}
Run Code Online (Sandbox Code Playgroud)

python proxy urllib2 environment-variables

10
推荐指数
2
解决办法
8195
查看次数

如何在.gitconfig代理身份验证中转义特殊字符

我正在尝试在代理后面使用git,我已经在.gitconfig文件中设置了代理详细信息,如下所示.

 [http]
     proxy = http://<username>:<password>@<proxy_ip>:<proxy_port>
Run Code Online (Sandbox Code Playgroud)

问题是用户名和密码字段包含需要转义的'@'字符.如何转义?

linux git bash proxy

10
推荐指数
1
解决办法
4278
查看次数

使用Http代理v/s https代理的优缺点?

JVM允许代理属性http.proxyHost和http.proxyPort用于指定HTTP代理服务器,https.proxyHost和https.proxyPort用于指定HTTPS代理服务器.

我想知道使用HTTPS代理服务器与HTTP代理服务器相比是否有任何优势?

通过HTTPS代理访问https url比从HTTP代理访问它更麻烦吗?

https proxy http

10
推荐指数
4
解决办法
2万
查看次数

从版本1.7.9开始,git在代理后面不起作用

从git 1.7.9开始,我无法通过代理服务器克隆,获取或推送到存储库.它适用于1.7.8版本,但较新版本(包括最新版本)会抛出此错误:

error: Failure when receiving data from the peer while accessing http://github.com/...
fatal: HTTP request failed
Run Code Online (Sandbox Code Playgroud)

我在git config中设置了http.proxy属性,这在1.7.8中已经足够了.我能够获得更新版本的git运行的唯一方法是使用cntlm.

我究竟做错了什么?

git proxy

10
推荐指数
1
解决办法
2482
查看次数

为什么我不能将proxy_set_header放在if子句中?

使用此配置:

server {
    listen 8080;
    location / {
        if ($http_cookie ~* "mycookie") {
            proxy_set_header X-Request $request;
            proxy_pass http://localhost:8081;
        }
    }
}
Run Code Online (Sandbox Code Playgroud)

我重新加载nginx服务时出现此错误:

Reloading nginx configuration: nginx: [emerg] "proxy_set_header" directive is not allowed here in /etc/nginx/conf.d/check_cookie.conf:5
nginx: configuration file /etc/nginx/nginx.conf test failed
Run Code Online (Sandbox Code Playgroud)

这个配置工作正常,但它没有做我想要的:

server {
    listen 8080;
    location / {
        proxy_set_header X-Request $request;
        if ($http_cookie ~* "mycookie") {
            proxy_pass http://localhost:8081;
        }
    }
}
Run Code Online (Sandbox Code Playgroud)

为什么我不能将proxy_set_header指令放在if子句中?

configuration proxy nginx

10
推荐指数
2
解决办法
8627
查看次数

Jenkins奴隶使用ssh网关

我有jenkins在运行master.com,并希望有一个奴隶继续运行slave.com.然而,为了ssh到奴隶,我需要经历gateway.com.通常从我的普通帐户ssh到这台机器,我只需使用〜/ .ssh/config来设置ProxyCommand.

我在我的/var/lib/jenkins/.ssh/config文件中复制了这个设置:

Host slave.com
 User felix
 ProxyCommand ssh felix@gateway.com nc %h %p
Run Code Online (Sandbox Code Playgroud)

我为网关和从设备设置了公钥认证,这样从命令行我可以直接从ssh jenkins@master.com到felix@slave.com简单地做ssh slave.com.

不幸的是Jenkins似乎不尊重我的.ssh/config设置,并且连接超时(奴隶无法直接访问).Jenkins从属日志文件是:

java.io.IOException: There was a problem while connecting to slave.com:22
....
Caused by: java.net.ConnectException: Connection timed out
Run Code Online (Sandbox Code Playgroud)

我如何判断jenkins是否尊重我的.ssh/config文件?我是否错过了为jenkins配置master jenkins帐户或.ssh/config文件的步骤?

ssh proxy jenkins

10
推荐指数
1
解决办法
3954
查看次数

golang ReverseProxy无法正常工作

我不知道为什么这个反向代理不起作用.我见过几个例子,我发现它没有任何问题.

package main

import (
    "log"
    "net/url"
    "net/http"
    "net/http/httputil"
)

func report(r *http.Request){
  log.Print("URL: " + r.URL.Path)
  log.Print("Scheme: " + r.URL.Scheme)
  log.Print("Host: " + r.URL.Host)
  //r.URL.Scheme = "http"
  //r.URL.Host = "stackoverflow.com"

  //r.Header.Set("Host", "stackoverflow.com")
  //log.Print("Header Host: " + r.Header.Get("Host"))
}

func main() {
  proxy := httputil.NewSingleHostReverseProxy( &url.URL{Scheme:"http",Host:"myrealserver.com"})
    proxy.Director = report
    // http.Handle("/", proxy)
    error := http.ListenAndServe("mylocalhost.com:8080", proxy)
    if(error != nil) {
        log.Fatal(error)
    }
}
Run Code Online (Sandbox Code Playgroud)

它记录:

2014/04/18 21:32:50 URL: /arg/es
2014/04/18 21:32:50 Scheme:
2014/04/18 21:32:50 Host:
2014/04/18 21:32:50 http: proxy error: unsupported …
Run Code Online (Sandbox Code Playgroud)

proxy go

10
推荐指数
2
解决办法
1万
查看次数

Mitmproxy url过滤器

我在Mac上使用mitmproxy.我想通过指定网址过滤流量."拦截"功能允许我在注意到过滤网址时暂停通信.我的问题是 - 如何在不暂停通信的情况下过滤流量?我希望它继续更新,而无需推送"a"或"A".

proxy networking filter mitmproxy server

10
推荐指数
1
解决办法
5679
查看次数

Chrome:POST/OPTIONS请求因net :: ERR_TIMED_OUT而失败

OPTION/POST请求与控制台错误不一致,错误为err_timed_out.我们得到的问题不一致,有时只能观察到.否则请求会从后端获得适当的响应.当它超时时,请求甚至不会到达服务器.

我对这些东西做了一些研究,发现由于最多6个连接到资源限制,它可能会等待释放连接.但是,我没有看到任何其他请求待处理,所有其他请求都已完成.

在时间轴中,我总能看到它停滞了20.00秒.大部分时间都是一样的.但是,它只表明它在时间轴上暂停了一段时间.

ERR_Connection_Timed_Out失败,请求状态显示失败.请帮忙.

网络时间

在此输入图像描述

控制台错误

在此输入图像描述

dns proxy google-chrome xmlhttprequest angularjs

10
推荐指数
1
解决办法
4063
查看次数