我很想写自己的,但我现在没有足够的时间.我已经看过维基百科的开源爬虫列表,但我更喜欢用Python编写的东西.我意识到我可能只是使用维基百科页面上的一个工具并将其包装在Python中.我可能最终会这样做 - 如果有人对这些工具有任何建议,我愿意听到他们的意见.我通过它的网络界面使用了Heritrix,我发现它非常麻烦.我肯定不会为即将推出的项目使用浏览器API.
提前致谢.另外,这是我的第一个问题!
假设,我需要在特定的网站上执行一组程序说,填写一些表格,点击提交按钮,将数据发送回服务器,接收响应,再根据响应做一些事情并将数据发送回服务器的网站.我知道python中有一个webbrowser模块,但我想在不调用任何Web浏览器的情况下执行此操作.它必须是一个纯粹的脚本.
python中是否有可用的模块,可以帮助我做到这一点？
谢谢
如何使用Python 在本网站上下载和读取CSV数据: