我很难弄清楚如何构建我系统的最后一块.目前我正在运行一个Tomcat服务器,它有一个响应客户端请求的servlet.每个请求反过来将一个处理消息添加到异步队列(我可能会通过Spring或更可能是Amazon SQS使用JMS).
事件的顺序是这样的:
发送方:
1.获取客户端请求
2.使用唯一ID将一些数据添加到与此请求相关的数据库中
3.将表示此请求的消息对象添加到消息队列
接收方:
1.从队列中提取新的消息对象
2.打开对象并根据msg对象中包含的信息从网站获取一些信息.
3.发送电子邮件警报
4.更新我的数据库行(相同的唯一ID)以及为此请求完成操作的信息.
我正在努力弄清楚如何妥善处理接收方.一方面,我可以创建一个简单的java程序,我从命令行启动它,选择队列中的每个项目并处理它.这样安全吗?让该程序作为Tomcat容器中的另一个线程运行更有意义吗?我不想连续地这样做,这意味着接收端应该能够一次处理多个对象 - 使用多个线程.我想让它一直24小时都在运行.
建立接收方有哪些选择?
我要描述的内容实际上是两个不同系统之间的两阶段提交问题,我正在寻找有关如何处理它的建议.在我们的Web应用程序中,我们将一些昂贵的/第三方操作(例如发送电子邮件)卸载到带外后台工作进程(我们称之为我们的作业基础结构).
例如,要发送电子邮件,我们会在数据库中创建电子邮件对象和电子邮件作业.然后,我们必须等待我们的工作监视器获取电子邮件作业并发送它.作业监视器基本上通过在空闲时每隔几秒轮询一次数据库来工作.
但是,这会增加电子邮件发送的延迟,并通过轮询添加我在数据库中视为过度负载的内容.如果我们能够在创建电子邮件后立即将电子邮件作业放入队列,那将会更好.
然而,这目前失败有两个原因.首先,队列通常比Web请求快得多.在Web请求提交其数据库事务之前,将拾取电子邮件以进行处理,因此无法正确生成电子邮件.其次,如果Web请求失败,它将回滚其数据库事务,这意味着不应该发送电子邮件.但是,如果它已经被放入队列,则它不再在请求的控制之下.
在队列和数据库之间创建两阶段提交是否有良好的策略?作为参考,我们使用RabbitMQ和MySQL与InnoDB表.我提出的一个想法是在提交数据库事务后将电子邮件作业粘贴到队列中,但这样就可能使电子邮件永远不会排队.我仍然需要创建一个轮询流程来监视应该已发送但未发送的电子邮件.
是否可以在Heroku上为Clojure webapp创建一个作业队列?我看到你可以做延迟工作并使用芹菜用于Rails和Django,Clojure有类似的东西吗?
我正在寻找一个解决方案来推出jquery版本,Drupal本身也包括在内.它的版本较旧.实际上没有问题 - 但是一个:DI使用.animate()函数,队列为false,没有这个属性(因为这个属性是jquery 1.7中的.animate()addet),它不是我想要的动画.
代码是:
//When mouse rolls over
$("#login").bind('mouseover mouseenter',function(){
$("#logo").stop().delay(500).animate({top:'-44px'},{queue:false, duration:600, easing: 'swing'})
$("#login").stop().animate({top:'89px'},{queue:false, duration:600, easing: 'easeOutBounce'})
});
//When mouse is removed
$("#login").bind('mouseout mouseleave',function(){
$("#logo").stop().animate({top:'6px'},{queue:false, duration:600, easing: 'easeOutBounce'})
$("#login").stop().animate({top:'40px'},{queue:false, duration:600, easing: 'swing'})
});
Run Code Online (Sandbox Code Playgroud)
也许你可以帮我找到解决方案?问题,为什么我要排除我用于此(1.8.3)的jquery版本是一个Drupal模块没有显示wysiwyg(CKEditor),当jquery 1.8.3被包含在另外,并且不幸的是我无法替换jquery jquery 1.8.3的核心版本:(
我有一个priority_queue,我想修改它的一些内容(优先级值),那么队列会被使用吗?
这取决于它是否按下推/弹(更可能,因为你只需要"插入",而不是整体),或访问顶部或弹出时.
我真的想改变队列中的一些元素.像这样的东西:
priority_queue<int> q;
int a=2,b=3,c=5;
int *ca=&a, *cb=&b, cc=&c;
q.push(a);
q.push(b);
q.push(c); //q is now {2,3,5}
*ca=4;
//what happens to q?
// 1) {3,4,5}
// 2) {4,2,5}
// 3) crash
Run Code Online (Sandbox Code Playgroud) 我有一个使用Volley实现的简单身份验证系统.它是这样的:在登录时从服务器获取一个令牌 - >一小时后,这个令牌到期 - >当它到期时,我们会发现一个失败的API调用,所以我们应该(在重试时) - >获取一个新的当该呼叫失败然后 - >重试原始呼叫时令牌.
我已经实现了这个,并且令牌成功返回,但是因为我认为我对Volley RequestQueue做错了,原始请求在新的有效令牌能够被使用之前使用了所有它的重试.请参阅以下代码:
public class GeneralAPICall extends Request<JSONObject> {
public static String LOG_TAG = GeneralAPICall.class.getSimpleName();
SessionManager sessionManager; //instance of sessionManager needed to get user's credentials
private Response.Listener<JSONObject> listener; //the response listener used to deliver the response
private Map<String, String> headers = new HashMap<>(); //the headers used to authenticate
private Map<String, String> params; //the params to pass with API call, can be null
public GeneralAPICall(int method, String url, Map<String, String> params, Context context, …Run Code Online (Sandbox Code Playgroud) 我有一个ZF2项目,具有以下配置.它使用的是Doctrine ORM和SlmQueue.由于SlmQueue不支持我们的命名约定和oracle数据库,因此我们定制了SlmQueueDoctrine.
我怀疑我的工作不是使用ClearObjectManagerStrategy,并且在执行单个作业之前不清除ObjectManager.
它在队列启动后不反映数据库修改.但是如果我杀死队列守护进程并重新开始,它会选择新的值.
如何在执行单个作业之前实现ClearObjectManagerStrategy并清除ObjectManager?
我试过很多没有运气的人.
composer.json
{
"repositories": [
{
"url": "https://github.com/pradeep-sanjaya/doctrine-extensions.git",
"type": "git"
}
],
"require": {
"php": ">=5.3.3",
"zendframework/zendframework": "2.3.3",
"doctrine/doctrine-orm-module": "0.7.*",
"pradeep-sanjaya/doctrine-extensions": "dev-master",
"spoonx/sxmail": "1.4.*",
"slm/locale": "dev-master",
"imagine/Imagine": "0.6.*",
"tecnick.com/tcpdf": "dev-master",
"slm/queue": "0.4.*",
"slm/queue-doctrine": "0.4.*"
}
}
Run Code Online (Sandbox Code Playgroud)
配置/自动加载/ slm_queue.local.php
<?php
return array(
'slm_queue' => array(
'queue_manager' => array(
'factories' => array(
'doctrineQueue' => 'SlmQueueDoctrine\Factory\DoctrineQueueFactory'
),
),
'job_manager' => array(
'factories' => array(
'Report\Job\Rank' => 'Report\Job\RankFactory',
),
'shared' => array(
'Report\Job\Rank' => false
),
),
'queues' => …Run Code Online (Sandbox Code Playgroud) 我对这个问题感到有点傻,但我似乎无法在互联网上找到这个问题的答案.搜索了几个小时后,我发现在linux服务器上你使用Supervisor在你的网站上连续运行"php artisan queue:listen"(有或没有守护进程)来处理推送到队列的作业.这一切都很好,但如果我想在Windows Azure Web应用程序上执行此操作,该怎么办?在搜索解决方案后,我发现:
我想请大家帮忙知道哪些是正确的解决方案,如果有更好的解决方案,如果WebJob是最好的,我该如何为此编写脚本?提前致谢.
我的supervisor/conf.d/myconf.conf文件中有以下设置:
[program:my-worker]
process_name=%(program_name)s_%(process_num)02d
command=php /var/www/html/artisan queue:work sqs --queue=my_queue_name --tries=3 --daemon
autostart=true
autorestart=true
user=root
numprocs=1
redirect_stderr=true
stdout_logfile=/var/www/html/storage/logs/mylogfile.log
Run Code Online (Sandbox Code Playgroud)
我已授予storage/logs/mylogfile.log文件的所有权限.无法弄清楚为什么它仍然没有记录,
我正在构建一个多租户Laravel应用程序(在Laravel 5.3上),它允许每个租户为任何支持的Laravel设置拥有自己的一组配置.这是通过Application使用我自己的实现覆盖默认Laravel 来实现的,该实现提供了自定义配置加载器(覆盖默认值Illuminate\Foundation\Bootstrap\LoadConfiguration).应用程序在引导程序中从环境(PHP $_ENV或.env文件)中检测当前承租人,然后为检测到的承租人加载相应的配置文件.
上述方法适用于HTTP和控制台内核,其中每个请求/命令的生命周期都有限,但我不确定如何接近队列工作程序.我希望为所有租户都有一个队列工作器,并且我已经实现了一个自定义队列连接器,以便在安排队列作业时添加其他元数据,以便在工作人员收到租户时识别租户.
我正在寻求帮助的部分是如何在隔离环境中运行每个队列作业,我可以使用自定义配置进行引导.
我看到的一些可能的解决方案是:
运行作为守护程序运行的自定义队列工作程序并从队列中获取作业,但在单独的PHP进程中执行作业(通过创建exec()); 一旦作业被执行,工作人员收集结果(状态,例外等)并完成父进程中的作业(例如删除作业等)
与上面类似,但是在单独的PHP线程中运行作业而不是使用单独的进程 RunKit Sandbox
实现一个解决方案,一旦收到队列作业,"重新启动"应用程序(例如,重新加载当前租户的配置,重置任何已解析的依赖关系等)
重要的是,我希望这个多租户作业执行对于作业本身是透明的,这样那些不适合在多租户环境中运行的作业(例如来自Laravel Scout等第三方软件包的作业)可以是没有任何修改处理.
有关如何处理此问题的任何建议?