提供的锁无效.锁已过期,或者消息已从队列中删除

use*_*374 25 c# distributed azure azureservicebus

我正在使用Microsoft azure服务总线队列来处理计算,我的程序可以正常运行几个小时,但后来我开始为从那时起处理的每条消息都获得此异常.我不知道从哪里开始,因为前几个小时一切正常.我的代码似乎也很准确.我将发布处理azure服务总线消息的方法.

public static async Task processCalculations(BrokeredMessage message)
    {
        try
        {
            if (message != null)
            {
                if (connection == null || !connection.IsConnected)
                {
                    connection = await ConnectionMultiplexer.ConnectAsync("connection,SyncTimeout=10000,ConnectTimeout=10000");
                    //connection = ConnectionMultiplexer.Connect("connection,SyncTimeout=10000,ConnectTimeout=10000");
                }

                cache = connection.GetDatabase();

                string sandpKey = message.Properties["sandp"].ToString();
                string dateKey = message.Properties["date"].ToString();
                string symbolclassKey = message.Properties["symbolclass"].ToString();
                string stockdataKey = message.Properties["stockdata"].ToString();
                string stockcomparedataKey = message.Properties["stockcomparedata"].ToString();

                var sandpTask = cache.GetAsync<List<StockData>>(sandpKey);
                var dateTask = cache.GetAsync<DateTime>(dateKey);
                var symbolinfoTask = cache.GetAsync<SymbolInfo>(symbolclassKey);
                var stockdataTask = cache.GetAsync<List<StockData>>(stockdataKey);
                var stockcomparedataTask = cache.GetAsync<List<StockMarketCompare>>(stockcomparedataKey);

                await Task.WhenAll(sandpTask, dateTask, symbolinfoTask,
                    stockdataTask, stockcomparedataTask);

                List<StockData> sandp = sandpTask.Result;
                DateTime date = dateTask.Result;
                SymbolInfo symbolinfo = symbolinfoTask.Result;
                List<StockData> stockdata = stockdataTask.Result;
                List<StockMarketCompare> stockcomparedata = stockcomparedataTask.Result;

                StockRating rating = performCalculations(symbolinfo, date, sandp, stockdata, stockcomparedata);

                if (rating != null)
                {
                    saveToTable(rating);
                    if (message.LockedUntilUtc.Minute <= 1)
                    {
                        await message.RenewLockAsync();
                    }
                    await message.CompleteAsync(); // getting exception here
                }
                else
                {
                    Console.WriteLine("Message " + message.MessageId + " Completed!");
                    await message.CompleteAsync();
                }
            }
        }
        catch (TimeoutException time)
        {
            Console.WriteLine(time.Message);
        }
        catch (MessageLockLostException locks)
        {
            Console.WriteLine(locks.Message);
        }
        catch (RedisConnectionException redis)
        {
            Console.WriteLine("Start the redis server service!");
        }
        catch (MessagingCommunicationException communication)
        {
            Console.WriteLine(communication.Message);
        }
        catch (Exception ex)
        {
            Console.WriteLine(ex.Message);
            Console.WriteLine(ex.StackTrace);
        }
    }
Run Code Online (Sandbox Code Playgroud)

更新:我检查锁定到期之前的时间,如果需要它我会调用锁更新,但它更新锁定没有错误,但我仍然得到这个例外.

timeLeft = message.LockedUntilUtc - DateTime.UtcNow;
  if (timeLeft.TotalMinutes <= 2)
                    {
                        //Console.WriteLine("Renewed lock! " + ((TimeSpan)(message.LockedUntilUtc - DateTime.UtcNow)).TotalMinutes);
                        message.RenewLock();
                    }

catch (MessageLockLostException locks)
        {
            Console.WriteLine("Delivery Count: " + message.DeliveryCount);
            Console.WriteLine("Enqueued Time: " + message.EnqueuedTimeUtc);
            Console.WriteLine("Expires Time: " + message.ExpiresAtUtc);
            Console.WriteLine("Locked Until Time: " + message.LockedUntilUtc);
            Console.WriteLine("Scheduled Enqueue Time: " + message.ScheduledEnqueueTimeUtc);
            Console.WriteLine("Current Time: " + DateTime.UtcNow);
            Console.WriteLine("Time Left: " + timeLeft);
        }
Run Code Online (Sandbox Code Playgroud)

到目前为止我所知道的是我的代码运行良好一段时间并且更新锁被调用并且工作但我仍然得到锁异常并且在该异常中,我输出timeleft并且随着代码运行它不断增加时差这让我相信锁定到期的时间不会以某种方式改变?

Tom*_*mas 22

我花了 2 天的时间来解决类似的问题 - 同样的异常。
这个异常可能有多种原因,我将描述几个配置选项,可以帮助你陌生人......

ServiceBus队列或主题订阅配置:

  • 队列/主题订阅上的消息锁定持续时间太短,将其设置为大约。消息处理时间

ServiceBusClient 选项配置:

  • tryTimeout太短,设置为~10s用于诊断

ServiceBusProcessor选项配置:

  • AutoCompleteMessages默认设置为 true,设置为 false
  • PrefetchCount太高,为了诊断将其设置为 0
  • ReceiveMode将其设置为 ServiceBusReceiveMode.PeekLock
  • 用于诊断的MaxConcurrentCalls将其设置为 1

找到正确的值(针对给定系统进行优化)后,我不再观察到任何问题。


Jef*_*urs 21

我花了好几个小时试着理解为什么我会得到一个MessageLockLostException.我的原因是由于AutoComplete默认为true.

如果您打算调用messsage.Complete()(或CompleteAsync()),那么您应该实例化一个OnMessageOptions对象,设置AutoComplete为false,并将其传递给您的OnMessage调用.

var options = new OnMessageOptions();
options.AutoComplete = false;

client.OnMessage(processCalculations, options);
Run Code Online (Sandbox Code Playgroud)

  • @mebjas 你不应该多次“完成”一条消息。要么让 AutoComplete 完成工作,要么自己处理(Complete() / CompleteAsync()),但避免两者都做。 (2认同)
  • 在 host.json 文件中设置 "autoComplete": false 不起作用吗? (2认同)

sol*_*cle 7

我有一个类似的问题。消息已被成功处理,但是当消息完成时,服务总线不再具有有效的锁。原来我的TopicClient.PrefetchCount太高了。

看起来,一旦所有预取的消息被获取,锁就会开始。如果您的累积消息处理时间超过了锁定超时,则其他所有预取的消息将无法完成。它将返回服务总线。