我想知道是否有办法在SQL Azure中使用预定任务?感谢每一位帮助.
关键是,我想每天运行一个简单的单行语句,并希望阻止设置辅助角色.
我遇到了与此非常相似的问题.我有一个.dbproj Visual Studio数据库项目.它在SQL Server Express中部署得很好.现在我想将它部署到SQL Azure - 我更改了连接参数,但部署失败,并带有以下文本:
C:\ Program Files文件\的MSBuild \微软\ VisualStudio的\ V10.0\TeamData\Microsoft.Data.Schema.TSqlTasks.targets(120,5):错误Deploy01234:目标数据库架构提供商无法确定.部署无法继续.完成执行任务"SqlDeployTask" - 失败.
是否支持将.dbproj项目部署到SQL Azure?如何使Visual Studio将数据库部署到SQL Azure?除了使用Azure门户手动重新创建数据库之外,还有哪些其他方法可以获得或多或少相同的结果?
我有一个使用在Azure中运行的LINQ-TO-SQL的相当大的Web应用程序,我遇到来自SQL-Azure的Transient错误,因此需要实现重试.我知道Transient Fault Handling Framework和一些提供示例如何使用它的站点,但看起来你必须将每个LINQ查询包装成类似于下面的内容:
RetryPolicy retry = new RetryPolicy<MyRetryStrategy>(5, TimeSpan.FromSeconds(5));
Result = retry.ExecuteAction(() =>
{
… LINQ query here...
});
Run Code Online (Sandbox Code Playgroud)
在我的数据层中有数百个LINQ查询,这看起来非常混乱,而且很多时候查询在枚举结果之前并没有实际执行.例如,我的数据层中的大多数函数都将IQueryable <>返回到业务层,这使得它们比返回List更灵活.因此,这意味着您必须使用数据库重试逻辑来丢弃业务逻辑层 - 这很丑陋.
所以我想为了保持数据层中的重试逻辑,我必须在我的所有查询上放置.ToList(),以便它们在那里执行,而不是在上面的层中.
我真的希望有一种方法可以在某些基类中实现重试逻辑,而不必更改我的所有查询.好像EF也会遇到这个问题.
尝试和SQL-Azure团队进行自动重试是真正的答案,所以我们不必在代码中担心这一点吗?
我正在尝试使用我的Azure托管网站设置msnodesql(以前称为node-sqlserver),并且遇到了一些问题.
基本上我在Azure中部署失败.我相信这是因为NPM正在尝试在服务器上安装msnodesql,但是会失败,因为它需要安装"node-gyp",安装Python和C++ 2010(在azure方面不存在).这是我看到的错误消息
npm ERR! msnodesql@0.2.0 install: `node-gyp rebuild`
npm ERR! `cmd "/c" "node-gyp rebuild"` failed with 1
npm ERR!
npm ERR! Failed at the msnodesql@0.2.0 install script.
npm ERR! This is most likely a problem with the msnodesql package,
npm ERR! not with npm itself.
npm ERR! Tell the author that this fails on your system:
npm ERR! node-gyp rebuild
npm ERR! You can get their info via:
npm ERR! npm owner ls msnodesql
npm ERR! There is likely …Run Code Online (Sandbox Code Playgroud) 我想确保我的数据库(SQL Server)更新是幂等的,功能类似于下面的博客文章,但使用实体框架(v5,数据库优先):
但是,如果我在插入过程中添加@Operation参数,我会得到
"错误2037:映射函数绑定指定函数...但不映射以下函数参数:操作"
(@Operation将是一个GUID,由应用程序生成,允许应用程序使用相同的GUID重试,如果它没有从proc获得成功响应.proc会将GUID写入日志表,并且只执行如果GUID不存在,则插入 - 从而确保幂等事务.)
有优雅的解决方案吗?
请原谅我这是否重复.我能找到的最接近的是随机超时运行存储过程 - 删除重新创建修复,但我不确定有关重新编译存储过程的答案.
我有一个Azure SQL数据库,最新版本,具有来自Azure Web应用程序前端的大量流量.我有一个夜间远程作业,运行批处理来重建Azure SQL数据库上的索引,因为这似乎有助于控制数据库大小和性能.
通常,重建索引大约需要20分钟.昨晚它在2小时后超时.该批处理中的错误处理程序未记录任何错误.
重建索引启动后不久,一个特定的存储过程开始为每个调用它的客户端计时.使用相同表的其他存储过程没有任何问题.当我发现问题时,我可以通过改变存储过程立即返回来缓解所有超时和暂停进程.当我再次更改存储过程以使其正常运行时,问题立即重新出现.我的理解是,改变存储过程迫使它重新编译但是没有修复它.
最终,我完全放弃并使用原始代码重新创建了该过程,问题得到了解决.
这个程序及其使用的模式已经完全稳定了好几个月.程序本身很简单:
CREATE Procedure [dbo].[uspActivityGet] (@databaseid uniqueidentifier) AS
begin
SET NOCOUNT ON;
--There may be writing activities to the table asynchronously, do not use nolock on tblActivity - the ActivityBlob might be null in a dirty read.
select top 100 a.Id, h.HandsetNumber, a.ActivityBlob, a.ActivityReceived
from dbo.tblDatabases d with(nolock) join dbo.tblHandsets h with(nolock) on d.DatabaseId = h.DatabaseId join dbo.tblActivity a on h.Id = a.HandsetId
where d.DatabaseId = @databaseid and a.ActivitySent …Run Code Online (Sandbox Code Playgroud) 我们使用Visual Studio Online托管的构建服务器来自动化构建过程.作为其中的一部分,我正在考虑将单元和集成测试添加到此过程中.
这些测试需要访问我们的SQL Azure数据库(其中两个,在同一台服务器上),而这又要求通过数据库服务器的防火墙进行访问.
我有一个PowerShell脚本,用于New-AzureRmSqlServerFirewallRule向数据库服务器添加IP地址,这些防火墙规则成功显示在Azure门户中.
具体来说,该脚本添加防火墙规则:
Get-NetIPAddress)结合使用,似乎会自动添加预定义的AllowAllAzureIPs和AllowAllWindowsAzureIps规则.
但是,测试随后失败,例外情况如下:
System.Data.SqlClient.SqlException:System.Data.SqlClient.SqlException:建立与SQL Server的连接时发生与网络相关或特定于实例的错误.服务器未找到或无法访问.验证实例名称是否正确,以及SQL Server是否配置为允许远程连接.(提供者:命名管道提供程序,错误:40 - 无法打开与SQL Server的连接)
我不确定为什么构建服务器无法访问数据库服务器 - 可能是测试进程的主机使用了不同的IP地址吗?
更新
正如已经指出的,异常消息提到"命名管道提供程序",它建议数据库连接使用命名管道而不是IP/TCP连接.为了测试这个,我改变了当地的app.config包含未知/随机/ IP无法进入并在本地运行测试(否则他们成功运行在本地):我正好收到了同样的异常消息提到"命名管道提供商".或许在一定程度上的ReliableSqlConnection类解析为一个命名管道,但我的观点是,我可以通过改变一个未知的或无法访问的IP地址在我的数据库连接字符串导致这同一个例外.
此外,数据库连接字符串开始tcp:,根据此博客文章,明确告诉连接使用TCP/IP而不是命名管道.
我还修改了防火墙规则以允许所有IP地址(0.0.0.0到255.255.255.255)但仍然抛出相同的异常.这表明SQL Azure防火墙规则不是"阻塞"的原因.
因此,我的怀疑转向网络访问被阻止(尽管可能存在白名单以允许构建服务器到达代码存储库).我在构建过程的开始添加了一个非常简单的PowerShell脚本:
Test-Connection "172.217.18.100" #resolves to www.google.com
Run Code Online (Sandbox Code Playgroud)
这导致了
测试与计算机'172.217.18.100'的连接失败:由于缺少资源而出错
构建服务器是禁用ping/ICMP还是阻止所有传出流量?
*该脚本仅考虑IPv4地址,因为我没有成功将IPv6地址传递给New-AzureRmSqlServerFirewallRule.
continuous-integration azure azure-powershell azure-sql-database azure-devops
我的IOT指标(时间序列数据)有一个Clustered Columnstore Index Table.它包含超过10亿行,结构如下:
CREATE TABLE [dbo].[Data](
[DeviceId] [bigint] NOT NULL,
[MetricId] [smallint] NOT NULL,
[TimeStamp] [datetime2](2) NOT NULL,
[Value] [real] NOT NULL
)
CREATE CLUSTERED INDEX [PK_Data] ON [dbo].[Data] ([TimeStamp],[DeviceId],[MetricId]) --WITH (DROP_EXISTING = ON)
CREATE CLUSTERED COLUMNSTORE INDEX [PK_Data] ON [dbo].[Data] WITH (DROP_EXISTING = ON, MAXDOP = 1, DATA_COMPRESSION = COLUMNSTORE_ARCHIVE)
Run Code Online (Sandbox Code Playgroud)
从2008年到现在,有大约10,000个不同的DeviceId值和TimeStamps.针对此表的典型查询如下所示:
SET STATISTICS TIME, IO ON
SELECT
[DeviceId]
,[MetricId]
,DATEADD(hh, DATEDIFF(day, '2005-01-01', [TimeStamp]), '2005-01-01') As [Date]
,MIN([Value]) as [Min]
,MAX([Value]) as [Max]
,AVG([Value]) as [Avg]
,SUM([Value]) as [Sum] …Run Code Online (Sandbox Code Playgroud) I'm running the following query through (generated by Entity Framework Core) Microsoft SQL Server Management Studio against a SQL Azure database table with ~46,000 rows which takes ~5seconds
DECLARE @__TypedProperty_0 as int = 20
DECLARE @__TypedProperty_1 as int = 20
SELECT [dto].[Id], [dto].[Forename], [dto].[Surname], [dto].[AzureId], [dto].[Email]
FROM [Associates] AS [dto]
ORDER BY [dto].[Forename], [dto].[Id]
OFFSET @__TypedProperty_0 ROWS FETCH NEXT @__TypedProperty_1 ROWS ONLY
Run Code Online (Sandbox Code Playgroud)
This results in the following execution plan:
The same query, in-lining the parameters like below runs in 500ms …
我已经配置了事件网格订阅,以在创建资源时启动针对资源组中事件的Web挂接调用。
Web挂钩调用已成功处理,我返回200。为保持幂等性,我将发生的所有事件webhook_events与事件ID一起存储在表中。检查任何新事件,以查看它们是否存在于该表中。
这对我来说是个问题,因为我多次接收到同一事件,但ID却不同。我通过差异检查器将其发送,并确认事件之间的唯一区别是它们的eventTime和它们的ID(但这是同一事件,即SQL数据库上的Microsoft.Resources.ResourceWriteSuccess)。
原因是事件网格多次向我发送具有不同ID的同一事件吗?
编辑:
我已与Microsoft谈过此事,他们告诉我,如果未返回接受的响应代码,则该事件将使用不同的ID复制并再次发送。这显然是一个痛苦的工作。
我立即以200 OK响应,但是事件网格太大且处理起来太慢,无法接受我的事件,因此它再次发送了事件。我想挑战任何人,寻找一种区分这些重复事件的方法。
azure azure-eventhub azure-sql-database azure-sql-server azure-eventgrid
azure ×5
sql-server ×3
sql ×2
azure-devops ×1
c# ×1
columnstore ×1
linq-to-sql ×1
node.js ×1
time-series ×1