如何使用 Azure AD 帐户构建连接字符串以连接到 Azure SQL 数据库?目前,我正在使用以下内容,但似乎不正确。它不使用身份验证类型:Active Directory 密码。
我正在使用的 PowerShell 脚本的一部分:
server=$Server.database.windows.net;initial catalog=$Databasename;Authentication=Active Directory Password;Integrated Security=False;uid=$Username;password=$Password
Run Code Online (Sandbox Code Playgroud)
我真的很感谢你的帮助。
我们有很长时间运行的存储过程执行 ETL 工作,以便将原始表中的数据加载到 Azure 数据库中的星型架构(事实 - 维度)中。
这个存储过程需要大约 10 到 20 小时运行超过 1000 万行(使用 MERGE 语句)。
目前,我们从 C# 代码 (ADO.NET) 运行存储过程并保持CommandTimeout = 0(永远)。但有时连接会断开,因为与 Azure 数据库的连接不稳定。
是否可以在数据库级别运行存储过程而不一直保持连接打开,然后在 Progress 表中记录存储过程的过程以跟踪进度?
我看到一些建议:
代理作业,在 Azure 数据库上似乎不可能,因为它目前不支持。
SqlCommand.BeginExecuteNonQuery:我不确定 100% 是否BeginExecuteNonQuery仍然保持连接在引擎盖下打开。
有没有其他方法可以做到这一点?
我们有一个现有的 API,它有一个使用 Redis 的非常简单的缓存命中/缓存未命中系统。支持Key搜索。因此,可以根据主键轻松缓存转换为以下内容的查询。
SELECT * FROM [Entities] WHERE PrimaryKeyCol = @p1
任何后续请求都可以通过其主键在 REDIS 中查找实体或故障回复到数据库,然后使用该结果填充缓存。
我们正在构建一个新的 API,它将允许通过更多参数进行搜索,将在结果中返回多个条目,并且将处于相当高的请求量下(足以影响我们在 SQL 中现有的 DTU 利用率天蓝色)。
查询将可以通过其他几个术语、一次搜索中的多个 PK、各种其他 FK 查找列、文本上的 LIKE/CONTAINS 语句等进行搜索...
在这种情况下,是否有任何我们可以考虑的设计模式或缓存策略。Redis 似乎不太适合这些类型的查询。我正在考虑简单地散列查询参数,然后将该散列作为键缓存,并将整个结果集作为值缓存。
但考虑到 Redis 的键值特性,以及一个实体可能包含在多个查询哈希下的多个结果集中这一事实,这感觉有点天真。
(作为参考,此数据的来源目前是 SQL Azure,我们使用的是 Azure 的托管 Redis 服务。我们也在寻找其他方法来访问数据库,包括对数据进行非规范化、将数据 ETL 到 CosmosDB、托管数据在 Azure 搜索中,但这样做还有其他含义,包括实施时间、数据的“新鲜度”等......)
architecture caching design-patterns redis azure-sql-database
我目前正在使用 Azure 托管的 SQL 服务器实例处理应用程序。应用程序数据不占用大量物理空间,但有很多记录。有时我需要删除大量记录,例如可以说 500 万条记录。正如您可能猜到的那样,这需要大量的时间和资源。问题是我不需要很多资源来做其他事情。为了在 30 分钟或更长时间内不将 DTU 固定在 100%,我需要拥有更多正常使用下所需的资源。我不在乎删除在合理范围内需要多长时间。根据我的研究,我找不到限制使用的好方法。如果我能以某种方式只允许 50% 的使用率用于操作或类似的东西,那就太好了。也许我错过了一些可以提高删除效率的东西,但我不这么认为。它是一个非常简单的表,在我用来删除的列上有一个索引。看起来最大的主要组件是数据 IO。如果有人对我如何管理这个有任何好的想法,我们将不胜感激。
我似乎在将架构部署到 Azure SQL 数据库(上周创建,兼容性 140)时遇到问题。
我们有一个 SSDT DACPAC 架构要部署到,它与 IaaS SQL Server 2016 实例完美配合,但是当将目标版本更改为 Azure SQL V12 并尝试通过 VSTS 部署到我们的 PaaS 数据库时,我收到此错误:
我们已尝试将 Compatbility MSBuild 值设置为 120,130,140 并将其留空 - 似乎没有任何区别。以下是 .sqlproj 文件的摘录:
<PropertyGroup>
<Configuration Condition=" '$(Configuration)' == '' ">Debug</Configuration>
<Platform Condition=" '$(Platform)' == '' ">AnyCPU</Platform>
<Name>DataSchema</Name>
<SchemaVersion>2.0</SchemaVersion>
<ProjectVersion>4.1</ProjectVersion>
<ProjectGuid>{5d100d18-648c-4aac-9884-8a7b3c97f033}</ProjectGuid>
<DSP>Microsoft.Data.Tools.Schema.Sql.SqlAzureV12DatabaseSchemaProvider</DSP>
<OutputType>Database</OutputType>
<RootPath>
</RootPath>
<RootNamespace>CustomerData</RootNamespace>
<AssemblyName>CustomerData</AssemblyName>
<ModelCollation>1033,CI</ModelCollation>
<DefaultFileStructure>BySchemaAndSchemaType</DefaultFileStructure>
<DeployToDatabase>True</DeployToDatabase>
<TargetFrameworkVersion>v4.6.1</TargetFrameworkVersion>
<TargetLanguage>CS</TargetLanguage>
<AppDesignerFolder>Properties</AppDesignerFolder>
<SqlServerVerification>False</SqlServerVerification>
<IncludeCompositeObjects>True</IncludeCompositeObjects>
<TargetDatabaseSet>True</TargetDatabaseSet>
<DefaultCollation>SQL_Latin1_General_CP1_CI_AS</DefaultCollation>
<DefaultFilegroup></DefaultFilegroup>
<TargetDatabase>Data</TargetDatabase>
<CompatibilityMode></CompatibilityMode>
</PropertyGroup>
Run Code Online (Sandbox Code Playgroud)
从 MSDN 教程看来,它应该像创建 SSDT DACPAC 项目一样简单,选择 SQL Azure …
我希望实现图形表来映射 Azure SQL 中我的应用程序的角色层次结构。如果布局,该图将看起来像一棵树。父级能够管理树上位于其下方的任何角色。
所以我有一个角色节点表和一个 canmanage 边缘表。
我熟悉查询第一级和第二级关系,但是我需要有一个查询,我可以在其中放置任何角色并接收属于它的所有孩子的列表。
我对 NEO4J 中的这种事情很熟悉,但我还没有找到任何关于如何在 Azure SQL 中实现这一点的文档。
如何运行递归查询以获取所有子角色的特定角色名称或 ID?
我正在尝试使用更改跟踪将数据从 SQL Server 增量复制到 Azure SQL 数据库。我遵循了Microsoft Azure 文档上的教程,但是在为大量表实施此教程时遇到了一些问题。
在复制活动的源部分,我可以使用一个查询,该查询为我提供自上次更改跟踪版本以来更新、插入或删除的所有记录的更改表。这张桌子看起来像
PersonID Age Name SYS_CHANGE_OPERATION
---------------------------------------------
1 12 John U
2 15 James U
3 NULL NULL D
4 25 Jane I
Run Code Online (Sandbox Code Playgroud)
PersonID 是该表的主键。
问题是复制活动只能将数据附加到 Azure SQL 数据库,因此当记录更新时,由于主键重复,它会给出错误。我可以通过让复制活动使用将数据合并到 Azure SQL 数据库上的表的存储过程来处理这个问题,但问题是我有大量的表。
我希望预复制脚本删除 Azure SQL 数据库上已删除和更新的记录,但我不知道如何执行此操作。我是否需要为要复制的每个表创建单独的存储过程和相应的表类型,或者有没有办法让预复制脚本根据更改跟踪表删除记录?
sql-server azure-data-factory azure-sql-database azure-data-factory-2
我正在尝试针对我的 Azure SQL 数据库使用 Azure AD 身份验证。
接下来,我使用我的域帐户登录到 SSMS 以创建用户:
CREATE USER [xxx@yyy.com] FROM EXTERNAL PROVIDER;
GO
sp_addrolemember db_datareader, [xxx@yyy.com];
GO
sp_addrolemember
db_datawriter, [xxx@yyy.com];
GO
Run Code Online (Sandbox Code Playgroud)
当我尝试使用 xxxxx@yyy.com 帐户登录时,我返回:
Login failed for user 'NT AUTHORITY\ANONYMOUS LOGON'. (.Net SqlClient Data Provider)
Server Name: zzzzz.database.windows.net
Error Number: 18456
Severity: 14
State: 1
Line Number: 65536
Run Code Online (Sandbox Code Playgroud)
我错过了什么?
奇怪的观察,如果我故意使用错误的密码,我会返回此错误: AADSTS70002:验证凭据时出错。AADSTS50126:无效的用户名或密码,表明 AD 以某种方式工作,但在整个过程中出现了某些问题。
另一个奇怪的观察:如果我添加一个有效的 AD 帐户,它会成功
CREATE USER [xxx@yyy.com] FROM EXTERNAL …Run Code Online (Sandbox Code Playgroud) 我在 Azure 中有一个应用服务,它作为我正在设计的系统的 API 运行。由于 API 负责直接访问数据库,我显然不想在源代码中存储连接字符串,因此将其存储在 Azure 仪表板上应用服务配置中的连接字符串部分。
我的代码几乎是这个 >> https://github.com/medhatelmasry/JwtAuthentication/blob/master/JwtAuthentication/Startup.cs 的副本,除了我检查了它正在运行的当前配置(调试,发布等),因此当我在 Visual Studio 中本地调试时,我使用的是 localdb 连接(硬编码)。我有一个 appsettings.json 文件,但其中没有连接字符串,只有 JWT 身份验证和日志记录的设置。
当这被调用时:
services.AddDbContext<ApplicationDbContext>(
option => option.UseSqlServer(Configuration.GetConnectionString("DefaultConnection")));
Run Code Online (Sandbox Code Playgroud)
我在 Azure 中得到以下信息:
Unhandled Exception: System.ArgumentNullException: Value cannot be null
Parameter name: connectionString
Run Code Online (Sandbox Code Playgroud)
在过去的一周里,我一直在愚蠢地工作,试图让它发挥作用,并且一直在兜圈子,我快把自己逼疯了。Google 和 StackOverflow 的结果喜忧参半,因为多年来不同版本的 Azure 和 ASP.NET Core 给出了不同的答案。就好像它根本无法访问 Azure 配置。请参考上面的链接,因为这与我的设置相同,并且基于 .NET 版本和类型(核心或框架)有许多不同的答案。
编辑:请阅读我的问题,连接字符串未存储在项目的 appsettings.json 文件中,它存储在 Azure 中,如下所示(我已将连接字符串名称清空,但它们确实与代码中的内容匹配,不是不是“默认连接”):
c# azure azure-configuration azure-sql-database asp.net-core
我正在尝试使用类似于以下的脚本将来自几个不同 Azure 数据库的数据放入一个新的 Azure 数据库中:
:setvar db1 [dbSource1]
:setvar db2 [dbSource2]
:setvar dbTarget "myNewDatabase"
USE master;
GO
DROP DATABASE IF EXISTS $(dbTarget)
GO
CREATE DATABASE $(dbTarget)
GO
CREATE TABLE $(dbTarget).[dbo].[Tenants](
[TenantId] [nvarchar](450) NOT NULL,
[OwnerObjectId] [nvarchar](max) NOT NULL,
[NetworkId] [nvarchar](450) NOT NULL,
[EndorserType] [int] NOT NULL,
[Active] [bit] NOT NULL DEFAULT 1,
[Region] [nvarchar](450) NOT NULL DEFAULT 'us-central',
CONSTRAINT [PK_Tenants] PRIMARY KEY CLUSTERED
(
[TenantId] ASC
)
CREATE TABLE $(dbTarget).[dbo].[ProductPlan](
[ProductPlanId] [int] IDENTITY(1,1) NOT NULL,
[Name] [nvarchar](max) NULL,
[Description] …Run Code Online (Sandbox Code Playgroud) azure ×6
sql ×3
sql-server ×3
c# ×2
architecture ×1
asp.net-core ×1
caching ×1
powershell ×1
redis ×1
sql-delete ×1