Upload Data To AWS RDS for SQL Server vs Upload To SQL Azure

שלום לכולם

היום עשיתי מספר רב של נסיונות העלאות נתונים לבסיסי הנתונים ב Azure וב AWS.הכנתי קבצי BCP מאד גדולים על טבלאות גדולות, יצרתי בסיסי נתונים באיזור אירלנד (AWS) וב west Eur ב AZURE שגם הוא יושב באירלנד והתחלתי להעלות.

המסקנות הן כי ב 3 הפעמים הראשונות העלאת הנתונים ל AZURE הייתה יותר מהירה וזה נע בסביבות 5000 rows per second ואילו ב AWS זה התחיל מ 4000 ועלה. לאחר 3 הרצות במשך מספר ימים ביצעתי 3 העלאות ביום ובכולם בשני מסדי הנתונים זה נע סביבות 5000. – כלומר בסך הכל המערכות והקווים זהים ואין עדיפות לכאן או לכאן.

ניסיתי להגדיל את החומרה ב AWS אולם זה לא השפיע על התוצאות. ב Azure אי אפשר לשנות את החומרה.

העלאה ראשונה SQL Azure

העלאה ראשונה AWS RDS

וזהו להפעם

יום נעים

Comments

Availability Zones in Azure and the relation to SLA in Azure SQL DB

שלום לכולם כאשר מקנפגים Azure SQL DB מנוהל והוא תחת Premium or Business Critical Toers מיקרוסופט שואלים אותך: Would you like to make this database zone redundant? מה זו השאלה הזו? מה ההשפעה שלה ומה העלות שלה? אז עשינו ובדקנו מה ההשפעה. הלינק הבסיסי להסבר הקונפיגורציה הזו הוא זה: https://azure.microsoft.com/is-is/blog/azure-sql-database-now-offers-zone-redundant-premium-databases-and-elastic-pools/ מה זה אומר? זה מסביר על המושג הקריטי Availability Zones ועל השימוש שלו ב SLA של הדיבי שלנו. ובכן בכל דאטה סנטר בענן יש בעצם 3 דאטה סנטרים, הכל מנותק אחד מהשני. https://docs.microsoft.com/en-us/azure/availability-zones/az-overview לכל Azure SQL DB יש 3 עותקים ניסתרים, מיקרוסופט נותנת אופציה לשמור את אחד העותקים הניסתרים ב Availability Zone אחר. הדבר מעלה את ה SLA כך שאם יש תקלה ב Availability Zone אחד זה לא משפיע על ה DB. לכן אני ממליץ בחום לכולם לאפשר את הקונפיגורציה הזו.

How to restore deleted Azure Synapse dedicated SQL pool

Existing dedicated pool can be easily restored from Azure portal or PowerShell command, but for now deleted pool could be restored from PowerShell only! Example: # Connect to Azure with system-assigned managed identity $AzureContext = (Connect-AzAccount -Identity).context # set and store context $AzureContext = Set-AzContext -SubscriptionName $AzureContext.Subscription -DefaultProfile $AzureContext # $AzureContext = Set-AzContext -SubscriptionName $SubscriptionName -DefaultProfile $AzureContext $SubscriptionName="Databases" $ResourceGroupName="stg-rg-we" $ServerName="stg-synapse-we" $DatabaseName="sql_we_2023_11_07_13_42" $NewDatabaseName="sql_dp_we_deleted" ######################################## $token = (Get-AzAccessToken -ResourceUrl https://database.windows.net).Token $SubscriptionId = "ce088f9e-1111111a3914b" $DedicatedPoolEndPoint = "stg-synapse-we.sql.azuresynapse.net" $DedicatedPoolName = $DatabaseNam...

Configuring secondary database in Azure SQL DB - Bug found

Hi All Last week we had an issue with a secondary DB in geo replication and fail over group. To make the long story short we had to delete the secondary and recreate a secondary from scratch . And now let me tell you the story, we build a DB in P6 tier - very high, expensive and highly available. Then we add a geo replication copy via the platform, like it shows here. This is take from MSFT documentation: https://docs.microsoft.com/en-us/azure/azure-sql/database/active-geo-replication-overview It is written: " Both primary and secondary databases are required to have the same service tier. It is also strongly recommended that the secondary database is created with the same backup storage redundancy and compute size (DTUs or vCores) as the primary. If the primary database is experiencing a heavy write workload, a secondary with lower compute size may not be able to keep up with it. That will cause redo lag on the secondary, and potential unavailability of the secondary. To mit...

SQL Azure for DBAs and Data Engineers

Search This Blog