Skip to main content

SQL Azure DATA Sync - מה זה ואיך מפעילים את זה


שלום רב
שוחררה גרסה חדשה של הפורטל ובה 2 תוספות מרכזיות במיוחד עבור  SQL Azure


1.       - DATA Sync כעת זמין ואפשר לסנכרן בין בסיסי נתונים בענן או בין בסיסי נתונים בענן לבין שרתים בארגון

2.       Reporting כעת זמין כלומר האפשרות שגם הפורטל של SSRS יהיה זמין בענן עצמו.


בכנס שהסתיים זה עתה  SQL Pass -  הכריזו על מספר תוספות שחלקן כבר זמינות וחלקן יהיו זמינות בקרוב, במהלך היום אעלה פוסט שיכיל את הרשימה של הדברים החדשים ופה אתאר בקצרה את הסרביס הקרוי DATA Sync:

אחד הצרכים המרכזיים בבסיסי נתונים בענן הוא גיבויי, וכן העברת טבלאות לבסיסי נתונים אחרים לצורך ייצור דוחות או כל צורך אפליקטיבי אחר.
DATA sync בעיקרון הוא דו כיווני – כלומר יכול לבצע סינכרון הלוך ושוב – צורך זה לטעמי פחות חשוב ויש לדעת איך לקנפג נכון כדי שהעידכון יהי חד כיווני.

לכן יצרו את הסרביס הקרוי DATA Sync – שבא מקיצורה של המילה סנכרון מידע....
כרגע סרביס זה נגיש לכולם דרך הפורטל.
אפשר לסנכרן טבלה עמודה או רשומה בין בסיס נתונים בענן ב data center אחד לבסיס נתונים ב data center אחר, או באותו אחד.
וכן לבסיס נתונים בשרת היושב בארגון.

להלן תיאור הפעלת הסינכרון:
יש בסיס נתונים בשם HUB DB – שהוא בסיס הנתונים – יעד אליו מכוונים השינויים שנרשמים בבסיס המקור.
יש בסיס נתונים בשם Member DB – שהוא בסיס נתונים שממנו נלקחים שינויים ואליו מתעדכן מידע בחזרה (שימו לב שאם אין בו נגיעות והכנסות לא יחזור מידע בחזרה ולכן זהו גיבוי...) – אולם הוא ניתן לשינוי


לאחר מכן נפתח חלון הרשאה ובו בוחרים בסיס נתונים מרכזי להפעלה


פה נפתח צעד ראשון בניהול הסינכרון - כאשר בוחרים לו שם


אחרי כן נפתח חלון עם GUI יפה המאפשר בחירה של בסיס נתונים יעד - HUB  בחץ האדום ובסיס נתונים מקור Member בחץ הירוק  - 


  
כיווני עידכון 


טיימר של כל כמה זמן יתבצע סינכרון


וחלון עם רשימת טבלאות ועמודות לביצעו סינכרון או כאלו עם בעיות


אחרי כל הקינפוג ים יש לבצע deploy בכפתור זה:


ואז מתחילה להתבצע פעולת הסינכרון:



וכשהכל מסתיים זה מסומן ככה

אפשר אם רוצים לא לחכות לטיימר אלא להריץ יזום - פה:


ומה שקורה  - וזה כמובן נבדק מועבר המידע מבסיס הנתונים אחד לחברו – ניתן לבדוק בפשטות על ידי ביצוע select לפי מספר רשומות לפני ואחרי.

עוד נושא קטן - זה הלוגים:

אלו טבלאות שניבנות ונשמרות בבסיס הנתונים ושימו לב - הם מסוכמות לסך הגודל של בסיס הנתונים כלומר העלויות שלהם עליכם...

בימים הקרובים אבחן את היציבות את העומסים עוד קינפוגים ואדווח לכם
חג שמח

לקריאה נוספת של מושגים טכניים ניתן לקרוא בלינקים אלו
http://social.technet.microsoft.com/wiki/contents/articles/sql-azure-data-sync-overview.aspx
http://social.technet.microsoft.com/wiki/contents/articles/1722.aspx#HubDatabase

Labels:

Comments

Post a Comment

Popular posts from this blog

How to restore deleted Azure Synapse dedicated SQL pool

  Existing dedicated pool can be easily restored from Azure portal or PowerShell command, but for now deleted pool could be restored from PowerShell only! Example: # Connect to Azure with system-assigned managed identity $AzureContext = (Connect-AzAccount -Identity).context # set and store context $AzureContext = Set-AzContext -SubscriptionName $AzureContext.Subscription -DefaultProfile $AzureContext # $AzureContext = Set-AzContext -SubscriptionName $SubscriptionName -DefaultProfile $AzureContext $SubscriptionName="Databases" $ResourceGroupName="stg-rg-we" $ServerName="stg-synapse-we"   $DatabaseName="sql_we_2023_11_07_13_42" $NewDatabaseName="sql_dp_we_deleted" ######################################## $token = (Get-AzAccessToken -ResourceUrl https://database.windows.net).Token $SubscriptionId = "ce088f9e-1111111a3914b" $DedicatedPoolEndPoint = "stg-synapse-we.sql.azuresynapse.net" $DedicatedPoolName = $DatabaseNam...
Post a Comment
Read more

The journey to the Lakehouse

A long time has passed since the last post, we have gone through a long and tedious journey to adapt what Azure offers us, to our needs. Our needs were simple, the Current Datawarehouse (SQL Server on VM inazure) served the BI. ML teams worked on GCP, we want to let both teams to work on Azure in a platform that will have the ability to scale and will not fail every 2 days. We checked: Snowflake on azure Synapse analytics GCP We decided to go for the full Azure product for the reasons: Migration time support costs Synapse as a platform contains many components, and the challenge was to find what fits  us as an organization and as a group. The knowledge of the people and their abilities influenced the plans. Here's what we planned and what we did: We start to put everything in the Data Lake in parquet or delta format, build on top of Azure ADLS gen 2. We had to move some data to T-SQL compatible platform, so this involves setting up a dedicated Synapse pool , which is a fully man...
Post a Comment
Read more

Configuring secondary database in Azure SQL DB - Bug found

Hi All Last week we had an issue with a secondary DB in geo replication and fail over group. To make the long story short we had to delete the secondary and recreate a secondary from scratch . And now let me tell you the story, we build a DB in P6 tier - very high, expensive and highly available. Then we add a geo replication copy via the platform, like it shows here. This is take from MSFT documentation: https://docs.microsoft.com/en-us/azure/azure-sql/database/active-geo-replication-overview It is written:  " Both primary and secondary databases are required to have the same service tier. It is also strongly recommended that the secondary database is created with the same backup storage redundancy and compute size (DTUs or vCores) as the primary. If the primary database is experiencing a heavy write workload, a secondary with lower compute size may not be able to keep up with it. That will cause redo lag on the secondary, and potential unavailability of the secondary. To mit...
Post a Comment
Read more