Skip to main content

מהו Azure Table Storage ומתי להשתמש בו ולא ב SQL Azure

כאן נדון על היתרונות ועל החסרונות של Azure Table Storageמול SQLAzure:

SQL Azure VS Azure Table Storage(ATS)

טוב אז מה יש לנו כאן עולם בסיס הנתונים היחסי בעל הקשרים – Relational או מה שאנו מכירים בשם ה SQL (Structured Query Language) מול עולם שמירת המידע כפי שהוא או בשמו החדשני והחתרני noSQL, היום נדון בקצרה מתוך עולמו של הענן מה עדיף? מתי להשתמש בזה ומתי להשתמש בזה מהן היתרונות והחסרונות של כל עולם, ואיפה אנו כ DBA נחייה בעולמו של ה noSQL?
לפני שארחיב אני רוצה להצהיר כי לא אפרט יותר מידי מעולם ה .net עצמו שקשור קשר הדוק לנושא של גישה ופניה לבסיס הנתונים או לזיכרון. אני רק רוצה לדבר על מה יש ומה אין בענן.
נדבר פה היום על :

השוואת עלויות:

זה הנושא הכי קל בענן כי הוא הכי נגיש והכי ניתן לכימות – הרי זה הענן... ובכן
SQL Azure – כמות של  50GB עולים כ 500$ לחודש.
ATS –כמות של  50GB עולים כ 7.5$ לחודש.
טוב טוב לא צריך להמשיך הא? הרי ברור מה ניקח.... טוב חכו עד סוף ההרצאה ותחליטו.

השוואת אפשרויות ויכולות:

ATS – מכיל tables, blobs, queues:

Blob:

1.      יכול להכיל כמות עצומה של מידע כרגע לא ברורה ההגבלה.
2.      נגיש מהווב – כלומר יש לו כתובת במידה ונוצר כ public. לדוגמא https://accontstoragename.blob.core.windows.net/containername/08032011723.jpg

Queues

מהם ה Q האלו שנמצאים בסטורג'?
זהו מנגנון ליצירת פעולות א-סינכרוניות
מכניסים אליו מסג'ים קצרים עד 8KB והם מבוצעים לפי לוגיקה מסויימת.

Tables:

3.      סטורג' מובנה ומסודר.
4.      גישה למביני .NET כתיבה ב LINQ וכדומה (יתרון וחסרון).
5.      הוא לא בסיס נתונים רציונלי – אין קשרים בין טבלאות כלל, אין oder by, אין group by, אין join.
6.      אם כך מהי טבלה? פשוט קבוצה של רשומות עם פרטים על הרשומות – שאלו העמודות.
7.      לכל רשומה יש 2 מפתחות PartitionKay and RowKey  וזה משפיע על ביצועים כך ששאילתא על PartitionKay היא יחסית מהירה ואילו שאילתא על סתם עמודה לוקחת זמן רב.
8.      כמובן אין פרוצדורות.
9.      מכיון שזה מעולם ה NoSql – ייתכנו רשומות באותו טבלה ולא באותו סוג למשל עמודה שלישית יכולה להכיל גם שם וגם תאריך כל עוד 2 עמודות ראשונות – המפתחות מכילות מידע שונה.


SQL Azure – מכיל Tables

1.      בסיס נתונים אחד כיום עד 50GB  - חסרון קטן.
2.      אין כל הפונקציות שיש ל SQL Server – כרגע – חסרון קטן.
3.      מתבצעות עליו רפליקציות מגוונות – יתרון גדול.
4.      אפשר לבצע שאילתות  ודוחות – יתרון גדול.
5.      התשובות לשאילות לרוב מהירות – יתרון גדול
טוב – אז פה רואים שברמת הטבלאות יש שימוש שונה לחלוטין לגבי מטרות – אם אתה צריך המון חומר שיישמר כגון לוגים  - ומצד שני חשוב פחות זמן תגובה מהיר הרי הפתרון הטוב עבורך הוא ATS. לעומת זאת אם אתה צריך שאילתות מורכבות ושמירת נתונים מובנים ומרכבים הרי הדרך לפניך היא SQL Azure למרות עלותו הגבוהה יותר. גם DRP קיים פה ולא קיים בזיכרון.
אנו משתמשים בו 
  • לשמירת לוגים.
  • לשמור eventlog שנשמר כל X זמן ( זאת כיוון שה web role או ה worker role יכול לבצע REImage וכל הנשמר בו יימחק).
  • לשים קבצי web.
  • יש כלים שעושים אוטמטית גיבוי של בסיס הנתונים ל Blob 
  • ועוד שימושים רבים.

איך יוצרים בענן Storage account:

כמובן גם פה הכול עובר דרך הפורטל, יוצרים חשבון ואז בכלים חינמיים או בעלות אפשר לראות את התוכן. את הכתיבה אליהם אפשר ב .NET כפי דוגמאות רבות שיש  (אולי אתן בעתיד).


נושאים להמשך דיון: השוואת ביצועים, איך מבררים גודל ואם הגיע למלוא הגודל ועוד





Labels:

Comments

Post a Comment

Popular posts from this blog

Extended Events in SQL Azure

Hi Everybody   Today an English post about 'Extended Events in SQL Azure', some of you shorten the name to 'EE' and some to 'XEvent'. I Love EE so this is how I will call it in this post.   This feature was introduce in SQL Server 2008 and its should help collecting DATA about what is running in the Server.   More Details about this SQL Server feature can be found in this Link: https://msdn.microsoft.com/library/bb630282.aspx?f=255&MSPPError=-2147217396   There are a few differences between EE in SQL Azure and regular SQL Server: In SQL Server versions the EE are on the Server level and therefore you create sessions on Server. In SQL Azure the server is a virtual entity - so the EE is in DB level and you create the session on DataBase. In SQL Server versions the EE can write to files on the server. SQL Azure does not have drives for files (SQL Azure is PAAS.....:-)). There is an option to write to blob storage, for this we need t...
Post a Comment
Read more

How to restore deleted Azure Synapse dedicated SQL pool

  Existing dedicated pool can be easily restored from Azure portal or PowerShell command, but for now deleted pool could be restored from PowerShell only! Example: # Connect to Azure with system-assigned managed identity $AzureContext = (Connect-AzAccount -Identity).context # set and store context $AzureContext = Set-AzContext -SubscriptionName $AzureContext.Subscription -DefaultProfile $AzureContext # $AzureContext = Set-AzContext -SubscriptionName $SubscriptionName -DefaultProfile $AzureContext $SubscriptionName="Databases" $ResourceGroupName="stg-rg-we" $ServerName="stg-synapse-we"   $DatabaseName="sql_we_2023_11_07_13_42" $NewDatabaseName="sql_dp_we_deleted" ######################################## $token = (Get-AzAccessToken -ResourceUrl https://database.windows.net).Token $SubscriptionId = "ce088f9e-1111111a3914b" $DedicatedPoolEndPoint = "stg-synapse-we.sql.azuresynapse.net" $DedicatedPoolName = $DatabaseNam...
Post a Comment
Read more

The journey to the Lakehouse

A long time has passed since the last post, we have gone through a long and tedious journey to adapt what Azure offers us, to our needs. Our needs were simple, the Current Datawarehouse (SQL Server on VM inazure) served the BI. ML teams worked on GCP, we want to let both teams to work on Azure in a platform that will have the ability to scale and will not fail every 2 days. We checked: Snowflake on azure Synapse analytics GCP We decided to go for the full Azure product for the reasons: Migration time support costs Synapse as a platform contains many components, and the challenge was to find what fits  us as an organization and as a group. The knowledge of the people and their abilities influenced the plans. Here's what we planned and what we did: We start to put everything in the Data Lake in parquet or delta format, build on top of Azure ADLS gen 2. We had to move some data to T-SQL compatible platform, so this involves setting up a dedicated Synapse pool , which is a fully man...
Post a Comment
Read more