Skip to main content

Free Tools Related to Azure


בפוסט זה אבצע סקירה על הכלים השונים הקיימים בשוק – שמבצעים פעולות שונות מול ה azure, אני מתנצל מראש על סגנון הכתיבה הטרחני משהו ועל הקיצור הנמרץ שקיצרתי בכל סקירה וסקירה, אם המוני בית ישראל יצביעו ברגלים אתן פרוט רב על כל כלי וכלי.

אסקור כלים שונים החל בכלי ניטור ותצוגה על מצב השרתים, עבור לפעולות מול ה storage, וכלה בדוחות על ביצועים.

לא אציג למרות שזה היה מתבקש  - כיצד לגשת ל SQL Azure – מי שרוצה מוזמן לראות את אחד הפוסטים הראשונים... J

כל הכלים שיוצגו פה הם כלים שנבחנו לאורך זמן והם חינמיים. אציג את היתרונות והחסרונות שלהם מנקודת המבט שלי. זו נקודת מבט אחת ויכול להיות שלא מצאתי את שראוי להיות ראוי למרות שראוי הוא. אצרף תמונות לראות את ה GUI שלהם.

מי שיודע על עוד כלים אני אשמח לקבל דיווח, אבדוק ואדווח, מי שכתב כלי ולא הגעתי אליו אני מבקש את סליחתו מראש.
נתחיל בכלי ניטור על פעילות השרתים שקיימים ב Azure:

Spotlight on Azure של חברת Quest:

כידוע ב Azure נרכשים שרתים בגדלים מסויימים לבצע פעולות מסוייומת – שרתי ווב ושרתי אפליקציות.
חברת Quest  כתבה מוצר יפה לעין, יציב ומאד מקיף שמציג את מצב השרתים ברמת הזיכרון ה CPU ה IO ועוד
הכלי נותן לנטר מצב ברמת שרת  - Hosted service, ברמת ה Deployment, ברמת ה Instance וברמת ה Role (למי שטרם הכיר את ההיררכיה בענן זו ההרירכיה – מעל כולם יש subscription אבל הוא לא שייך לפה).

כמו כן ניתן לנטר לפי זמנים מוגדרים מראש או לפלטר לפי שעות שאני בורר.
הכלי נותן אפשרויות להתרעות וגם מסמן לפי צבעים בעיות שונות.

להלן כמה תמונות:
מראה כללי של האפליקציה

         אלו המדדים שניתן לבדוק

        מראה ברמת ה 
        service hosted

       מראה ברמת ה
       Deployment

      מראה ברמת ה 
      Role
      פה אפשר לראות מדדים כמו קיבולת, מצב עכשוי, כמה קריאות  וכדומה

    
      מראה ברמת ה
      Instance
      גם פה אפשר לראות מדדים שונים

      ומקרוב


עכשיו נעבור לכלי ניהול של נתונים ב Azure Storage:

נציג כלי וובי של מיקרוסופט לניטור פעולות על ה storage
זהו כלי בסיסי שצריך להפעיל מספר flags  בכדי שייכנס לעבודה. הפעלת דגלים אלו תתבצע באותו אתר. הכול מבוסס על שאילתות על טבלאות שמתמלאות ב storage והאתר מנהל אותם
יש להיכנס לכתובת :  http://storageanalytics.cloudapp.net
למלא פרטים של חשבון  storage ואז לבחור מה שרוצים אם רוצים סטטיסטיקות על blob או על טבלאות.
הכלי הוא מאד בוסרי וללא התערבות מפתח לא מציג נתוני אמת ובעצם הוא סוג של קוד פתוח – מי שרוצה להרחיב מוזמן – מי שמנהל ויוזם את זה Steve Marx ממיקרוסופט.



נציג 4 כלים לשליפת ועדכון של Azure Storage:

לפני שאציג את הכלים – יש לדעת שיש כלים בתשלום – טובים יותר וטובים פחות – פה אציג את הכלים בחינם:

1.      TacleXplorer – של Clumsyleafsoftware – זהו כלי טוב מאד מציג את כל הטבלאות שקיימות בסטורג', הוא מאד מהיר ויעיל אפשר לקרוא ממנו נתונים ולהוריד אל המחשב, הכלי נמצא בשימוש אפילו אצל מהנדסי מיקרוסופט עצמם... איך אני יודע? פעם אחרת... הכלי מאד מוגבל במספר הפעולות שמבצע אין שאילתות, אין עידכונים, רק העלאות מידע, מחיקות של DATA, והורדת מידע, כמו הן הוא מאד יציב ולא נתקע כלל.


       
         עוד כלי של אותה חברה לגלוש ל blob נקרא cloudexplorer

2.      Azure Storage Explorer – של חברת Neudesic:
זהו כלי מאד שימושי – יש בו את כל הדברים שצריך לבצע על Storage, יש פה את החלוקה ל tables, blobs, queues. ניתן לבצע העלאות הורדות מחיקות טבלאות  - images קבצים גדולים וכל מה שרוצים. אולם הוא לא יציב כנראה יש בו המון שגיאות קוד והוא נסגר די הרבה פעמים. גם הוא לא מציג טבלאות מערכת למשל של מדדים.


3.      Quest Cloud Storage Manager for Azure – ושוב כלי של Quest
כלי גם כן שימושי – ניתן לבצע בו שאילתות בצורה טובה מאד ומובנה בכלי. גם פה יש את כל שלושת החלקים ל ה storage, החסרון שלו הוא שאי אפשר להעלות קבצים – אבל מן הסתם הם יפתרו את זה בהמשך כבר יש גרסאות חדשות שטרם הספיקותי להוריד.

מראה כללי


  מראה של טבלה   

 - ופילטר השאילתות- פה אפשר ללמוד כיצד מבצעים שאילתות מול
Storage



4.      https://www.myazurestorage.com – אתר לניהול Storage של מיקרוסופט הוא מכיל כל העולמות של ה storage – כלי יעיל נוח וניתן להריץ דרכו שאילתות, אפשר לערוך להוסיף ובעצם  לבצע את כל הפעולות, החסרון היחידי שאני ראיתי הוא שהתצוגה של טבלאות לא כל כך נוחה אבל זה משהו אישי...

תצוגה של blob


תצוגה של טבלאות  - חץ אדום לבחירת עמודות לתצוגה. חץ ירוק לתצוגות עמודות פר רשומה לאורך


כלי דוחות על ביצועים מול SQL Azure:
SQL Azure? זוכרים? שכחנו אותו ? לא ולא...
מול SQL Azure – כל DBA סומך רק על עצמו ולכן אין כלים מיוחדים כרגע מין הסתם יוציאו בקרוב Quest, idera ועוד חברות שונות כלים לניתוח ביצועים ופעולות בענן. יש כלים בתשלום לביצוע גיבויים, השוואות Enzo, redgate ועוד

כרגע רק כדי להראות לכולם שכולנו יכולים להיות מנתחים של עצמינו רק צריכים קצת זמן – שכמובן אין לנו הוציאה מיקרוסופט כלי קטן שמציג דוחות פשוטים על ה sql מתוך שאילתות פשוטות גם הן.
הכלי נקרא CSS SQL Azure Diagnostics
הוא מריץ שאילתות כדוגמת מי הפרוצדורה שתופסת הכי הרבה cpu, מי הפקודה שתופסת הכי הרבה IO וכדומה. ומציג בתוך כלי שנראה כמו manager של reporting services
הכלי נראה ככה:

והנה דוח לדוגמא



זהו...
עד כאן להיום - כאמור אשמח לבצע סקירה בהמשך על כלים נוספים - נחכה לכלים עבור ה SQL.



Comments

Popular posts from this blog

How to restore deleted Azure Synapse dedicated SQL pool

  Existing dedicated pool can be easily restored from Azure portal or PowerShell command, but for now deleted pool could be restored from PowerShell only! Example: # Connect to Azure with system-assigned managed identity $AzureContext = (Connect-AzAccount -Identity).context # set and store context $AzureContext = Set-AzContext -SubscriptionName $AzureContext.Subscription -DefaultProfile $AzureContext # $AzureContext = Set-AzContext -SubscriptionName $SubscriptionName -DefaultProfile $AzureContext $SubscriptionName="Databases" $ResourceGroupName="stg-rg-we" $ServerName="stg-synapse-we"   $DatabaseName="sql_we_2023_11_07_13_42" $NewDatabaseName="sql_dp_we_deleted" ######################################## $token = (Get-AzAccessToken -ResourceUrl https://database.windows.net).Token $SubscriptionId = "ce088f9e-1111111a3914b" $DedicatedPoolEndPoint = "stg-synapse-we.sql.azuresynapse.net" $DedicatedPoolName = $DatabaseNam...

Extended Events in SQL Azure

Hi Everybody   Today an English post about 'Extended Events in SQL Azure', some of you shorten the name to 'EE' and some to 'XEvent'. I Love EE so this is how I will call it in this post.   This feature was introduce in SQL Server 2008 and its should help collecting DATA about what is running in the Server.   More Details about this SQL Server feature can be found in this Link: https://msdn.microsoft.com/library/bb630282.aspx?f=255&MSPPError=-2147217396   There are a few differences between EE in SQL Azure and regular SQL Server: In SQL Server versions the EE are on the Server level and therefore you create sessions on Server. In SQL Azure the server is a virtual entity - so the EE is in DB level and you create the session on DataBase. In SQL Server versions the EE can write to files on the server. SQL Azure does not have drives for files (SQL Azure is PAAS.....:-)). There is an option to write to blob storage, for this we need t...

The journey to the Lakehouse

A long time has passed since the last post, we have gone through a long and tedious journey to adapt what Azure offers us, to our needs. Our needs were simple, the Current Datawarehouse (SQL Server on VM inazure) served the BI. ML teams worked on GCP, we want to let both teams to work on Azure in a platform that will have the ability to scale and will not fail every 2 days. We checked: Snowflake on azure Synapse analytics GCP We decided to go for the full Azure product for the reasons: Migration time support costs Synapse as a platform contains many components, and the challenge was to find what fits  us as an organization and as a group. The knowledge of the people and their abilities influenced the plans. Here's what we planned and what we did: We start to put everything in the Data Lake in parquet or delta format, build on top of Azure ADLS gen 2. We had to move some data to T-SQL compatible platform, so this involves setting up a dedicated Synapse pool , which is a fully man...