2011-10-31

Free Tools Related to Azure


בפוסט זה אבצע סקירה על הכלים השונים הקיימים בשוק – שמבצעים פעולות שונות מול ה azure, אני מתנצל מראש על סגנון הכתיבה הטרחני משהו ועל הקיצור הנמרץ שקיצרתי בכל סקירה וסקירה, אם המוני בית ישראל יצביעו ברגלים אתן פרוט רב על כל כלי וכלי.

אסקור כלים שונים החל בכלי ניטור ותצוגה על מצב השרתים, עבור לפעולות מול ה storage, וכלה בדוחות על ביצועים.

לא אציג למרות שזה היה מתבקש  - כיצד לגשת ל SQL Azure – מי שרוצה מוזמן לראות את אחד הפוסטים הראשונים... J

כל הכלים שיוצגו פה הם כלים שנבחנו לאורך זמן והם חינמיים. אציג את היתרונות והחסרונות שלהם מנקודת המבט שלי. זו נקודת מבט אחת ויכול להיות שלא מצאתי את שראוי להיות ראוי למרות שראוי הוא. אצרף תמונות לראות את ה GUI שלהם.

מי שיודע על עוד כלים אני אשמח לקבל דיווח, אבדוק ואדווח, מי שכתב כלי ולא הגעתי אליו אני מבקש את סליחתו מראש.
נתחיל בכלי ניטור על פעילות השרתים שקיימים ב Azure:

Spotlight on Azure של חברת Quest:

כידוע ב Azure נרכשים שרתים בגדלים מסויימים לבצע פעולות מסוייומת – שרתי ווב ושרתי אפליקציות.
חברת Quest  כתבה מוצר יפה לעין, יציב ומאד מקיף שמציג את מצב השרתים ברמת הזיכרון ה CPU ה IO ועוד
הכלי נותן לנטר מצב ברמת שרת  - Hosted service, ברמת ה Deployment, ברמת ה Instance וברמת ה Role (למי שטרם הכיר את ההיררכיה בענן זו ההרירכיה – מעל כולם יש subscription אבל הוא לא שייך לפה).

כמו כן ניתן לנטר לפי זמנים מוגדרים מראש או לפלטר לפי שעות שאני בורר.
הכלי נותן אפשרויות להתרעות וגם מסמן לפי צבעים בעיות שונות.

להלן כמה תמונות:
מראה כללי של האפליקציה

         אלו המדדים שניתן לבדוק

        מראה ברמת ה 
        service hosted

       מראה ברמת ה
       Deployment

      מראה ברמת ה 
      Role
      פה אפשר לראות מדדים כמו קיבולת, מצב עכשוי, כמה קריאות  וכדומה

    
      מראה ברמת ה
      Instance
      גם פה אפשר לראות מדדים שונים

      ומקרוב


עכשיו נעבור לכלי ניהול של נתונים ב Azure Storage:

נציג כלי וובי של מיקרוסופט לניטור פעולות על ה storage
זהו כלי בסיסי שצריך להפעיל מספר flags  בכדי שייכנס לעבודה. הפעלת דגלים אלו תתבצע באותו אתר. הכול מבוסס על שאילתות על טבלאות שמתמלאות ב storage והאתר מנהל אותם
יש להיכנס לכתובת :  http://storageanalytics.cloudapp.net
למלא פרטים של חשבון  storage ואז לבחור מה שרוצים אם רוצים סטטיסטיקות על blob או על טבלאות.
הכלי הוא מאד בוסרי וללא התערבות מפתח לא מציג נתוני אמת ובעצם הוא סוג של קוד פתוח – מי שרוצה להרחיב מוזמן – מי שמנהל ויוזם את זה Steve Marx ממיקרוסופט.



נציג 4 כלים לשליפת ועדכון של Azure Storage:

לפני שאציג את הכלים – יש לדעת שיש כלים בתשלום – טובים יותר וטובים פחות – פה אציג את הכלים בחינם:

1.      TacleXplorer – של Clumsyleafsoftware – זהו כלי טוב מאד מציג את כל הטבלאות שקיימות בסטורג', הוא מאד מהיר ויעיל אפשר לקרוא ממנו נתונים ולהוריד אל המחשב, הכלי נמצא בשימוש אפילו אצל מהנדסי מיקרוסופט עצמם... איך אני יודע? פעם אחרת... הכלי מאד מוגבל במספר הפעולות שמבצע אין שאילתות, אין עידכונים, רק העלאות מידע, מחיקות של DATA, והורדת מידע, כמו הן הוא מאד יציב ולא נתקע כלל.


       
         עוד כלי של אותה חברה לגלוש ל blob נקרא cloudexplorer

2.      Azure Storage Explorer – של חברת Neudesic:
זהו כלי מאד שימושי – יש בו את כל הדברים שצריך לבצע על Storage, יש פה את החלוקה ל tables, blobs, queues. ניתן לבצע העלאות הורדות מחיקות טבלאות  - images קבצים גדולים וכל מה שרוצים. אולם הוא לא יציב כנראה יש בו המון שגיאות קוד והוא נסגר די הרבה פעמים. גם הוא לא מציג טבלאות מערכת למשל של מדדים.


3.      Quest Cloud Storage Manager for Azure – ושוב כלי של Quest
כלי גם כן שימושי – ניתן לבצע בו שאילתות בצורה טובה מאד ומובנה בכלי. גם פה יש את כל שלושת החלקים ל ה storage, החסרון שלו הוא שאי אפשר להעלות קבצים – אבל מן הסתם הם יפתרו את זה בהמשך כבר יש גרסאות חדשות שטרם הספיקותי להוריד.

מראה כללי


  מראה של טבלה   

 - ופילטר השאילתות- פה אפשר ללמוד כיצד מבצעים שאילתות מול
Storage



4.      https://www.myazurestorage.com – אתר לניהול Storage של מיקרוסופט הוא מכיל כל העולמות של ה storage – כלי יעיל נוח וניתן להריץ דרכו שאילתות, אפשר לערוך להוסיף ובעצם  לבצע את כל הפעולות, החסרון היחידי שאני ראיתי הוא שהתצוגה של טבלאות לא כל כך נוחה אבל זה משהו אישי...

תצוגה של blob


תצוגה של טבלאות  - חץ אדום לבחירת עמודות לתצוגה. חץ ירוק לתצוגות עמודות פר רשומה לאורך


כלי דוחות על ביצועים מול SQL Azure:
SQL Azure? זוכרים? שכחנו אותו ? לא ולא...
מול SQL Azure – כל DBA סומך רק על עצמו ולכן אין כלים מיוחדים כרגע מין הסתם יוציאו בקרוב Quest, idera ועוד חברות שונות כלים לניתוח ביצועים ופעולות בענן. יש כלים בתשלום לביצוע גיבויים, השוואות Enzo, redgate ועוד

כרגע רק כדי להראות לכולם שכולנו יכולים להיות מנתחים של עצמינו רק צריכים קצת זמן – שכמובן אין לנו הוציאה מיקרוסופט כלי קטן שמציג דוחות פשוטים על ה sql מתוך שאילתות פשוטות גם הן.
הכלי נקרא CSS SQL Azure Diagnostics
הוא מריץ שאילתות כדוגמת מי הפרוצדורה שתופסת הכי הרבה cpu, מי הפקודה שתופסת הכי הרבה IO וכדומה. ומציג בתוך כלי שנראה כמו manager של reporting services
הכלי נראה ככה:

והנה דוח לדוגמא



זהו...
עד כאן להיום - כאמור אשמח לבצע סקירה בהמשך על כלים נוספים - נחכה לכלים עבור ה SQL.



2011-10-27

ועוד קצת על ניהול פיתוח לענן

היום עקב תקלה קטנה מול מיקרוסופט בוצע disable לחשבון.
הדבר גרם לאתר לא לעבוד וכמובן 3 רולים נוטרלו.
כשחזרו לחיים נדרשנו לעשות מחדש deploy ל 3 הרולים.

(רוצים הסבר קטן לעבודה על הענן? ובכן תמצית הדבר הוא שכשאנו עוקפים נהלים שאנו יצרנו בשרתים שלנו מיקרוסופט - לא מרשים לעקוף וכך הכל חייב להתנהל לפי הספר... מה שתעלה לענן זה מה שירוץ ואם תשנה - השינויים יימחקו...)

הבעיה החלה כאשר הסתבר שלא כל קבצי ה deploy נשמרו על מכונת הגירסה וכי אחד הקבצים שודרג לגירסא חדשה שטרם עלתה לענן....

הדבר גזל 4 שעות בנסיון להחזיר את הגירסה...

מסקנתי היא כי חייב להיות נוהל שמירת קבצי deploy מיד אחרי העלתם לענן - ובכך לשמור גיבוי לעת צרה - נכון - אל תצעקו עליי - בוצע לייבל ב TFS - ואפשר למשוך ולקמפל - אבל תראו לי עובד אחד שעשה את זה תוך חמש דקות....?
יש לציין לטובה את ה SQL Azure - שלו - לא קרה כלום כל העת...
כל הכבוד ל SQL...
ובנימה יותצר רצינית - אל תשכחו לגבות כל מה שעולה ... - במיוחד אצלך . אגב בענן עצמו - זה כבר יגובה אל דאגה...
ערב טוב

2011-10-23

New Version of SQLAzure now on West Europe

New version of SQL Azure Deploeyed to West Europe DATACenter and now it 

Microsoft SQL Azure (RTM) - 11.0.1476.26   

It was upgrade  on  2011-10-19 17:00

2011-10-16

SQL Azure DATA Sync - מה זה ואיך מפעילים את זה


שלום רב
שוחררה גרסה חדשה של הפורטל ובה 2 תוספות מרכזיות במיוחד עבור  SQL Azure


1.       - DATA Sync כעת זמין ואפשר לסנכרן בין בסיסי נתונים בענן או בין בסיסי נתונים בענן לבין שרתים בארגון

2.       Reporting כעת זמין כלומר האפשרות שגם הפורטל של SSRS יהיה זמין בענן עצמו.


בכנס שהסתיים זה עתה  SQL Pass -  הכריזו על מספר תוספות שחלקן כבר זמינות וחלקן יהיו זמינות בקרוב, במהלך היום אעלה פוסט שיכיל את הרשימה של הדברים החדשים ופה אתאר בקצרה את הסרביס הקרוי DATA Sync:

אחד הצרכים המרכזיים בבסיסי נתונים בענן הוא גיבויי, וכן העברת טבלאות לבסיסי נתונים אחרים לצורך ייצור דוחות או כל צורך אפליקטיבי אחר.
DATA sync בעיקרון הוא דו כיווני – כלומר יכול לבצע סינכרון הלוך ושוב – צורך זה לטעמי פחות חשוב ויש לדעת איך לקנפג נכון כדי שהעידכון יהי חד כיווני.

לכן יצרו את הסרביס הקרוי DATA Sync – שבא מקיצורה של המילה סנכרון מידע....
כרגע סרביס זה נגיש לכולם דרך הפורטל.
אפשר לסנכרן טבלה עמודה או רשומה בין בסיס נתונים בענן ב data center אחד לבסיס נתונים ב data center אחר, או באותו אחד.
וכן לבסיס נתונים בשרת היושב בארגון.

להלן תיאור הפעלת הסינכרון:
יש בסיס נתונים בשם HUB DB – שהוא בסיס הנתונים – יעד אליו מכוונים השינויים שנרשמים בבסיס המקור.
יש בסיס נתונים בשם Member DB – שהוא בסיס נתונים שממנו נלקחים שינויים ואליו מתעדכן מידע בחזרה (שימו לב שאם אין בו נגיעות והכנסות לא יחזור מידע בחזרה ולכן זהו גיבוי...) – אולם הוא ניתן לשינוי


לאחר מכן נפתח חלון הרשאה ובו בוחרים בסיס נתונים מרכזי להפעלה


פה נפתח צעד ראשון בניהול הסינכרון - כאשר בוחרים לו שם


אחרי כן נפתח חלון עם GUI יפה המאפשר בחירה של בסיס נתונים יעד - HUB  בחץ האדום ובסיס נתונים מקור Member בחץ הירוק  - 


  
כיווני עידכון 


טיימר של כל כמה זמן יתבצע סינכרון


וחלון עם רשימת טבלאות ועמודות לביצעו סינכרון או כאלו עם בעיות


אחרי כל הקינפוג ים יש לבצע deploy בכפתור זה:


ואז מתחילה להתבצע פעולת הסינכרון:



וכשהכל מסתיים זה מסומן ככה

אפשר אם רוצים לא לחכות לטיימר אלא להריץ יזום - פה:


ומה שקורה  - וזה כמובן נבדק מועבר המידע מבסיס הנתונים אחד לחברו – ניתן לבדוק בפשטות על ידי ביצוע select לפי מספר רשומות לפני ואחרי.

עוד נושא קטן - זה הלוגים:

אלו טבלאות שניבנות ונשמרות בבסיס הנתונים ושימו לב - הם מסוכמות לסך הגודל של בסיס הנתונים כלומר העלויות שלהם עליכם...

בימים הקרובים אבחן את היציבות את העומסים עוד קינפוגים ואדווח לכם
חג שמח

לקריאה נוספת של מושגים טכניים ניתן לקרוא בלינקים אלו