2011-12-19

Frustration and Pleasure Working with SQL Azure

 

הנאה ותיסכול אלו שני המצרכים אותם אני חווה בעבודה עם SQL Azure.

מצד אחד חידושים מדהימים, מעניינים וייתכן שהם בכיוון של שינוי גדול לדרכי העבודה והפיתוח כיום.

מצד שני מתסכל – רק לפני חודש העברתי webinar בנושא הפורטל וכבר השתנה לחלוטין.

גם זה מצד אחד טוב – אתגרים ודברים חדשים כל הזמן. ומצד שני צריך להכין את ההרצאות כל הזמן.

 

אין רגע דל בענן…

2011-12-12

What's new in SQL Azure new version

שלום לכולם
ובכן גירסה חדשה של SQL Azure שוחררה כמו שכתבתי בפוסט הקודם.
ובכן מה יש לנו בה?
כרגע אין הודעה רישמית מה יש ומה אין - אני אספר רק מה שראיתי ובדקתי.:
1. ניתן ליצור בסיס נתונים חדש עד גודל של 150 GB






2.  פורטל הניהול של ה SQL Azure השתנה לחלוטין - נו טוב בטח שהם שינו מיד אחרי שנתתי הרצאה שלמה איך זה ניראה , כנראה לא נהנו מההרצאה שלי.
אצרף כמה תמונות כדי לטעום אולם אני אשתדל בימים הקרובים לתת פוסט מסודר על זה


הפורטל בסגנון מטרו - שזו תוכנית פנימית של מיקרוסופט
כשנכנסים יש מצד שמאל למטה 3 אפשרויות כשכל אחת אחראית לתחום שונה:
כללי
ניהול
כתיבה ועיצוב





כאן זהו החלק של הניהול
שמחולק גם הוא ל 3 חלקים
חלק עליון של פעולות
חלק אמצעי שמביא סטטיסטיקות
וחלק תחתון שמביא סיכום







בחלק זה יש כפתור שנקרא new 
שפותח
new Federation - שזה החידוש הגדול של גירסה זו של ה SQL Azure ועל כך גם בפוסט בפני עצמו בעתיד




בחלק האחרון של ה desgin
גם יש 3 חלקים
חלק עליון של פעולות
חלק אמצעי של הרצות או שאילתות וכדומה
וחלק תחתון של תוצאות שחוזרות מהשאילתא                                





וגם תרשים של Query plan.עם כל מיני קומבינציות....


נסו ותהנו
וכל זה בלי SSMS...






בצורה זו גם ניתן לראות את הפירוט של כל תא ותא ב PLAN כמו בצד ימין
וכן ברמה סיכומית על כל ההרצה


ועד שכתבתי את הפוסט מיקרוסופט הוציאו את ההודעה הרישמית ממש עכשיו:

windows azure team

SQL Azure team

2011-12-07

New Version of SQLAzure now on West Europe



New version of SQL Azure Deploeyed to West Europe DATACenter and now it 

Server Version Microsoft SQL Azure (RTM) - 11.0.1814.30   Nov 21 2011 16:46:09   Copyright (c) Microsoft Corporation 

whats new in it?
i will check and let you know....

2011-12-02

Webinar on SQLAzure

שלום רב 
ביום ראשון העברתי Webinar על SQL Azure



         זו הכתובת:

את ההקלטה של ה-Webinar ניתן לראות כאן:

פה הייתה לי טעות קטנה בסוף - אני מבטיח בהזדמנות להעלות סרטון עם תיקונים. - לא עברה הרשומה ב SQLAzure DataSync
פשוט כי לא שמרתי אותה...
מצטער טעיתי

יש webinar יותר ישן  בכתובת הזו:
  

אין צורך למלא Key אלא רק שם

2011-11-21

Webinar on SQL Azure: Autopilot to Azure through the portal

שלום לכולם ביום ראשון 2011-11-27 ל Webinar, מאיר דודאי מארח אותי והפעם כולם מוזמנים למעבר כללי על כל הקשור ל SQL Azure בפורטל של ה Azure.
אשתדל לעבור על הדברים הבאים:



1.      הצגת הפורטל עצמו של ה Azure – מעבר כללי – חלקי הפורטל וחיבור לשרתים פיזיים Roles.
2.      הצגת החלק בפורטל שרלוונטי ל:
 SQL Azure
SQL Data sync
 SQL reporting
3.      כניסה ל Manager של SQL Azure
שאילתות
טבלאות
פרוצדורות
אציג מה שונה הכניסה דרך הפורטל לעבודה ב SSMS
4.      הצגת Azure table storage
מה יש בפורטל
אם יספיק הזמן נציג כלים שעובדים על ה ATS 
כולם מוזמנים להירשם דרך ההזמנה הרישמית:
או דרך הלינק של ה livemeeting:

ניפגש..











2011-11-14

SQL Azure and SqlServer 2012 a Conspiracy of silence

שלום רב
ובכן גרסת sqlserver 2012 מתקרבת ומתקרבת, השמועות מדברות על אחת היציאות לאוויר הגדולות ביותר של מוצר מבית Microsoft, ולנו אנשי ה SQL Azure מה נותר לעשות?
לחייך בחיוך ולומר - רבותי לנו כבר יש את זה ב Production...
ועל מה אני מדבר?


ובכן כידוע כאשר יוצאת גירסה חדשה של מוצר מבית מיקרוסופט ישנו תהליך שלם של יציאה לאוויר העולם - החל בקריאת שם למוצר, עבור לשליחת מספר דוגמאות והמשך בשחרור CTP שונים .


גרסת SQLServer2012 עומדת לצאת ותספק המון חידושים שניתן לקרוא עליהם מכאן ועד... הענן אולי...
מבחינת ה DBA's האפליקטיבים מדובר בעיקר על פקודות חדשות ועל חידושים בשפת ה T-SQL.
כולם מצפים בקוצר רוח.


מי לא זוכר איך אי שם בשנת 2005 חיכינו ל TRY and Catch שעולם ה SQL Server חווה לראשונה,
מי לא זוכר את שנת 2008 בה חיכינו כל כך הרבה ל Select top @a... ועוד ועוד.
כזה הוא הטבע שלנו.


ואנו שאנו כבר בענן - כלומר עובדים כבר עם ה SQL Azure יודעים שלא נצטרך יותר CTP למיניהם, ולא נצטרך התקנות ואישורי IT להורדות של מאות MB של קוד וסרביסים או סרברים (כן  - בטח שנצטרך - נצטרך לשדרג את ה SSMS או לעבור להשתמש בטרנד החדש SSDT - אולי נרחיב עליו בפעם אחרת), אבל להינות מעולמות חדשים ? זה כבר מגישים לנו בכפית זהב...


ועל מה כל הפיוטים למעלה?
מי שלא ראה את אחד הפוסטים הקודמים - לאחרונה שודרגה גרסת ה SQL Azure - שימו לב - התקינו לנו גירסה חדשה. ואנו כבר יכולים להתחיל וליהנות מT-SQL שזמין כרגע רק ב SqlServer 2012 .
כלומר יש פקודות שכרגע ניתן לכתוב אותם רק ב SQL Azure במוצר שהוא Production.
אפשר לומר שזהו אחד היתרונות הגדולים ביותר בעבודה ב Azure וכדאי לנצל אותו עד תום.
הנה דוגמא אחת קטנה ויחידה למי שרוצה,
ב SqlServer 2012 הוסיפו מינוח חדש שנקרא THROW, מינוח חדש זה מאפשר זריקת שגיאה מקורית בתוך TRY and Catch


ולהלן הדוגמא




ויש עוד דוגמאות רבות..


כרגע יש 2 מאמרים קצרים מאד שכותבים על זה
ניתן לקרוא עליהם ב:


http://social.technet.microsoft.com/wiki/contents/articles/new-spatial-features-in-the-sql-azure-q2-2011-service-release.aspx

וב
http://www.sqlskills.com/BLOGS/BOBB/post/SQL-Denali-T-SQL-features-in-SQL-Azure-now.aspx


מעבר לסיבות השונות לעבוד ב AZURE, זו סיבה קטנה אבל מאד מהנה לעבור לענן


יום נעים

2011-11-07

Lowering the price of Azure Storage

האם גם פה "העם דורש צדק חברתי" השפיע?
ובכן אין לדעת אולם בכל מקרה מיקרוסופט הודיע כי היא מורידה בסנט עלות של GB מ 0.15 ל 0.14 GB per Month .


הורדת המחיר אמורה למשוך לדעתי מרחב גדול של חברות ולענות על מרחב גדול של צרכים - ולא רק כאלו שעובדים בענן עצמו.
גיבויי קבצים, לוגים ענקיים, קבצים רגילים או כל צורך של שמירה גיבוי וכדומה יכול להוות בסיס לשימוש ב Azure Storage.
במיוחד לאור השינו שהסברנו לפני כמה פוסטים על הריפלוק בין DATA Centers של המידע.
נסו ובידקו


להלן הלינק המציין את הורדת המחירים
http://www.microsoft.com/windowsazure/offers/MS-AZR-0021P?currency-locale=en-us/&WT.mc_id=cmp_pri001_blg_001

2011-11-02

Azure Icons Problems

כידוע אחד הצרכים של מנהלי פיתוח ושל מנתחי מערכות הינה האייקונים בה יציגו את המערכת.
כיצד יוצג בסיס נתונים, כיצד יוצג שרת אפליקציות או שירות של יצירת דוחות וכדומה.
עם השנים השתרשו מספר Icons שמהווים סוג של סטנדרט עולמי לגבי הצגת בסיס נתונים, שרותי ווב וכדומה.


בענן הבעיה חמורה כפליים.
אין תקן אחיד וכל אחד מצייר משהו ולידו ציור של ענן, ייתכן שזה טוב אולם זה מחמיר עקב השירותים המיוחדים של הענן.
כיום אני מכיר 2 מקורות אדם שעובד הרבה עם Azure ומנסה ליצור מין תקן ועשה הרבה אייקונים לשלל השירותים של הענן ולהלן הלינק:


http://davidpallmann.blogspot.com/2011/09/windows-azure-design-pattern-icons.html


שמו הוא David Pallmann, הוא יצר מגוון גדול מאוד של אייקונים שניתן להשתמש בהם ואף להגדיל אותם או להקטין מבלי לפגוע ברזולוציה.


אדם נוסף בשם Josh Twist שיצר גם הוא אייקונים אולם ללא מגוון רחב, מצד שני הם יותר מובנים:


http://www.thejoyofcode.com/Cloud_Artwork.aspx


מעניין איך מיקרוסופט עצמה טרם הוציאה סט של אייקונים.
נסו ותהנו

2011-10-31

Free Tools Related to Azure


בפוסט זה אבצע סקירה על הכלים השונים הקיימים בשוק – שמבצעים פעולות שונות מול ה azure, אני מתנצל מראש על סגנון הכתיבה הטרחני משהו ועל הקיצור הנמרץ שקיצרתי בכל סקירה וסקירה, אם המוני בית ישראל יצביעו ברגלים אתן פרוט רב על כל כלי וכלי.

אסקור כלים שונים החל בכלי ניטור ותצוגה על מצב השרתים, עבור לפעולות מול ה storage, וכלה בדוחות על ביצועים.

לא אציג למרות שזה היה מתבקש  - כיצד לגשת ל SQL Azure – מי שרוצה מוזמן לראות את אחד הפוסטים הראשונים... J

כל הכלים שיוצגו פה הם כלים שנבחנו לאורך זמן והם חינמיים. אציג את היתרונות והחסרונות שלהם מנקודת המבט שלי. זו נקודת מבט אחת ויכול להיות שלא מצאתי את שראוי להיות ראוי למרות שראוי הוא. אצרף תמונות לראות את ה GUI שלהם.

מי שיודע על עוד כלים אני אשמח לקבל דיווח, אבדוק ואדווח, מי שכתב כלי ולא הגעתי אליו אני מבקש את סליחתו מראש.
נתחיל בכלי ניטור על פעילות השרתים שקיימים ב Azure:

Spotlight on Azure של חברת Quest:

כידוע ב Azure נרכשים שרתים בגדלים מסויימים לבצע פעולות מסוייומת – שרתי ווב ושרתי אפליקציות.
חברת Quest  כתבה מוצר יפה לעין, יציב ומאד מקיף שמציג את מצב השרתים ברמת הזיכרון ה CPU ה IO ועוד
הכלי נותן לנטר מצב ברמת שרת  - Hosted service, ברמת ה Deployment, ברמת ה Instance וברמת ה Role (למי שטרם הכיר את ההיררכיה בענן זו ההרירכיה – מעל כולם יש subscription אבל הוא לא שייך לפה).

כמו כן ניתן לנטר לפי זמנים מוגדרים מראש או לפלטר לפי שעות שאני בורר.
הכלי נותן אפשרויות להתרעות וגם מסמן לפי צבעים בעיות שונות.

להלן כמה תמונות:
מראה כללי של האפליקציה

         אלו המדדים שניתן לבדוק

        מראה ברמת ה 
        service hosted

       מראה ברמת ה
       Deployment

      מראה ברמת ה 
      Role
      פה אפשר לראות מדדים כמו קיבולת, מצב עכשוי, כמה קריאות  וכדומה

    
      מראה ברמת ה
      Instance
      גם פה אפשר לראות מדדים שונים

      ומקרוב


עכשיו נעבור לכלי ניהול של נתונים ב Azure Storage:

נציג כלי וובי של מיקרוסופט לניטור פעולות על ה storage
זהו כלי בסיסי שצריך להפעיל מספר flags  בכדי שייכנס לעבודה. הפעלת דגלים אלו תתבצע באותו אתר. הכול מבוסס על שאילתות על טבלאות שמתמלאות ב storage והאתר מנהל אותם
יש להיכנס לכתובת :  http://storageanalytics.cloudapp.net
למלא פרטים של חשבון  storage ואז לבחור מה שרוצים אם רוצים סטטיסטיקות על blob או על טבלאות.
הכלי הוא מאד בוסרי וללא התערבות מפתח לא מציג נתוני אמת ובעצם הוא סוג של קוד פתוח – מי שרוצה להרחיב מוזמן – מי שמנהל ויוזם את זה Steve Marx ממיקרוסופט.



נציג 4 כלים לשליפת ועדכון של Azure Storage:

לפני שאציג את הכלים – יש לדעת שיש כלים בתשלום – טובים יותר וטובים פחות – פה אציג את הכלים בחינם:

1.      TacleXplorer – של Clumsyleafsoftware – זהו כלי טוב מאד מציג את כל הטבלאות שקיימות בסטורג', הוא מאד מהיר ויעיל אפשר לקרוא ממנו נתונים ולהוריד אל המחשב, הכלי נמצא בשימוש אפילו אצל מהנדסי מיקרוסופט עצמם... איך אני יודע? פעם אחרת... הכלי מאד מוגבל במספר הפעולות שמבצע אין שאילתות, אין עידכונים, רק העלאות מידע, מחיקות של DATA, והורדת מידע, כמו הן הוא מאד יציב ולא נתקע כלל.


       
         עוד כלי של אותה חברה לגלוש ל blob נקרא cloudexplorer

2.      Azure Storage Explorer – של חברת Neudesic:
זהו כלי מאד שימושי – יש בו את כל הדברים שצריך לבצע על Storage, יש פה את החלוקה ל tables, blobs, queues. ניתן לבצע העלאות הורדות מחיקות טבלאות  - images קבצים גדולים וכל מה שרוצים. אולם הוא לא יציב כנראה יש בו המון שגיאות קוד והוא נסגר די הרבה פעמים. גם הוא לא מציג טבלאות מערכת למשל של מדדים.


3.      Quest Cloud Storage Manager for Azure – ושוב כלי של Quest
כלי גם כן שימושי – ניתן לבצע בו שאילתות בצורה טובה מאד ומובנה בכלי. גם פה יש את כל שלושת החלקים ל ה storage, החסרון שלו הוא שאי אפשר להעלות קבצים – אבל מן הסתם הם יפתרו את זה בהמשך כבר יש גרסאות חדשות שטרם הספיקותי להוריד.

מראה כללי


  מראה של טבלה   

 - ופילטר השאילתות- פה אפשר ללמוד כיצד מבצעים שאילתות מול
Storage



4.      https://www.myazurestorage.com – אתר לניהול Storage של מיקרוסופט הוא מכיל כל העולמות של ה storage – כלי יעיל נוח וניתן להריץ דרכו שאילתות, אפשר לערוך להוסיף ובעצם  לבצע את כל הפעולות, החסרון היחידי שאני ראיתי הוא שהתצוגה של טבלאות לא כל כך נוחה אבל זה משהו אישי...

תצוגה של blob


תצוגה של טבלאות  - חץ אדום לבחירת עמודות לתצוגה. חץ ירוק לתצוגות עמודות פר רשומה לאורך


כלי דוחות על ביצועים מול SQL Azure:
SQL Azure? זוכרים? שכחנו אותו ? לא ולא...
מול SQL Azure – כל DBA סומך רק על עצמו ולכן אין כלים מיוחדים כרגע מין הסתם יוציאו בקרוב Quest, idera ועוד חברות שונות כלים לניתוח ביצועים ופעולות בענן. יש כלים בתשלום לביצוע גיבויים, השוואות Enzo, redgate ועוד

כרגע רק כדי להראות לכולם שכולנו יכולים להיות מנתחים של עצמינו רק צריכים קצת זמן – שכמובן אין לנו הוציאה מיקרוסופט כלי קטן שמציג דוחות פשוטים על ה sql מתוך שאילתות פשוטות גם הן.
הכלי נקרא CSS SQL Azure Diagnostics
הוא מריץ שאילתות כדוגמת מי הפרוצדורה שתופסת הכי הרבה cpu, מי הפקודה שתופסת הכי הרבה IO וכדומה. ומציג בתוך כלי שנראה כמו manager של reporting services
הכלי נראה ככה:

והנה דוח לדוגמא



זהו...
עד כאן להיום - כאמור אשמח לבצע סקירה בהמשך על כלים נוספים - נחכה לכלים עבור ה SQL.



2011-10-27

ועוד קצת על ניהול פיתוח לענן

היום עקב תקלה קטנה מול מיקרוסופט בוצע disable לחשבון.
הדבר גרם לאתר לא לעבוד וכמובן 3 רולים נוטרלו.
כשחזרו לחיים נדרשנו לעשות מחדש deploy ל 3 הרולים.

(רוצים הסבר קטן לעבודה על הענן? ובכן תמצית הדבר הוא שכשאנו עוקפים נהלים שאנו יצרנו בשרתים שלנו מיקרוסופט - לא מרשים לעקוף וכך הכל חייב להתנהל לפי הספר... מה שתעלה לענן זה מה שירוץ ואם תשנה - השינויים יימחקו...)

הבעיה החלה כאשר הסתבר שלא כל קבצי ה deploy נשמרו על מכונת הגירסה וכי אחד הקבצים שודרג לגירסא חדשה שטרם עלתה לענן....

הדבר גזל 4 שעות בנסיון להחזיר את הגירסה...

מסקנתי היא כי חייב להיות נוהל שמירת קבצי deploy מיד אחרי העלתם לענן - ובכך לשמור גיבוי לעת צרה - נכון - אל תצעקו עליי - בוצע לייבל ב TFS - ואפשר למשוך ולקמפל - אבל תראו לי עובד אחד שעשה את זה תוך חמש דקות....?
יש לציין לטובה את ה SQL Azure - שלו - לא קרה כלום כל העת...
כל הכבוד ל SQL...
ובנימה יותצר רצינית - אל תשכחו לגבות כל מה שעולה ... - במיוחד אצלך . אגב בענן עצמו - זה כבר יגובה אל דאגה...
ערב טוב

2011-10-23

New Version of SQLAzure now on West Europe

New version of SQL Azure Deploeyed to West Europe DATACenter and now it 

Microsoft SQL Azure (RTM) - 11.0.1476.26   

It was upgrade  on  2011-10-19 17:00

2011-10-16

SQL Azure DATA Sync - מה זה ואיך מפעילים את זה


שלום רב
שוחררה גרסה חדשה של הפורטל ובה 2 תוספות מרכזיות במיוחד עבור  SQL Azure


1.       - DATA Sync כעת זמין ואפשר לסנכרן בין בסיסי נתונים בענן או בין בסיסי נתונים בענן לבין שרתים בארגון

2.       Reporting כעת זמין כלומר האפשרות שגם הפורטל של SSRS יהיה זמין בענן עצמו.


בכנס שהסתיים זה עתה  SQL Pass -  הכריזו על מספר תוספות שחלקן כבר זמינות וחלקן יהיו זמינות בקרוב, במהלך היום אעלה פוסט שיכיל את הרשימה של הדברים החדשים ופה אתאר בקצרה את הסרביס הקרוי DATA Sync:

אחד הצרכים המרכזיים בבסיסי נתונים בענן הוא גיבויי, וכן העברת טבלאות לבסיסי נתונים אחרים לצורך ייצור דוחות או כל צורך אפליקטיבי אחר.
DATA sync בעיקרון הוא דו כיווני – כלומר יכול לבצע סינכרון הלוך ושוב – צורך זה לטעמי פחות חשוב ויש לדעת איך לקנפג נכון כדי שהעידכון יהי חד כיווני.

לכן יצרו את הסרביס הקרוי DATA Sync – שבא מקיצורה של המילה סנכרון מידע....
כרגע סרביס זה נגיש לכולם דרך הפורטל.
אפשר לסנכרן טבלה עמודה או רשומה בין בסיס נתונים בענן ב data center אחד לבסיס נתונים ב data center אחר, או באותו אחד.
וכן לבסיס נתונים בשרת היושב בארגון.

להלן תיאור הפעלת הסינכרון:
יש בסיס נתונים בשם HUB DB – שהוא בסיס הנתונים – יעד אליו מכוונים השינויים שנרשמים בבסיס המקור.
יש בסיס נתונים בשם Member DB – שהוא בסיס נתונים שממנו נלקחים שינויים ואליו מתעדכן מידע בחזרה (שימו לב שאם אין בו נגיעות והכנסות לא יחזור מידע בחזרה ולכן זהו גיבוי...) – אולם הוא ניתן לשינוי


לאחר מכן נפתח חלון הרשאה ובו בוחרים בסיס נתונים מרכזי להפעלה


פה נפתח צעד ראשון בניהול הסינכרון - כאשר בוחרים לו שם


אחרי כן נפתח חלון עם GUI יפה המאפשר בחירה של בסיס נתונים יעד - HUB  בחץ האדום ובסיס נתונים מקור Member בחץ הירוק  - 


  
כיווני עידכון 


טיימר של כל כמה זמן יתבצע סינכרון


וחלון עם רשימת טבלאות ועמודות לביצעו סינכרון או כאלו עם בעיות


אחרי כל הקינפוג ים יש לבצע deploy בכפתור זה:


ואז מתחילה להתבצע פעולת הסינכרון:



וכשהכל מסתיים זה מסומן ככה

אפשר אם רוצים לא לחכות לטיימר אלא להריץ יזום - פה:


ומה שקורה  - וזה כמובן נבדק מועבר המידע מבסיס הנתונים אחד לחברו – ניתן לבדוק בפשטות על ידי ביצוע select לפי מספר רשומות לפני ואחרי.

עוד נושא קטן - זה הלוגים:

אלו טבלאות שניבנות ונשמרות בבסיס הנתונים ושימו לב - הם מסוכמות לסך הגודל של בסיס הנתונים כלומר העלויות שלהם עליכם...

בימים הקרובים אבחן את היציבות את העומסים עוד קינפוגים ואדווח לכם
חג שמח

לקריאה נוספת של מושגים טכניים ניתן לקרוא בלינקים אלו