שימוש ב- Spark במחברות
באפשרותך להפעיל סוגים רבים ושונים של אפליקציות ב- Spark, כולל קוד בקבצי Script של Python או Scala, קוד Java הידור כארכיון Java (JAR) ואחרים. Spark משמש בדרך כלל בשני סוגים של עומסי עבודה:
- משימות עיבוד אצווה או זרימה כדי לעבד, לנקות ולהמיר נתונים - לעתים קרובות פועל כחלק מצינור אוטומטי.
- הפעלות ניתוח אינטראקטיביות כדי לחקור, לנתח ולהמחיש נתונים.
הפעלת קוד זעיר במחברות
Azure Databricks כולל ממשק מחברת משולב לעבודה עם Spark. מחברות מספקות דרך אינטואיטיבית לשלב קוד עם הערות Markdown, המשמשות בדרך כלל מדעני נתונים ואנליסטים של נתונים. המראה והתחושה של חוויית המחברת המשולבת ב- Azure Databricks דומים לזה של מחברות Jupyter - פלטפורמת מחברת קוד פתוח פופולרית.
מחברות כוללות תא אחד או יותר, שכל תא מכיל קוד או markdown. תאי קוד במחברות כוללים תכונות מסוימות שעשויות לעזור לך להיות פרודוקטיבי יותר, כולל:
- תמיכה בסימון תחביר ובשגיאות.
- השלמת קוד באופן אוטומטי.
- פריטים חזותיים אינטראקטיביים של נתונים.
- היכולת לייצא תוצאות.