Bu makalede, bir havuz oluşturup düzenlediğinizde kullanılabilen yapılandırma seçenekleri açıklanmaktadır.
Bir havuz oluşturduğunuzda, boyutunu denetlemek için üç parametre ayarlayabilirsiniz: en az boş örnek, en fazla kapasite ve boşta örnek otomatik sonlandırma.
Havuzun boşta kaldığı minimum örnek sayısı. Bu örneklerin sonlandırılması, Boşta örnek otomatik sonlandırmada belirtilen ayardan bağımsız olarak. Bir küme boşta tüketir Havuzdaki örnekler, Azure Databricks korumak için ek örnekler sağlar En düşük.
Havuzun sağlayabildiği en fazla örnek sayısı. Ayarlanırsa, bu değer tüm örnekleri kısıtlar (boşta + kullanılır). Havuzu kullanan bir küme, Otomatik ölçeklendirmesırasında bu sayıdan daha fazla örnek isterse, istek bir hata vererek başarısız olur .
Bu yapılandırma isteğe bağlıdır. Azure Databricks bir değeri yalnızca aşağıdaki koşullarda ayarlamayı öneririz:
- Altında kalması gereken bir örnek kotasına sahipsiniz.
- Bir iş kümesinin başka bir iş kümesini etkileyerek korunmasını istiyorsunuz. Örneğin, örnek kotasının 100 olduğunu ve işleri çalıştırması gereken A ve B takımlarınızın olduğunu varsayalım. İki ekibin 100 kotasını paylaştığı şekilde, en fazla 50 ve havuz 50 B ile A havuzu oluşturabilirsiniz.
- Büyük maliyetli olmanız gerekir.
Boşta örnek otomatik sonlandırma
Minimum boşta olan örneklerde ayarlanan değerin üzerindeki örneklerin, havuz tarafından sonlandırılmadan önce boşta kalabileceği süre (dakika cinsinden).
Bir havuz, yeni kümeler ve kullanımda olan örnekler için kullanıma yönelik olan boş örneklerden oluşur kümeler çalıştırılarak. Bu örneklerin tümü, şu durumlarda seçilen örnek sağlayıcı türündedir. Havuz oluşturuluyor.
Havuzun örnek türü düzenlenemiyor. Eklenen kümeler bir havuza sürücü ve çalışan düğümleri için aynı örnek türünü kullanın. Farklı örnek türlerinin aileleri, bellek kullanımı yoğun veya yoğun işlem yoğunluğu gibi farklı kullanım örneklerine uyum verebilir lerine.
Azure Databricks her zaman bir yılın kullanım dışı bırakma bildirimini bir örnek türü için izleme desteği olmadan önce sağlar.
Not
Güvenlik gereksinimleriniz işlem yalıtımıiçeriyorsa, çalışan türü olarak bir Standard_F72s_V2 örneği seçin. Bu örnek türleri, tüm fiziksel ana bilgisayarı kullanan yalıtılmış sanal makineleri temsil eder ve örneğin, ABD Savunma etki düzeyi 5 (IL5) iş yüklerinin desteklenmesi için gereken yalıtım düzeyini sağlar.
Havuzdaki boşta örneklere yüklenecek bir Databricks Runtime sürümünü seçerek kümeyi başlatabilirsiniz. Bir Kullanıcı havuz tarafından desteklenen bir küme oluştururken bu çalışma zamanını seçerse, bu küme önceden yüklenmiş bir Databricks Runtime sürümü kullanmayan havuz tarafından desteklenen bir kümeden daha hızlı bir şekilde başlatılır.
Bu seçeneğin hiçbiri , küme tarafından kapanmak üzere ayarlandığında Databricks Runtime sürümünün havuzdaki boşta örneklere talep üzerine indirilmesine neden olur. Küme, havuzdaki örnekleri serbest bıraktığında, Databricks Runtime sürümü bu örneklerde önbelleğe alınır. Aynı Databricks Runtime sürümünü kullanan bir sonraki küme oluşturma işlemi bu önbelleğe alma davranışından yararlanabilir, ancak bu durum garanti edilmez.
Havuz etiketleri, kuruluşunuzdaki çeşitli gruplar tarafından kullanılan bulut kaynaklarının maliyetini kolayca izlemenize olanak sağlar. Bir havuz oluştururken etiketleri anahtar-değer çiftleri olarak belirtebilir ve bu etiketleri VM 'Ler ve disk birimleri gibi bulut kaynaklarına uygular Azure Databricks.
Kolaylık sağlaması için Azure Databricks her havuza üç varsayılan etiket uygular:
Vendor ,
DatabricksInstancePoolId, ve
DatabricksInstancePoolCreatorId . Ayrıca, bir havuz oluştururken özel etiketler ekleyebilirsiniz. En fazla 41 özel etiket ekleyebilirsiniz.
Özel etiket devralma
Havuz ile desteklenen kümeler, varsayılan ve özel etiketleri havuz yapılandırmasından alırlar. Havuz etiketlerinin ve küme etiketlerinin birlikte nasıl çalıştığı hakkında ayrıntılı bilgi için bkz. küme, havuz ve çalışma alanı etiketlerini kullanarak kullanımı izleme.
Özel havuz etiketlerini yapılandırma
Havuz Yapılandırması sayfasının en altında bulunan Etiketler sekmesini seçin.
Özel etiket için bir anahtar-değer çifti belirtin.
Ekle'ye tıklayın.
Genellikle belirli bir işin ne kadar disk alanı olacağını tahmin etmek zor olabilir. Sizi kaydetmek için oluşturma sırasında havuzunuza kaç gigabayt 'tan yönetilen disk İliştirilmek zorunda kalmaktan Azure Databricks, tüm Azure Databricks havuzlarında yerel depolamayı Otomatik ölçeklendirmeye otomatik olarak izin vermez.
Yerel depolama alanını otomatik ölçeklendirmeyle Azure Databricks, sizin için kullanılabilir boş disk alanı miktarını izler. Havuzun örnekleri. Bir örnek diskte çok düşük çalışıyorsa, yeni bir yönetilen disk otomatik olarak eklenir disk alanı tükendiğinden önce. Diskler toplam disk alanı olan 5 TB 'a kadar bir sınıra bağlı sanal makine (sanal makinenin ilk yerel depolama alanı dahil).
Bir sanal makineye bağlı yönetilen diskler yalnızca sanal makine Azure 'a döndürüldü. Diğer bir deyişle, yönetilen diskler, olduğu sürece bir sanal makineden hiçbir zaman ayrılmamış havuzun bir parçası.
Spot örnekleri
Maliyeti kaydetmek için, tüm nokta radyo düğmesini işaretleyerek spot örnekleri kullanmayı seçebilirsiniz.
Havuzdaki kümeler tüm düğümler, sürücü ve çalışan için spot örneklerle başlatılır (havuz olmayan kümeler için karma isteğe bağlı sürücü ve spot örnek çalışanları yerine).
Spot örneklerin olmaması nedeniyle çıkarılırsa, isteğe bağlı örnekler çıkarılan örnekleri değiştirmez.