MLFlow to popularna biblioteka służąca do śledzenia wyników pracy funkcji. Oryginalnie została zaplanowana do śledzenia działania funkcji Machine Learning, stąd jej nazwa, ale z czasem została zaadoptowana do AI i generalnie może służyć do śledzenia czegoklowiek. MLFlow jest rekomendowany do używania w Databricks. MLFlow może być zainstalowany lokalnie. Tutaj tworzymy środowisko wirtualne, aktywujemy je, instalujemy […]

Instalując databricks cli możesz użyć prostej metody przez pip, ale to pułapka…. W ten sposób zainstalujesz starą wersję, która nie jest zgodna z najnowszym databricks i ma znacznie okrojone możliwości. Zamiast tego uruchom curl -fsSL https://raw.githubusercontent.com/databricks/setup-cli/main/install.sh | sh Po instalacji może być wymagana modyfikacja ścieżki: export PATH=$PATH:/root/bin to oczywiście krok opcjonalny. To niestety nie koniec […]

Secret-scope to miejsce na przechowywanie secretów. Zakładając, że masz już zainstalowane databricks-cli zrobisz to poleceniem databricks secrets list-scopes Polecenie zwróci nazwy secret-scopów. Można ich użyć do wylistowania sekretów w scopie databricks secrets list-secrets MYSCOPE MYSCOPE należy oczywiście zamienić na właściwą nazwę scope Teraz wynikiem jest wykaz secretów. Gdy chcesz pobrać wartość secretu uruchom databricks secrets […]