Databricks Runtime 14.1 dla Machine Learning (EoS)

Uwaga / Notatka

Obsługa tej wersji środowiska Databricks Runtime została zakończona. Aby zapoznać się z datą zakończenia wsparcia, zobacz End-of-support and end-of-life history (Koniec wsparcia technicznego i historia zakończenia życia). Wszystkie obsługiwane wersje środowiska Databricks Runtime można znaleźć w sekcji Notatki o wersjach i zgodności środowiska Databricks Runtime.

Databricks Runtime 14.1 dla uczenia maszynowego zapewnia gotowe środowisko do uczenia maszynowego i data science na podstawie Databricks Runtime 14.1 (EoS). Środowisko Databricks Runtime ML zawiera wiele popularnych bibliotek uczenia maszynowego, w tym TensorFlow, PyTorch i XGBoost. Środowisko Databricks Runtime ML obejmuje rozwiązanie AutoML— narzędzie do automatycznego trenowania potoków uczenia maszynowego. Środowisko Databricks Runtime ML obsługuje również trenowanie rozproszonego uczenia głębokiego przy użyciu struktury Horovod.

Nowe funkcje i ulepszenia

Środowisko Databricks Runtime 14.1 ML jest oparte na środowisku Databricks Runtime 14.1. Aby uzyskać informacje o nowościach w środowisku Databricks Runtime 14.1, w tym apache Spark MLlib i SparkR, zobacz informacje o wersji środowiska Databricks Runtime 14.1 (EoS).

Ulepszenia rozwiązania AutoML

Notatniki wygenerowane przez AutoML są teraz zapisywane jako artefakty MLflow.

Ulepszenia magazynu funkcji usługi Databricks

Teraz możesz automatycznie wnioskować i rejestrować przykład danych wejściowych podczas rejestrowania modelu. W tym celu ustaw infer_model_example na True w momencie wywołania log_model. Przykład jest oparty na danych treningowych określonych w parametrze training_set .

Aby uzyskać więcej informacji na temat Databricks Feature Store, zobacz Databricks Feature Store.

Środowisko systemu

Środowisko systemowe w środowisku Databricks Runtime 14.1 ML różni się od środowiska Databricks Runtime 14.1 w następujący sposób:

  • DBUtils: Databricks Runtime ML nie zawiera narzędzia biblioteki (dbutils.library) (starsza wersja). Użyj poleceń %pip zamiast tego. Zobacz biblioteki Python Python Notebook.
  • W przypadku klastrów gpu środowisko Databricks Runtime ML obejmuje następujące biblioteki procesora GPU FIRMY NVIDIA:
    • CUDA 11.8
    • cuDNN 8.9.0.131-1
    • NCCL 2.15.5
    • TensorRT 8.5.3-1

Środowisko Databricks Runtime 14.1 ML zawiera bibliotekę XGBoost 1.7.6, która nie obsługuje klastrów procesora GPU z możliwościami obliczeniowymi 5.2 i nowszymi.

Biblioteki

W poniższych sekcjach wymieniono biblioteki zawarte w środowisku Databricks Runtime 14.1 ML, które różnią się od bibliotek zawartych w środowisku Databricks Runtime 14.1.

W tej sekcji:

Biblioteki najwyższego poziomu

Środowisko Databricks Runtime 14.1 ML obejmuje następujące biblioteki najwyższego poziomu:

biblioteki Python

Środowisko Databricks Runtime 14.1 ML używa usługi Virtualenv do zarządzania pakietami Python i zawiera wiele popularnych pakietów uczenia maszynowego.

Oprócz pakietów określonych w poniższych sekcjach środowisko Databricks Runtime 14.1 ML zawiera również następujące pakiety:

  • hyperopt 0.2.7+db4
  • Sparkdl 3.0.0_db1
  • automl 1.22.0

Uwaga / Notatka

Pliki requirements zawierają wersje pakietów dla tego wydania. Użycie tych wersji może spowodować zainstalowanie przestarzałych pakietów urzędów certyfikacji, w tym certifi. Przed nawiązaniem zdalnych połączeń HTTPS zastosuj aktualizacje pakietu wymienione w zaleceniach bezpieczeństwa eMudhra. Zachowaj włączoną weryfikację certyfikatu TLS i testuj kompatybilność pakietów po aktualizacjach.

Aby odtworzyć środowisko Python Databricks Runtime ML w lokalnym środowisku wirtualnym Python, pobierz plik requirements-14.1.txt i uruchom pip install -r requirements-14.1.txt. To polecenie instaluje wszystkie biblioteki open source używane przez usługę Databricks Runtime ML, ale nie instaluje bibliotek opracowanych przez usługę Databricks, takich jak databricks-automl, databricks-feature-store lub rozwidlenie usługi Databricks hyperopt.

biblioteki Python w klastrach procesora CPU

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
absl-py 1.0.0 przyspieszać 0.21.0 aiohttp 3.8.5
aiosignal 1.3.1 anyio 3.5.0 appdirs 1.4.4
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 Astor 0.8.1
asttokens 2.0.5 astunparse 1.6.3 asynchroniczny limit czasu 4.0.3
attrs 22.1.0 audioread 3.0.0 azure-core 1.29.1
azure-cosmos 4.3.1 azure-storage-blob (usługa przechowywania obiektów blob na platformie Azure) 12.18.1 Azure Storage - Pliki - Jezioro Danych 12.13.1
backcall 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
czarny 22.6.0 wybielacz 4.1.0 kierunkowskaz 1.4
blis 0.7.10 boto3 1.24.28 botocore 1.27.96
cachetools 5.3.1 katalog 2.0.9 kodery kategorii 2.6.2
certyfikat 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 kliknij 8.0.4 cloudpickle 2.0.0
cmdstanpy 1.1.0 Komunikacja 0.1.2 wyrób cukierniczy 0.1.3
configparser 5.2.0 contourpy 1.0.5 convertdate 2.4.0
kryptografia 39.0.1 rowerzysta 0.11.0 cymem 2.0.8
Cython 0.29.32 dacite 1.8.1 databricks-automl-runtime 0.2.19
databricks-cli 0.17.7 databricks-feature-store (magazyn funkcji Databricks) 0.15.1 databricks-sdk 0.1.6
dataclasses-json 0.5.14 zestawy danych 2.14.4 dbl-tempo 0.1.23
dbus-python 1.2.18 debugpy 1.6.7 dekorator 5.1.1
deepspeed 0.10.0 defusedxml 0.7.1 koper 0.3.6
diskcache 5.6.3 distlib 0.3.7 docstring-to-markdown 0,11
punkty wejścia 0,4 ephem 4.1.4 ocenić 0.4.0
Wykonywanie 0.8.3 aspekty — omówienie 1.1.1 fastapi 0.98.0
fastjsonschema 2.18.0 fasttext 0.9.2 filelock 3.9.0
Flask 2.2.5 flatbuffers 23.5.26 fonttools 4.25.0
zamrożona lista 1.4.0 fsspec 2022.11.0 przyszłość 0.18.3
gość 0.4.0 Biblioteka środowiska uruchomieniowego GCC 1.10.0 gitdb 4.0.10
GitPython 3.1.27 google-api-core 2.11.1 google-auth 2.21.0
google-auth-oauthlib 1.0.0 google-cloud-core 2.3.3 google-cloud-storage 2.10.0
google-crc32c 1.5.0 makaron Google 0.2.0 google-resumable-media 2.6.0
googleapis-common-protos 1.60.0 greenlet 2.0.1 grpcio 1.48.2
status grpcio 1.48.1 gunicorn 20.1.0 gviz-api 1.10.0
h11 0.14.0 h5py 3.7.0 hjson 3.1.0
wakacje 0,30 horovod 0.28.1 htmlmin 0.1.12
httplib2 0.20.2 httptools 0.6.0 huggingface-hub 0.14.1
idna 3.4 ImageHash 4.3.1 niezrównoważona nauka 0.10.1
importlib-metadata 4.11.3 importlib-resources 6.0.1 ipykernel 6.25.0
ipython 8.14.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 jegodangerous 2.0.1 jedi 0.18.1
Jeepney 0.7.1 Jinja2 3.1.2 jmespath 0.10.0
joblib 1.2.0 joblibspark 0.5.1 jsonschema 4.17.3
jupyter-client 7.3.4 serwer Jupyter 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 keras 2.13.1
brelok 23.5.0 kiwisolver 1.4.4 langchain 0.0.267
kody_językowe 3.3.0 langsmith 0.0.38 launchpadlib 1.10.16
lazr.restfulclient 0.14.4 lazr.uri 1.0.6 lazy_loader 0.3
libclang 15.0.6.1 librosa 0.10.1 lightgbm 4.0.0
llvmlite 0.39.1 Kalendarz Księżycowy 0.0.9 lxml 4.9.1
Mako 1.2.0 Markdown 3.4.1 MarkupSafe 2.1.1
Zefir 3.20.1 matplotlib 3.7.0 matplotlib-inline 0.1.6
Mccabe 0.7.0 fałszywa nuta 0.8.4 mlflow-skinny 2.7.1
more-itertools 8.10.0 mpmath 1.2.1 msgpack 1.0.5
multidict 6.0.4 wielometodowy 1.9.1 przetwarzanie wieloprocesowe 0.70.14
szmurhash 1.0.10 mypy-extensions 0.4.3 nbclassic 0.5.2
nbclient 0.5.13 nbconvert 6.5.4 nbformat 5.7.0
nest-asyncio 1.5.6 networkx 2.8.4 Ninja 1.11.1
nltk 3.7 nodeenv 1.8.0 notes 6.5.2
notebook_shim 0.2.2 numba 0.56.4 numexpr 2.8.4
numpy 1.23.5 oauthlib 3.2.0 openai 0.27.8
openapi-schema-pydantic 1.2.4 opt-einsum 3.3.0 opakowanie 22,0
Pandas 1.5.3 pandocfilters 1.5.0 paramiko 2.9.2
parso 0.8.3 pathspec 0.10.3 If "pathy" is a stand-alone context reference, it might be best left as is unless further context suggests a specific translation is warranted. 0.10.2
Patsy 0.5.3 petastorm 0.12.1 pexpect 4.8.0
phik 0.12.3 pickleshare 0.7.5 Poduszka 9.4.0
pip 22.3.1 platformdirs 2.5.2 kreślenie 5.9.0
wtyczka 1.0.0 pmdarima 2.0.3 kundel 1.4.0
preshed 3.0.9 prometheus-client 0.14.1 prompt-toolkit 3.0.36
prorok 1.1.4 protobuf 4.24.0 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
py-cpuinfo 9.0.0 pyarrow 8.0.0 pyasn1 0.4.8
pyasn1-modules 0.2.8 pybind11 2.11.1 pycparser 2.21
pydantic 1.10.6 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 PyMeeus 0.5.12
PyNaCl 1.5.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 pyrsistent 0.18.0 pytesseract 0.3.10
python-dateutil 2.8.2 python-dotenv 1.0.0 Python-editor 1.0.4
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.5
pytz 2022.7 PyWavelets 1.4.1 PyYAML 6.0
pyzmq 23.2.0 wyrażenie regularne 2022.7.9 żądania 2.28.1
requests-oauthlib 1.3.1 Odpowiedzi 0.18.0 lina 1.7.0
rsa 4.9 s3transfer 0.6.2 safetensors 0.3.3
scikit-learn 1.1.1 seaborn 0.12.2 SecretStorage 3.3.1
Send2Trash 1.8.0 transformatory zdań 2.2.2 element zdania 0.1.99
setuptools 65.6.3 Shap 0.42.1 simplejson 3.17.6
Sześć 1.16.0 fragmentator 0.0.7 smart-open 5.2.1
smmap 5.0.0 sniffio 1.2.0 plik dźwiękowy 0.12.1
sito do zupy 2.3.2.post1 soxr 0.3.6 spacy 3.6.1
spacy-legacy 3.0.12 spacy-loggers 1.0.5 spark-tensorflow-distributor 1.0.0
SQLAlchemy 1.4.39 sqlparse 0.4.2 serio 2.4.7
ssh-import-id 5,11 stack-data 0.2.0 gwiazdka 0.27.0
statsmodels 0.13.5 sympy 1.11.1 tabelować 0.8.10
splątane w unicode 0.2.0 Wytrzymałość 8.1.0 tablica tensorboard 2.13.0
tensorboard-data-server 0.7.1 tensorboard-plugin-profile 2.13.1 tensorflow-cpu 2.13.0
tensorflow-estimator 2.13.0 tensorflow-io-gcs-filesystem 0.34.0 termcolor 2.3.0
zakończony 0.17.1 cienki 8.1.12 threadpoolctl 2.2.0
tiktoken 0.4.0 tinycss2 1.2.1 tokenize-rt 4.2.1
tokenizatory 0.13.3 tomli 2.0.1 pochodnia 2.0.1+ procesor
torchvision 0.15.2+procesor tornado 6.1 tqdm 4.64.1
traitlets 5.7.1 Transformatory 4.31.0 strażnik typu 2.13.3
pisarz 0.9.0 inspekcja wpisywania 0.9.0 typing_extensions 4.4.0
ujson 5.4.0 nienadzorowane uaktualnienia 0.1 urllib3 1.26.14
uvicorn 0.23.2 uvloop 0.17.0 virtualenv 20.16.7
Wizje 0.7.5 wadllib 1.3.6 wasabi 1.1.2
watchfiles 0.20.0 wcwidth 0.2.5 webencodings 0.5.1
klient websocket 0.58.0 websockets 11.0.3 Narzędzie 2.2.2
whatthepatch 1.0.2 wheel 0.38.4 widgetsnbextension 3.6.1
wordcloud 1.9.2 owinięty 1.14.1 xgboost 1.7.6
xxhash 3.3.0 yapf 0.31.0 Yarl 1.9.2
profilowanie danych 4.2.0 zamek błyskawiczny 3.11.0

biblioteki Python w klastrach gpu

Biblioteka Wersja Biblioteka Wersja Biblioteka Wersja
absl-py 1.0.0 przyspieszać 0.21.0 aiohttp 3.8.5
aiosignal 1.3.1 anyio 3.5.0 appdirs 1.4.4
argon2-cffi 21.3.0 argon2-cffi-bindings 21.2.0 Astor 0.8.1
asttokens 2.0.5 astunparse 1.6.3 asynchroniczny limit czasu 4.0.3
attrs 22.1.0 audioread 3.0.0 azure-core 1.29.1
azure-cosmos 4.3.1 azure-storage-blob (usługa przechowywania obiektów blob na platformie Azure) 12.18.1 Azure Storage - Pliki - Jezioro Danych 12.13.1
backcall 0.2.0 bcrypt 3.2.0 beautifulsoup4 4.11.1
czarny 22.6.0 wybielacz 4.1.0 kierunkowskaz 1.4
blis 0.7.10 boto3 1.24.28 botocore 1.27.96
cachetools 5.3.1 katalog 2.0.9 kodery kategorii 2.6.2
certyfikat 2022.12.7 cffi 1.15.1 chardet 4.0.0
charset-normalizer 2.0.4 kliknij 8.0.4 cloudpickle 2.0.0
cmake 3.27.5 cmdstanpy 1.1.0 Komunikacja 0.1.2
wyrób cukierniczy 0.1.3 configparser 5.2.0 contourpy 1.0.5
convertdate 2.4.0 kryptografia 39.0.1 rowerzysta 0.11.0
cymem 2.0.8 Cython 0.29.32 dacite 1.8.1
databricks-automl-runtime 0.2.19 databricks-cli 0.17.7 databricks-feature-store (magazyn funkcji Databricks) 0.15.1
databricks-sdk 0.1.6 dataclasses-json 0.5.14 zestawy danych 2.14.4
dbl-tempo 0.1.23 dbus-python 1.2.18 debugpy 1.6.7
dekorator 5.1.1 deepspeed 0.10.0 defusedxml 0.7.1
koper 0.3.6 diskcache 5.6.3 distlib 0.3.7
docstring-to-markdown 0,11 einops 0.6.1 punkty wejścia 0,4
ephem 4.1.4 ocenić 0.4.0 Wykonywanie 0.8.3
aspekty — omówienie 1.1.1 fastapi 0.98.0 fastjsonschema 2.18.0
fasttext 0.9.2 filelock 3.9.0 flash-attn 2.0.8
Flask 2.2.5 flatbuffers 23.5.26 fonttools 4.25.0
zamrożona lista 1.4.0 fsspec 2022.11.0 przyszłość 0.18.3
gość 0.4.0 Biblioteka środowiska uruchomieniowego GCC 1.10.0 gitdb 4.0.10
GitPython 3.1.27 google-api-core 2.11.1 google-auth 2.21.0
google-auth-oauthlib 1.0.0 google-cloud-core 2.3.3 google-cloud-storage 2.10.0
google-crc32c 1.5.0 makaron Google 0.2.0 google-resumable-media 2.6.0
googleapis-common-protos 1.60.0 greenlet 2.0.1 grpcio 1.48.2
status grpcio 1.48.1 gunicorn 20.1.0 gviz-api 1.10.0
h11 0.14.0 h5py 3.7.0 hjson 3.1.0
wakacje 0,30 horovod 0.28.1 htmlmin 0.1.12
httplib2 0.20.2 httptools 0.6.0 huggingface-hub 0.14.1
idna 3.4 ImageHash 4.3.1 niezrównoważona nauka 0.10.1
importlib-metadata 4.11.3 importlib-resources 6.0.1 ipykernel 6.25.0
ipython 8.14.0 ipython-genutils 0.2.0 ipywidgets 7.7.2
isodate 0.6.1 jegodangerous 2.0.1 jedi 0.18.1
Jeepney 0.7.1 Jinja2 3.1.2 jmespath 0.10.0
joblib 1.2.0 joblibspark 0.5.1 jsonschema 4.17.3
jupyter-client 7.3.4 serwer Jupyter 1.23.4 jupyter_core 5.2.0
jupyterlab-pygments 0.1.2 jupyterlab-widgets 1.0.0 keras 2.13.1
brelok 23.5.0 kiwisolver 1.4.4 langchain 0.0.267
kody_językowe 3.3.0 langsmith 0.0.38 launchpadlib 1.10.16
lazr.restfulclient 0.14.4 lazr.uri 1.0.6 lazy_loader 0.3
libclang 15.0.6.1 librosa 0.10.1 lightgbm 4.0.0
Zapalił 16.0.6 llvmlite 0.39.1 Kalendarz Księżycowy 0.0.9
lxml 4.9.1 Mako 1.2.0 Markdown 3.4.1
MarkupSafe 2.1.1 Zefir 3.20.1 matplotlib 3.7.0
matplotlib-inline 0.1.6 Mccabe 0.7.0 fałszywa nuta 0.8.4
mlflow-skinny 2.7.1 more-itertools 8.10.0 mpmath 1.2.1
msgpack 1.0.5 multidict 6.0.4 wielometodowy 1.9.1
przetwarzanie wieloprocesowe 0.70.14 szmurhash 1.0.10 mypy-extensions 0.4.3
nbclassic 0.5.2 nbclient 0.5.13 nbconvert 6.5.4
nbformat 5.7.0 nest-asyncio 1.5.6 networkx 2.8.4
Ninja 1.11.1 nltk 3.7 nodeenv 1.8.0
notes 6.5.2 notebook_shim 0.2.2 numba 0.56.4
numexpr 2.8.4 numpy 1.23.5 oauthlib 3.2.0
openai 0.27.8 openapi-schema-pydantic 1.2.4 opt-einsum 3.3.0
opakowanie 22,0 Pandas 1.5.3 pandocfilters 1.5.0
paramiko 2.9.2 parso 0.8.3 pathspec 0.10.3
If "pathy" is a stand-alone context reference, it might be best left as is unless further context suggests a specific translation is warranted. 0.10.2 Patsy 0.5.3 petastorm 0.12.1
pexpect 4.8.0 phik 0.12.3 pickleshare 0.7.5
Poduszka 9.4.0 pip 22.3.1 platformdirs 2.5.2
kreślenie 5.9.0 wtyczka 1.0.0 pmdarima 2.0.3
kundel 1.4.0 preshed 3.0.9 prompt-toolkit 3.0.36
prorok 1.1.4 protobuf 4.24.0 psutil 5.9.0
psycopg2 2.9.3 ptyprocess 0.7.0 pure-eval 0.2.2
py-cpuinfo 9.0.0 pyarrow 8.0.0 pyasn1 0.4.8
pyasn1-modules 0.2.8 pybind11 2.11.1 pycparser 2.21
pydantic 1.10.6 pyflakes 3.0.1 Pygments 2.11.2
PyGObject 3.42.1 PyJWT 2.3.0 PyMeeus 0.5.12
PyNaCl 1.5.0 pyodbc 4.0.32 pyparsing 3.0.9
pyright 1.1.294 pyrsistent 0.18.0 pytesseract 0.3.10
python-dateutil 2.8.2 python-dotenv 1.0.0 Python-editor 1.0.4
python-lsp-jsonrpc 1.0.0 python-lsp-server 1.7.1 pytoolconfig 1.2.5
pytz 2022.7 PyWavelets 1.4.1 PyYAML 6.0
pyzmq 23.2.0 wyrażenie regularne 2022.7.9 żądania 2.28.1
requests-oauthlib 1.3.1 Odpowiedzi 0.18.0 lina 1.7.0
rsa 4.9 s3transfer 0.6.2 safetensors 0.3.3
scikit-learn 1.1.1 seaborn 0.12.2 SecretStorage 3.3.1
Send2Trash 1.8.0 transformatory zdań 2.2.2 element zdania 0.1.99
setuptools 65.6.3 Shap 0.42.1 simplejson 3.17.6
Sześć 1.16.0 fragmentator 0.0.7 smart-open 5.2.1
smmap 5.0.0 sniffio 1.2.0 plik dźwiękowy 0.12.1
sito do zupy 2.3.2.post1 soxr 0.3.6 spacy 3.6.1
spacy-legacy 3.0.12 spacy-loggers 1.0.5 spark-tensorflow-distributor 1.0.0
SQLAlchemy 1.4.39 sqlparse 0.4.2 serio 2.4.7
ssh-import-id 5,11 stack-data 0.2.0 gwiazdka 0.27.0
statsmodels 0.13.5 sympy 1.11.1 tabelować 0.8.10
splątane w unicode 0.2.0 Wytrzymałość 8.1.0 tablica tensorboard 2.13.0
tensorboard-data-server 0.7.1 tensorboard-plugin-profile 2.13.1 tensorflow 2.13.0
tensorflow-estimator 2.13.0 tensorflow-io-gcs-filesystem 0.34.0 termcolor 2.3.0
zakończony 0.17.1 cienki 8.1.12 threadpoolctl 2.2.0
tiktoken 0.4.0 tinycss2 1.2.1 tokenize-rt 4.2.1
tokenizatory 0.13.3 tomli 2.0.1 pochodnia 2.0.1+cu118
torchvision 0.15.2+cu118 tornado 6.1 tqdm 4.64.1
traitlets 5.7.1 Transformatory 4.31.0 tryton 2.0.0
strażnik typu 2.13.3 pisarz 0.9.0 inspekcja wpisywania 0.9.0
typing_extensions 4.4.0 ujson 5.4.0 nienadzorowane uaktualnienia 0.1
urllib3 1.26.14 uvicorn 0.23.2 uvloop 0.17.0
virtualenv 20.16.7 Wizje 0.7.5 wadllib 1.3.6
wasabi 1.1.2 watchfiles 0.20.0 wcwidth 0.2.5
webencodings 0.5.1 klient websocket 0.58.0 websockets 11.0.3
Narzędzie 2.2.2 whatthepatch 1.0.2 wheel 0.38.4
widgetsnbextension 3.6.1 wordcloud 1.9.2 owinięty 1.14.1
xgboost 1.7.6 xxhash 3.3.0 yapf 0.31.0
Yarl 1.9.2 profilowanie danych 4.2.0 zamek błyskawiczny 3.11.0

Biblioteki R

Biblioteki języka R są identyczne z bibliotekami języka R w środowisku Databricks Runtime 14.1.

biblioteki Java i Scala (klaster Scala 2.12)

Oprócz bibliotek Java i Scala w środowisku Databricks Runtime 14.1 środowisko Databricks Runtime 14.1 ML zawiera następujące elementy JAR:

Klastry procesora CPU

Identyfikator grupy Identyfikator artefaktu Wersja
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-spark_2.12 1.7.3
ml.dmlc xgboost4j_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.7.1
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0

Klastry procesora GPU

Identyfikator grupy Identyfikator artefaktu Wersja
com.typesafe.akka akka-actor_2.12 2.5.23
ml.dmlc xgboost4j-gpu_2.12 1.7.3
ml.dmlc xgboost4j-spark-gpu_2.12 1.7.3
org.graphframes graphframes_2.12 0.8.2-db2-spark3.4
org.mlflow mlflow-client 2.7.1
org.scala-lang.modules scala-java8-compat_2.12 0.8.0
org.tensorflow spark-tensorflow-connector_2.12 1.15.0
  • Ostatnia aktualizacja o