Kommentar
Åtkomst till den här sidan kräver auktorisering. Du kan prova att logga in eller ändra kataloger.
Åtkomst till den här sidan kräver auktorisering. Du kan prova att ändra kataloger.
Anmärkning
Stödet för den här Databricks Runtime-versionen har upphört. Information om slutdatumet för support finns i End-of-support and end-of-life history (Slut på support och historik för slutet av livet). Alla Databricks Runtime-versioner som stöds finns i Databricks Runtime-versionsanteckningar och kompatibilitet.
Databricks Runtime 15.3 för maskininlärning tillhandahåller en färdig att använda miljö för maskininlärning och datavetenskap baserat på Databricks Runtime 15.3 (EoS). Databricks Runtime ML innehåller många populära maskininlärningsbibliotek, inklusive TensorFlow, PyTorch och XGBoost. Databricks Runtime ML innehåller AutoML, ett verktyg för att automatiskt träna maskininlärningspipelines. Databricks Runtime ML stöder även distribuerad djupinlärningsträning med Horovod.
Nya funktioner och förbättringar
Databricks Runtime 15.3 ML bygger på Databricks Runtime 15.3. Information om nyheter i Databricks Runtime 15.3, inklusive Apache Spark MLlib och SparkR, finns i utgivningsanteckningarna för Databricks Runtime 15.3 (EoS).
Manuella AutoML-datauppdelningar och provvikter
AutoML stöder nu manuella datadelningar så att du kan ange träna, validera och testa datauppsättningar rad för rad för klassificerings- och regressionsmodeller. Se Dela upp data i tränings-, validerings- och testuppsättningar.
AutoML har nu stöd för exempelvikter så att du kan justera vikten för varje rad under regressionsmodellträningen. Mer information finns i parametrarna regression för AutoML Python API.
Systemmiljö
Systemmiljön i Databricks Runtime 15.3 ML skiljer sig från Databricks Runtime 15.3 på följande sätt:
- För GPU-kluster innehåller Databricks Runtime ML följande NVIDIA GPU-bibliotek:
- CUDA 12.1
- cusolver 11.4.5.107-1
- cupti 12,1
- cuDNN 8.9.0.131-1
- NCCL 2.17.1
- TensorRT 8.6.1.6-1
Bibliotek
I följande avsnitt visas de bibliotek som ingår i Databricks Runtime 15.3 ML som skiljer sig från de som ingår i Databricks Runtime 15.3.
I detta avsnitt:
- Bibliotek på den översta nivån
- Python bibliotek
- R-bibliotek
- Java- och Scala-bibliotek (Scala 2.12-kluster)
Bibliotek på den översta nivån
Databricks Runtime 15.3 ML innehåller följande bibliotek på den översta nivån:
- datauppsättningar
- GraphFrames
- MLflow
- PyTorch
- spark-tensorflow-connector
- Scikit-learn
- TensorFlow
- TensorBoard
- Transformatorer
Python bibliotek
Databricks Runtime 15.3 ML använder virtualenv för Python pakethantering och innehåller många populära ML-paket.
Förutom de paket som anges i följande avsnitt innehåller Även Databricks Runtime 15.3 ML följande paket:
- hyperopt 0.2.7+db3
- sparkdl 3.0.0_db1
- automl 1.27.0
Om du vill återskapa Databricks Runtime ML-Python miljön i din lokala Python virtuella miljö laddar du ned filen requirements-15.3.txt och kör pip install -r requirements-15.3.txt. Det här kommandot installerar alla open source bibliotek som Databricks Runtime ML använder, men installerar inte bibliotek som utvecklats av Databricks, till exempel databricks-automl, databricks-feature-engineering eller Databricks-förgrening av hyperopt.
Python bibliotek i CPU-kluster
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | accelerera | 0.30.1 | aiohttp | 3.8.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | anyio | 3.5.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindningar | 21.2.0 | Astor | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | Asynkron timeout | 4.0.2 |
| attrs | 22.1.0 | ljudläsning | 3.0.1 | azure-core | 1.30.1 |
| azure-cosmos | 4.3.1 | azure-identity | 1.16.0 | azure-storage-blob | 12.19.1 |
| Azure-lagring-fil-datainsjö | 12.14.0 | återkoppling | 0.2.0 | bcrypt | 3.2.0 |
| beautifulsoup4 | 4.12.2 | svart | 23.3.0 | blekmedel | 4.1.0 |
| blinker | 1.4 | lycka | 0.7.11 | boto3 | 1.34.39 |
| botocore | 1.34.39 | Brotli | 1.0.9 | cachetools | 5.3.3 |
| katalog | 2.0.10 | kategorikodare | 2.6.3 | certifi | 2023.7.22 |
| cffi | 1.15.1 | chardet | 4.0.0 | charset-normalizer | 2.0.4 |
| kretsbrytare | 1.4.0 | klicka | 8.0.4 | cloudpathlib | 0.16.0 |
| cloudpickle | 2.2.1 | cmdstanpy | 1.2.2 | färgstark | 0.5.6 |
| Kommunikationer | 0.1.2 | konfekt | 0.1.4 | configparser | 5.2.0 |
| contourpy | 1.0.5 | kryptografi | 41.0.3 | cyklist | 0.11.0 |
| cymem | 2.0.8 | Cython | 0.29.32 | dacit | 1.8.1 |
| databricks-automl-runtime | 0.2.21 | databricks-egenskapsutveckling | 0.5.0 | databricks-sdk | 0.20.0 |
| dataclasses-json | 0.6.6 | datauppsättningar | 2.19.1 | dbl-tempo | 0.1.26 |
| dbus-python | 1.2.18 | debugpy | 1.6.7 | dekoratör | 5.1.1 |
| DeepSpeed | 0.14.0 | defusedxml | 0.7.1 | dill | 0.3.6 |
| diskcache | 5.6.3 | distlib | 0.3.8 | dm-tree | 0.1.8 |
| ingångspunkter | 0,4 | utvärdera | 0.4.2 | utför | 0.8.3 |
| översikt-av-facetter | 1.1.1 | Farama-meddelanden | 0.0.4 | fastjsonschema | 2.19.1 |
| snabbtext | 0.9.2 | filelock | 3.13.4 | Flaska | 2.2.5 |
| flatbuffers | 24.3.25 | fonttools | 4.25.0 | frozenlist | 1.3.3 |
| fsspec | 2023.5.0 | framtid | 0.18.3 | Gast | 0.4.0 |
| gitdb | 4.0.11 | GitPython | 3.1.27 | google-api-core | 2.18.0 |
| google-auth | 2.21.0 | google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 |
| Google-molnlagring | 2.10.0 | google-crc32c | 1.5.0 | google-pasta | 0.2.0 |
| google-resumable-media | 2.7.0 | googleapis-common-protos | 1.63.0 | greenlet | 2.0.1 |
| grpcio | 1.60.0 | grpcio-status | 1.60.0 | gunicorn | 20.1.0 |
| gviz-api | 1.10.0 | gymnastiksal | 0.28.1 | h11 | 0.14.0 |
| h5py | 3.10.0 | hjson | 3.1.0 | ferier | 0,45 |
| horovod | 0.28.1+db1 | htmlmin | 0.1.12 | httpcore | 1.0.5 |
| httplib2 | 0.20.2 | httpx | 0.27.0 | huggingface-hub | 0.21.2 |
| idna | 3.4 | ImageHash | 4.3.1 | imageio | 2.31.1 |
| obalanserad inlärning | 0.11.0 | importlib-metadata | 6.0.0 | importlib_resources | 6.4.0 |
| ipyflow-core | 0.0.198 | ipykernel | 6.25.1 | ipython | 8.15.0 |
| ipython-genutils | 0.2.0 | ipywidgets | 7.7.2 | isodate | 0.6.1 |
| itsdangerous | 2.0.1 | jax-jumpy | 1.0.0 | jedi | 0.18.1 |
| Jeepney | 0.7.1 | Jinja2 | 3.1.2 | jmespath | 0.10.0 |
| joblib | 1.2.0 | joblibspark | 0.5.1 | jsonpatch | 1.33 |
| jsonpointer | 2.4 | jsonschema | 4.17.3 | jupyter-server | 1.23.4 |
| jupyter_client | 7.4.9 | jupyter_core | 5.3.0 | jupyterlab-pygments | 0.1.2 |
| keras | 3.1.1 | nyckelring | 23.5.0 | kiwisolver | 1.4.4 |
| langchain | 0.1.20 | langchain-community | 0.0.38 | langchain-core | 0.1.52 |
| langchain-text-splitters | 0.0.2 | Språkkoder | 3.4.0 | langsmith | 0.1.63 |
| språkdata | 1.2.0 | launchpadlib | 1.10.16 | lazr.restfulclient | 0.14.4 |
| lazr.uri | 1.0.6 | lazy_loader | 0.2 | libclang | 15.0.6.1 |
| librosa | 0.10.1 | lightgbm | 4.3.0 | linkify-it-py | 2.0.0 |
| llvmlite | 0.40.0 | lxml | 4.9.2 | lz4 | 4.3.2 |
| Mako | 1.2.0 | marisa-trie | 1.1.1 | Markdown | 3.4.1 |
| markdown-it-py | 2.2.0 | MarkupSafe | 2.1.1 | skumgodis | 3.21.2 |
| matplotlib | 3.7.2 | matplotlib-inline | 0.1.6 | mdit-py-plugins | 0.3.0 |
| mdurl | 0.1.0 | memray | 1.12.0 | mistune | 0.8.4 |
| ml-dtypes | 0.3.2 | mlflow-skinny | 2.11.3 | more-itertools | 8.10.0 |
| mosaicml-streaming | 0.7.4 | mpmath | 1.3.0 | msal | 1.28.0 |
| msal-extensions | 1.1.0 | msgpack | 1.0.8 | multidict | 6.0.2 |
| fleremetod | 1.11.2 | multiprocess | 0.70.14 | murmurhash | 1.0.10 |
| mypy-extensions | 0.4.3 | namex | 0.0.8 | nbclassic | 0.5.5 |
| nbclient | 0.5.13 | nbconvert | 6.5.4 | nbformat | 5.7.0 |
| nest-asyncio | 1.5.6 | networkx | 3.1 | ninja | 1.11.1.1 |
| nltk | 3.8.1 | anteckningsbok | 6.5.4 | notebook_shim | 0.2.2 |
| numba | 0.57.1 | numpy | 1.23.5 | oauthlib | 3.2.0 |
| oci | 2.126.4 | openai | 1.29.0 | opencensus | 0.11.4 |
| opencensus-context | 0.1.3 | opt-einsum | 3.3.0 | Optree | 0.11.0 |
| orjson | 3.10.3 | emballage | 23.2 | Pandas | 1.5.3 |
| pandocfilters | 1.5.0 | paramiko | 3.4.0 | parso | 0.8.3 |
| pathspec | 0.10.3 | Patsy | 0.5.3 | petastorm | 0.12.1 |
| pexpect | 4.8.0 | phik | 0.12.4 | pickleshare | 0.7.5 |
| Kudde | 9.4.0 | pip | 23.2.1 | platformdirs | 3.10.0 |
| plotly | 5.9.0 | pmdarima | 2.0.4 | Pooch | 1.8.1 |
| portalocker | 2.8.2 | förrensad | 3.0.9 | prometheus-client | 0.14.1 |
| prompt-toolkit | 3.0.36 | profet | 1.1.5 | proto-plus | 1.23.0 |
| protobuf | 4.24.1 | psutil | 5.9.0 | psycopg2 | 2.9.3 |
| ptyprocess | 0.7.0 | pure-eval | 0.2.2 | py-cpuinfo | 8.0.0 |
| py-spy | 0.3.14 | pyarrow | 14.0.1 | pyarrow-hotfix | 0,6 |
| pyasn1 | 0.4.8 | pyasn1-modules | 0.2.8 | pybind11 | 2.12.0 |
| pyccolo | 0.0.52 | pycparser | 2.21 | pydantisk | 1.10.6 |
| Pygments | 2.15.1 | PyGObject | 3.42.1 | PyJWT | 2.3.0 |
| PyNaCl | 1.5.0 | pynvml | 11.5.0 | pyodbc | 4.0.38 |
| pyOpenSSL | 23.2.0 | pyparsing | 3.0.9 | pyrsistent | 0.18.0 |
| pytesseract | 0.3.10 | python-dateutil | 2.8.2 | python-editor | 1.0.4 |
| python-lsp-jsonrpc | 1.1.1 | python-snappy | 0.6.1 | pytz | 2022.7 |
| PyWavelets | 1.4.1 | PyYAML | 6,0 | pyzmq | 23.2.0 |
| stråle | 2.12.0 | regex | 2022.7.9 | begäranden | 2.31.0 |
| requests-oauthlib | 1.3.1 | rik | 13.7.1 | RSA | 4,9 |
| s3transfer | 0.10.1 | safetensors | 0.4.2 | scikit-image | 0.20.0 |
| scikit-learn | 1.3.0 | scipy | 1.11.1 | seaborn | 0.12.2 |
| SecretStorage | 3.3.1 | Send2Trash | 1.8.0 | meningstransformatorer | 2.7.0 |
| meningsstycke | 0.1.99 | setuptools | 68.0.0 | Shap | 0.44.0 |
| simplejson | 3.17.6 | sex | 1.16.0 | Skivare | 0.0.7 |
| smart-open | 5.2.1 | smmap | 5.0.0 | sniffio | 1.2.0 |
| ljudfil | 0.12.1 | soupsieve | 2.4 | soxr | 0.3.7 |
| drömsk | 3.7.2 | spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 |
| spark-tensorflow-distributor | 1.0.0 | SQLAlchemy | 1.4.39 | sqlparse | 0.4.2 |
| seriöst | 2.4.8 | ssh-import-id | 5,11 | stack-data | 0.2.0 |
| stanio | 0.5.0 | statsmodels | 0.14.0 | sympy | 1.11.1 |
| intrasslad i unicode | 0.2.0 | orubblighet | 8.2.2 | tensorboard | 2.16.2 |
| tensorboard-data-server | 0.7.2 | tensorboard_plugin_profile | 2.15.1 | tensorboardX | 2.6.2.2 |
| tensorflow | 2.16.1 | tensorflow-estimator | 2.15.0 | tensorflow-io-gcs-filesystem | 0.37.0 |
| termcolor | 2.4.0 | färdig | 0.17.1 | textuell | 0.63.3 |
| tf_keras | 2.16.0 | thinc | 8.2.3 | threadpoolctl | 2.2.0 |
| tifffile | 2021.7.2 | tiktoken | 0.5.2 | tinycss2 | 1.2.1 |
| tokenize-rt | 4.2.1 | tokeniserare | 0.19.0 | fackla | 2.3.0+cpu |
| torcheval | 0.0.7 | torchvision | 0.18.0+cpu | tornado | 6.3.2 |
| tqdm | 4.65.0 | traitlets | 5.7.1 | Transformatorer | 4.40.2 |
| typeguard | 2.13.3 | typer | 0.9.4 | skrivgranskning | 0.9.0 |
| typing_extensions | 4.10.0 | tzdata | 2022.1 | uc-micro-py | 1.0.1 |
| ujson | 5.4.0 | obevakade uppgraderingar | 0,1 | urllib3 | 1.26.16 |
| virtualenv | 20.24.2 | Visioner | 0.7.5 | wadllib | 1.3.6 |
| Wasabi | 1.1.2 | wcwidth | 0.2.5 | vessla | 0.3.4 |
| webencodings | 0.5.1 | websocket-client | 0.58.0 | Werkzeug | 2.2.3 |
| hjul | 0.38.4 | wordcloud | 1.9.3 | wrapt | 1.14.1 |
| xgboost | 2.0.3 | xxhash | 3.4.1 | Yarl | 1.8.1 |
| ydata-profilering | 4.5.1 | zipp | 3.11.0 | zstd | 1.5.5.1 |
Python bibliotek i GPU-kluster
| Bibliotek | Version | Bibliotek | Version | Bibliotek | Version |
|---|---|---|---|---|---|
| absl-py | 1.0.0 | accelerera | 0.30.1 | aiohttp | 3.8.5 |
| aiohttp-cors | 0.7.0 | aiosignal | 1.2.0 | anyio | 3.5.0 |
| argon2-cffi | 21.3.0 | argon2-cffi-bindningar | 21.2.0 | Astor | 0.8.1 |
| asttokens | 2.0.5 | astunparse | 1.6.3 | Asynkron timeout | 4.0.2 |
| attrs | 22.1.0 | ljudläsning | 3.0.1 | azure-core | 1.30.1 |
| azure-cosmos | 4.3.1 | azure-identity | 1.16.0 | azure-storage-blob | 12.19.1 |
| Azure-lagring-fil-datainsjö | 12.14.0 | återkoppling | 0.2.0 | bcrypt | 3.2.0 |
| beautifulsoup4 | 4.12.2 | svart | 23.3.0 | blekmedel | 4.1.0 |
| blinker | 1.4 | lycka | 0.7.11 | boto3 | 1.34.39 |
| botocore | 1.34.39 | Brotli | 1.0.9 | cachetools | 5.3.3 |
| katalog | 2.0.10 | kategorikodare | 2.6.3 | certifi | 2023.7.22 |
| cffi | 1.15.1 | chardet | 4.0.0 | charset-normalizer | 2.0.4 |
| kretsbrytare | 1.4.0 | klicka | 8.0.4 | cloudpathlib | 0.16.0 |
| cloudpickle | 2.2.1 | cmdstanpy | 1.2.2 | färgstark | 0.5.6 |
| Kommunikationer | 0.1.2 | konfekt | 0.1.4 | configparser | 5.2.0 |
| contourpy | 1.0.5 | kryptografi | 41.0.3 | cyklist | 0.11.0 |
| cymem | 2.0.8 | Cython | 0.29.32 | dacit | 1.8.1 |
| databricks-automl-runtime | 0.2.21 | databricks-egenskapsutveckling | 0.5.0 | databricks-sdk | 0.20.0 |
| dataclasses-json | 0.6.6 | datauppsättningar | 2.19.1 | dbl-tempo | 0.1.26 |
| dbus-python | 1.2.18 | debugpy | 1.6.7 | dekoratör | 5.1.1 |
| DeepSpeed | 0.14.0 | defusedxml | 0.7.1 | dill | 0.3.6 |
| diskcache | 5.6.3 | distlib | 0.3.8 | dm-tree | 0.1.8 |
| einops | 0.8.0 | ingångspunkter | 0,4 | utvärdera | 0.4.2 |
| utför | 0.8.3 | översikt-av-facetter | 1.1.1 | Farama-meddelanden | 0.0.4 |
| fastjsonschema | 2.19.1 | snabbtext | 0.9.2 | filelock | 3.13.4 |
| flash-attn | 2.5.8 | Flaska | 2.2.5 | flatbuffers | 24.3.25 |
| fonttools | 4.25.0 | frozenlist | 1.3.3 | fsspec | 2023.5.0 |
| framtid | 0.18.3 | Gast | 0.4.0 | gitdb | 4.0.11 |
| GitPython | 3.1.27 | google-api-core | 2.18.0 | google-auth | 2.21.0 |
| google-auth-oauthlib | 1.0.0 | google-cloud-core | 2.4.1 | Google-molnlagring | 2.10.0 |
| google-crc32c | 1.5.0 | google-pasta | 0.2.0 | google-resumable-media | 2.7.0 |
| googleapis-common-protos | 1.63.0 | greenlet | 2.0.1 | grpcio | 1.60.0 |
| grpcio-status | 1.60.0 | gunicorn | 20.1.0 | gviz-api | 1.10.0 |
| gymnastiksal | 0.28.1 | h11 | 0.14.0 | h5py | 3.10.0 |
| hjson | 3.1.0 | ferier | 0,45 | horovod | 0.28.1+db1 |
| htmlmin | 0.1.12 | httpcore | 1.0.5 | httplib2 | 0.20.2 |
| httpx | 0.27.0 | huggingface-hub | 0.21.2 | idna | 3.4 |
| ImageHash | 4.3.1 | imageio | 2.31.1 | obalanserad inlärning | 0.11.0 |
| importlib-metadata | 6.0.0 | importlib_resources | 6.4.0 | ipyflow-core | 0.0.198 |
| ipykernel | 6.25.1 | ipython | 8.15.0 | ipython-genutils | 0.2.0 |
| ipywidgets | 7.7.2 | isodate | 0.6.1 | itsdangerous | 2.0.1 |
| jax-jumpy | 1.0.0 | jedi | 0.18.1 | Jeepney | 0.7.1 |
| Jinja2 | 3.1.2 | jmespath | 0.10.0 | joblib | 1.2.0 |
| joblibspark | 0.5.1 | jsonpatch | 1.33 | jsonpointer | 2.4 |
| jsonschema | 4.17.3 | jupyter-server | 1.23.4 | jupyter_client | 7.4.9 |
| jupyter_core | 5.3.0 | jupyterlab-pygments | 0.1.2 | keras | 3.1.1 |
| nyckelring | 23.5.0 | kiwisolver | 1.4.4 | langchain | 0.1.20 |
| langchain-community | 0.0.38 | langchain-core | 0.1.52 | langchain-text-splitters | 0.0.2 |
| Språkkoder | 3.4.0 | langsmith | 0.1.63 | språkdata | 1.2.0 |
| launchpadlib | 1.10.16 | lazr.restfulclient | 0.14.4 | lazr.uri | 1.0.6 |
| lazy_loader | 0.2 | libclang | 15.0.6.1 | librosa | 0.10.1 |
| lightgbm | 4.3.0 | linkify-it-py | 2.0.0 | llvmlite | 0.40.0 |
| lxml | 4.9.2 | lz4 | 4.3.2 | Mako | 1.2.0 |
| marisa-trie | 1.1.1 | Markdown | 3.4.1 | markdown-it-py | 2.2.0 |
| MarkupSafe | 2.1.1 | skumgodis | 3.21.2 | matplotlib | 3.7.2 |
| matplotlib-inline | 0.1.6 | mdit-py-plugins | 0.3.0 | mdurl | 0.1.0 |
| memray | 1.12.0 | mistune | 0.8.4 | ml-dtypes | 0.3.2 |
| mlflow-skinny | 2.11.3 | more-itertools | 8.10.0 | mosaicml-streaming | 0.7.4 |
| mpmath | 1.3.0 | msal | 1.28.0 | msal-extensions | 1.1.0 |
| msgpack | 1.0.8 | multidict | 6.0.2 | fleremetod | 1.11.2 |
| multiprocess | 0.70.14 | murmurhash | 1.0.10 | mypy-extensions | 0.4.3 |
| namex | 0.0.8 | nbclassic | 0.5.5 | nbclient | 0.5.13 |
| nbconvert | 6.5.4 | nbformat | 5.7.0 | nest-asyncio | 1.5.6 |
| networkx | 3.1 | ninja | 1.11.1.1 | nltk | 3.8.1 |
| anteckningsbok | 6.5.4 | notebook_shim | 0.2.2 | numba | 0.57.1 |
| numpy | 1.23.5 | nvidia-cublas-cu12 | 12.1.3.1 | nvidia-cuda-cupti-cu12 | 12.1.105 |
| nvidia-cuda-nvrtc-cu12 | 12.1.105 | nvidia-cuda-runtime-cu12 | 12.1.105 | nvidia-cudnn-cu12 | 8.9.2.26 |
| nvidia-cufft-cu12 | 11.0.2.54 | nvidia-curand-cu12 | 10.3.2.106 | nvidia-cusolver-cu12 | 11.4.5.107 |
| nvidia-cusparse-cu12 | 12.1.0.106 | nvidia-nccl-cu12 | 2.20.5 | nvidia-nvjitlink-cu12 | 12.5.40 |
| nvidia-nvtx-cu12 | 12.1.105 | oauthlib | 3.2.0 | oci | 2.126.4 |
| openai | 1.29.0 | opencensus | 0.11.4 | opencensus-context | 0.1.3 |
| opt-einsum | 3.3.0 | Optree | 0.11.0 | orjson | 3.10.3 |
| emballage | 23.2 | Pandas | 1.5.3 | pandocfilters | 1.5.0 |
| paramiko | 3.4.0 | parso | 0.8.3 | pathspec | 0.10.3 |
| Patsy | 0.5.3 | petastorm | 0.12.1 | pexpect | 4.8.0 |
| phik | 0.12.4 | pickleshare | 0.7.5 | Kudde | 9.4.0 |
| pip | 23.2.1 | platformdirs | 3.10.0 | plotly | 5.9.0 |
| pmdarima | 2.0.4 | Pooch | 1.8.1 | portalocker | 2.8.2 |
| förrensad | 3.0.9 | prometheus-client | 0.14.1 | prompt-toolkit | 3.0.36 |
| profet | 1.1.5 | proto-plus | 1.23.0 | protobuf | 4.24.1 |
| psutil | 5.9.0 | psycopg2 | 2.9.3 | ptyprocess | 0.7.0 |
| pure-eval | 0.2.2 | py-cpuinfo | 8.0.0 | py-spy | 0.3.14 |
| pyarrow | 14.0.1 | pyarrow-hotfix | 0,6 | pyasn1 | 0.4.8 |
| pyasn1-modules | 0.2.8 | pybind11 | 2.12.0 | pyccolo | 0.0.52 |
| pycparser | 2.21 | pydantisk | 1.10.6 | Pygments | 2.15.1 |
| PyGObject | 3.42.1 | PyJWT | 2.3.0 | PyNaCl | 1.5.0 |
| pynvml | 11.5.0 | pyodbc | 4.0.38 | pyOpenSSL | 23.2.0 |
| pyparsing | 3.0.9 | pyrsistent | 0.18.0 | pytesseract | 0.3.10 |
| python-dateutil | 2.8.2 | python-editor | 1.0.4 | python-lsp-jsonrpc | 1.1.1 |
| python-snappy | 0.6.1 | pytz | 2022.7 | PyWavelets | 1.4.1 |
| PyYAML | 6,0 | pyzmq | 23.2.0 | stråle | 2.12.0 |
| regex | 2022.7.9 | begäranden | 2.31.0 | requests-oauthlib | 1.3.1 |
| rik | 13.7.1 | RSA | 4,9 | s3transfer | 0.10.1 |
| safetensors | 0.4.2 | scikit-image | 0.20.0 | scikit-learn | 1.3.0 |
| scipy | 1.11.1 | seaborn | 0.12.2 | SecretStorage | 3.3.1 |
| Send2Trash | 1.8.0 | meningstransformatorer | 2.7.0 | meningsstycke | 0.1.99 |
| setuptools | 68.0.0 | Shap | 0.44.0 | simplejson | 3.17.6 |
| sex | 1.16.0 | Skivare | 0.0.7 | smart-open | 5.2.1 |
| smmap | 5.0.0 | sniffio | 1.2.0 | ljudfil | 0.12.1 |
| soupsieve | 2.4 | soxr | 0.3.7 | drömsk | 3.7.2 |
| spacy-legacy | 3.0.12 | spacy-loggers | 1.0.5 | spark-tensorflow-distributor | 1.0.0 |
| SQLAlchemy | 1.4.39 | sqlparse | 0.4.2 | seriöst | 2.4.8 |
| ssh-import-id | 5,11 | stack-data | 0.2.0 | stanio | 0.5.0 |
| statsmodels | 0.14.0 | sympy | 1.11.1 | intrasslad i unicode | 0.2.0 |
| orubblighet | 8.2.2 | tensorboard | 2.16.2 | tensorboard-data-server | 0.7.2 |
| tensorboard_plugin_profile | 2.15.1 | tensorboardX | 2.6.2.2 | tensorflow | 2.16.1 |
| tensorflow-estimator | 2.15.0 | tensorflow-io-gcs-filesystem | 0.37.0 | termcolor | 2.4.0 |
| färdig | 0.17.1 | textuell | 0.63.3 | tf_keras | 2.16.0 |
| thinc | 8.2.3 | threadpoolctl | 2.2.0 | tifffile | 2021.7.2 |
| tiktoken | 0.5.2 | tinycss2 | 1.2.1 | tokenize-rt | 4.2.1 |
| tokeniserare | 0.19.0 | fackla | 2.3.0+cu121 | torcheval | 0.0.7 |
| torchvision | 0.18.0+cu121 | tornado | 6.3.2 | tqdm | 4.65.0 |
| traitlets | 5.7.1 | Transformatorer | 4.40.2 | Triton | 2.3.0 |
| typeguard | 2.13.3 | typer | 0.9.4 | skrivgranskning | 0.9.0 |
| typing_extensions | 4.10.0 | tzdata | 2022.1 | uc-micro-py | 1.0.1 |
| ujson | 5.4.0 | obevakade uppgraderingar | 0,1 | urllib3 | 1.26.16 |
| virtualenv | 20.24.2 | Visioner | 0.7.5 | wadllib | 1.3.6 |
| Wasabi | 1.1.2 | wcwidth | 0.2.5 | vessla | 0.3.4 |
| webencodings | 0.5.1 | websocket-client | 0.58.0 | Werkzeug | 2.2.3 |
| hjul | 0.38.4 | wordcloud | 1.9.3 | wrapt | 1.14.1 |
| xgboost | 2.0.3 | xxhash | 3.4.1 | Yarl | 1.8.1 |
| ydata-profilering | 4.5.1 | zipp | 3.11.0 | zstd | 1.5.5.1 |
R-bibliotek
R-biblioteken är identiska med R-biblioteken i Databricks Runtime 15.3.
Java- och Scala-bibliotek (Scala 2.12-kluster)
Förutom Java- och Scala-bibliotek i Databricks Runtime 15.3 innehåller Databricks Runtime 15.3 ML följande JAR:er:
CPU-kluster
| Grupp-ID | Artefakt-ID | Version |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-spark_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.3-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.11.1 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |
GPU-kluster
| Grupp-ID | Artefakt-ID | Version |
|---|---|---|
| com.typesafe.akka | akka-actor_2.12 | 2.5.23 |
| ml.dmlc | xgboost4j-gpu_2.12 | 1.7.3 |
| ml.dmlc | xgboost4j-spark-gpu_2.12 | 1.7.3 |
| org.graphframes | graphframes_2.12 | 0.8.3-db1-spark3.5 |
| org.mlflow | mlflow-client | 2.11.1 |
| org.scala-lang.modules | scala-java8-compat_2.12 | 0.8.0 |
| org.tensorflow | spark-tensorflow-connector_2.12 | 1.15.0 |