v0.4.37

版本发布时间: 2023-12-13 22:22:26

bentoml/OpenLLM最新发布版本:v0.6.13(2024-10-17 21:17:35)

Installation

pip install openllm==0.4.37

To upgrade from a previous version, use the following command:

pip install --upgrade openllm==0.4.37

Usage

All available models: openllm models

To start a LLM: python -m openllm start HuggingFaceH4/zephyr-7b-beta

To run OpenLLM within a container environment (requires GPUs): docker run --gpus all -it -P -v $PWD/data:$HOME/.cache/huggingface/ ghcr.io/bentoml/openllm:0.4.37 start HuggingFaceH4/zephyr-7b-beta

Find more information about this release in the CHANGELOG.md

What's Changed

feat(mixtral): correct support for mixtral by @aarnphm in https://github.com/bentoml/OpenLLM/pull/772
chore: running all script when installation by @aarnphm in https://github.com/bentoml/OpenLLM/pull/773

Full Changelog: https://github.com/bentoml/OpenLLM/compare/v0.4.36...v0.4.37

相关地址：原始地址下载(tar) 下载(zip)

1、 openllm-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

2、 openllm-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.96MB

3、 openllm-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

4、 openllm-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

5、 openllm-0.4.37-py3-none-any.whl 120.39KB

6、 openllm-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

7、 openllm-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

8、 openllm-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

9、 openllm-0.4.37.tar.gz 113.56KB

10、 openllm-dive-bentos-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

11、 openllm-dive-bentos-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.97MB

12、 openllm-dive-bentos-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

13、 openllm-dive-bentos-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

14、 openllm-dive-bentos-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

15、 openllm-dive-bentos-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

16、 openllm-dive-bentos-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

17、 openllm-get-containerfile-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

18、 openllm-get-containerfile-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.96MB

19、 openllm-get-containerfile-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

20、 openllm-get-containerfile-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

21、 openllm-get-containerfile-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

22、 openllm-get-containerfile-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

23、 openllm-get-containerfile-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

24、 openllm-get-prompt-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

25、 openllm-get-prompt-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.97MB

26、 openllm-get-prompt-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

27、 openllm-get-prompt-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

28、 openllm-get-prompt-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

29、 openllm-get-prompt-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

30、 openllm-get-prompt-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

31、 openllm-list-bentos-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

32、 openllm-list-bentos-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.96MB

33、 openllm-list-bentos-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

34、 openllm-list-bentos-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

35、 openllm-list-bentos-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

36、 openllm-list-bentos-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

37、 openllm-list-bentos-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

38、 openllm-list-models-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

39、 openllm-list-models-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.96MB

40、 openllm-list-models-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

41、 openllm-list-models-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

42、 openllm-list-models-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

43、 openllm-list-models-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

44、 openllm-list-models-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

45、 openllm-playground-0.4.37-aarch64-apple-darwin.tar.gz 1.91MB

46、 openllm-playground-0.4.37-aarch64-unknown-linux-gnu.tar.gz 1.97MB

47、 openllm-playground-0.4.37-i686-unknown-linux-gnu.tar.gz 2.03MB

48、 openllm-playground-0.4.37-powerpc64le-unknown-linux-gnu.tar.gz 2.23MB

49、 openllm-playground-0.4.37-x86_64-apple-darwin.tar.gz 1.99MB

50、 openllm-playground-0.4.37-x86_64-unknown-linux-gnu.tar.gz 2.17MB

51、 openllm-playground-0.4.37-x86_64-unknown-linux-musl.tar.gz 2.2MB

52、 openllm_client-0.4.37-py3-none-any.whl 18.84KB

53、 openllm_client-0.4.37.tar.gz 20.61KB

54、 openllm_core-0.4.37-py3-none-any.whl 73.03KB

55、 openllm_core-0.4.37.tar.gz 58.98KB

查看：2023-12-13发行的版本