MinerU icon indicating copy to clipboard operation
MinerU copied to clipboard

能否在版本发布时候,同时发布更新一个相应版本的docker镜像呢?

Open DreamTeamWangbowen opened this issue 1 year ago • 14 comments

希望发布0.7.1版本的同时,能够提供相应docker镜像,像开源推理框架vllm,每发布一个版本都会同时发布一个相应版本的docker镜像,这样可以避免了复杂且重复的依赖环境安装问题。

DreamTeamWangbowen avatar Sep 10 '24 07:09 DreamTeamWangbowen

+1 同求

world2025 avatar Sep 10 '24 08:09 world2025

@tkone2018 @DreamTeamWangbowen 后续发版会提供经过验证的Dockerfile文件,考虑到镜像build之后会有约25G大小,加上dockerhub在国内访问较为困难,因为build过程中的大部分内容都可以通过国内镜像源进行加速,所以我们希望可以由用户自行通过Dockerfile去执行build操作。

现在也想听听用户的声音,是希望可以自行build还是通过dockerhub下载镜像,欢迎提供反馈。

myhloli avatar Sep 10 '24 08:09 myhloli

@tkone2018 @DreamTeamWangbowen 后续发版会提供经过验证的Dockerfile文件,考虑到镜像build之后会有约25G大小,加上dockerhub在国内访问较为困难,因为build过程中的大部分内容都可以通过国内镜像源进行加速,所以我们希望可以由用户自行通过Dockerfile去执行build操作。

现在也想听听用户的声音,是希望可以自行build还是通过dockerhub下载镜像,欢迎提供反馈。

我墙裂推荐 dockerhub用户自主下载镜像这个选项吧,原因是我们这边都是在内网离线build镜像,但如果依赖很多的话,会有些依赖包内网镜像源没有,从我安装了十几个依赖包当前卡住在detectron2这个包的安装上来看,后面肯定还有不少坑要踩,真的不如下载一个基础镜像内网docker直接就跑起来了,像比较知名的开源项目在dockerhub上面都是有留存镜像的,例如推理框架vllm、TGI等等。所以,真心求一个镜像:)

DreamTeamWangbowen avatar Sep 10 '24 08:09 DreamTeamWangbowen

dockerhub下载镜像

确实dockerhub下载镜像好 省去依赖麻烦

ML-GCN avatar Sep 11 '24 03:09 ML-GCN

@tkone2018 @DreamTeamWangbowen 后续发版会提供经过验证的Dockerfile文件,考虑到镜像build之后会有约25G大小,加上dockerhub在国内访问较为困难,因为build过程中的大部分内容都可以通过国内镜像源进行加速,所以我们希望可以由用户自行通过Dockerfile去执行build操作。

现在也想听听用户的声音,是希望可以自行build还是通过dockerhub下载镜像,欢迎提供反馈。

我墙裂推荐 dockerhub用户自主下载镜像这个选项吧,原因是我们这边都是在内网离线build镜像,但如果依赖很多的话,会有些依赖包内网镜像源没有,从我安装了十几个依赖包当前卡住在detectron2这个包的安装上来看,后面肯定还有不少坑要踩,真的不如下载一个基础镜像内网docker直接就跑起来了,像比较知名的开源项目在dockerhub上面都是有留存镜像的,例如推理框架vllm、TGI等等。所以,真心求一个镜像:)

可以直接使用huggingface的space镜像吗

docker run -it -p 7860:7860 --platform=linux/amd64 --gpus all
registry.hf.space/opendatalab-mineru:latest python app.py

myhloli avatar Sep 11 '24 04:09 myhloli

@tkone2018 @DreamTeamWangbowen 后续发版会提供经过验证的Dockerfile文件,考虑到镜像build之后会有约25G大小,加上dockerhub在国内访问较为困难,因为build过程中的大部分内容都可以通过国内镜像源进行加速,所以我们希望可以由用户自行通过Dockerfile去执行build操作。

现在也想听听用户的声音,是希望可以自行build还是通过dockerhub下载镜像,欢迎提供反馈。

我墙裂推荐 dockerhub用户自主下载镜像这个选项吧,原因是我们这边都是在内网离线build镜像,但如果依赖很多的话,会有些依赖包内网镜像源没有,从我安装了十几个依赖包当前卡住在detectron2这个包的安装上来看,后面肯定还有不少坑要踩,真的不如下载一个基础镜像内网docker直接就跑起来了,像比较知名的开源项目在dockerhub上面都是有留存镜像的,例如推理框架vllm、TGI等等。所以,真心求一个镜像:)

可以直接使用huggingface的space镜像吗

docker run -it -p 7860:7860 --platform=linux/amd64 --gpus all registry.hf.space/opendatalab-mineru:latest python app.py

找不到 registry.hf.space 的网页找不到与以下网址对应的网页:https://registry.hf.space/opendatalab-mineru:latest HTTP ERROR 404

这个好像下载不了镜像啊?@myhloli

DreamTeamWangbowen avatar Sep 11 '24 06:09 DreamTeamWangbowen

image 可能需要翻墙

myhloli avatar Sep 11 '24 06:09 myhloli

我也感觉dockerhub最好用,docker build经常会出奇奇怪怪的错误,其它几个站也是各有各的问题。

hraefn999 avatar Sep 14 '24 06:09 hraefn999

需要dockerhub

XiaoCC avatar Sep 22 '24 16:09 XiaoCC

强烈希望增加构建好的镜像

wenzhaoabc avatar Sep 23 '24 11:09 wenzhaoabc

希望直接提供image

eggb4by avatar Sep 29 '24 14:09 eggb4by

可以将模型和环境分开,打包的时候让用户自己去下模型,这样镜像就不会过大了

Jarvie76 avatar Oct 10 '24 11:10 Jarvie76

可以拉

@tkone2018 @DreamTeamWangbowen 后续发版会提供经过验证的Dockerfile文件,考虑到镜像build之后会有约25G大小,加上dockerhub在国内访问较为困难,因为build过程中的大部分内容都可以通过国内镜像源进行加速,所以我们希望可以由用户自行通过Dockerfile去执行build操作。

现在也想听听用户的声音,是希望可以自行build还是通过dockerhub下载镜像,欢迎提供反馈。

我墙裂推荐 dockerhub用户自主下载镜像这个选项吧,原因是我们这边都是在内网离线build镜像,但如果依赖很多的话,会有些依赖包内网镜像源没有,从我安装了十几个依赖包当前卡住在detectron2这个包的安装上来看,后面肯定还有不少坑要踩,真的不如下载一个基础镜像内网docker直接就跑起来了,像比较知名的开源项目在dockerhub上面都是有留存镜像的,例如推理框架vllm、TGI等等。所以,真心求一个镜像:)

可以直接使用huggingface的space镜像吗

docker run -it -p 7860:7860 --platform=linux/amd64 --gpus all registry.hf.space/opendatalab-mineru:latest python app.py

可以拉问题不大 image 翻个墙的事

xchency avatar Nov 30 '24 10:11 xchency

docker pull registry.hf.space/opendatalab-mineru:latest latest: Pulling from opendatalab-mineru 380011e1c53d: Extracting [==================================================>] 4.578GB/4.578GB 196bbbaba9e6: Download complete 40629e62559b: Download complete 5926adb838a0: Download complete 25b273655480: Download complete 1e396b5965e0: Download complete 1aa994c91d06: Download complete 16114950868a: Download complete 9827b1b0f59e: Download complete f56747c505f1: Download complete 3fc08804c824: Download complete failed to register layer: Error processing tar file(exit status 1): archive/tar: invalid tar header

拉完镜像报错了,invalid tar header是什么原因啊。

Gjjjjjjjjjjj avatar Dec 13 '24 04:12 Gjjjjjjjjjjj