docker registry 鏡像同步的實(shí)現(xiàn)思路
Intro
之前我們的 docker 鏡像是保存在 Azure 的 Container Registry 里的,最近我們自己搭建了一個(gè) docker registry,我們想把之前保存的 Azure 的 Container Registry 的 docker 鏡像同步到我們自己的 docker registry 里
實(shí)現(xiàn)思路
我們的做法比較簡(jiǎn)單也比較LOW,但是基本可以滿足要求,
我們的做法是
- 首先獲取到源 Registry 里的所有鏡像列表
- 然后逐個(gè)獲取鏡像的 tags
- 然后依次遍歷將對(duì)應(yīng)的鏡像拉到本地,然后 docker tag 一下,命名為新的 registry 鏡像名稱
- 然后 push docker 鏡像到新的 registry
- 刪除下載到本地的鏡像和推送到新的 registry 的鏡像
后來(lái)突然想起來(lái)阿里云好像有一個(gè)鏡像同步工具,https://github.com/AliyunContainerService/image-syncer image-syncer 是一個(gè)docker鏡像同步工具,可用來(lái)進(jìn)行多對(duì)多的鏡像倉(cāng)庫(kù)同步,支持目前絕大多數(shù)主流的docker鏡像倉(cāng)庫(kù)服務(wù),看介紹還是很棒的,有需要 registry 之間同步鏡像的可以試試這個(gè)工具,看介紹這個(gè)工具不會(huì)拉取到本地磁盤,從源 registry 獲取鏡像數(shù)據(jù)之后直接就推送到新的 registry 里了,效率會(huì)高很多
Docker-Registry API
docker registry 有一套規(guī)范,可以查閱 https://docs.docker.com/registry/spec/api/ 了解更多
獲取所有鏡像
docker registry v2 新增了一個(gè) _catalog 的 api 可以獲取所有的鏡像,v1 可以用 _search 來(lái)代替
語(yǔ)法如下:
GET /v2/_catalog
默認(rèn)最多返回100條記錄,多余 100 可以通過(guò)參數(shù) n 指定返回?cái)?shù)量,分頁(yè)的話可以指定另外一個(gè)參數(shù) last指定完上一頁(yè)返回的最后一個(gè)鏡像,舉個(gè)栗子: http://example.com/v2/_catalog?n=20&last=b
獲取鏡像的 tag
獲取 docker 鏡像的 tag 列表可以使用 GET /v2/<repository-name>/tags/list 來(lái)獲取,也可以分頁(yè),類似于上面獲取鏡像列表,可以通過(guò) n 和 last 來(lái)實(shí)現(xiàn)分頁(yè)加載
操作示例
在本地部署了一個(gè)測(cè)試用的 docker registry 來(lái)做演示,我這里用 httpie 來(lái)做測(cè)試
獲取鏡像列表:
調(diào)用 _catalog 接口來(lái)獲取鏡像列表
http :5000/v2/_catalog

獲取鏡像的 tag 列表
調(diào)用 tags/list 接口獲取鏡像的 tag
http :5000/v2/busybox/tags/list
http :5000/v2/redis/tags/list

PowerShell 腳本
一切不是自動(dòng)化的運(yùn)維都是耍流氓,很有可能以后會(huì)有類似的需求,不如寫個(gè)腳本自動(dòng)化的跑吧
下面的腳本做了一些簡(jiǎn)化,因?yàn)槲覀兊?azure container registry 上的數(shù)量不多,只有五六十個(gè)鏡像,而且鏡像只有 latest 的 tag,沒(méi)有其他 tag ,所以把上面的步驟做了簡(jiǎn)化,并沒(méi)有分頁(yè)獲取所有的鏡像,也沒(méi)有獲取所有的 tag,實(shí)際使用的話還請(qǐng)自行修改后使用
# variables
$srcRegUser = "xxx"
$srcRegPwd = "111111"
$srcRegHost = "xxx.azurecr.cn"
$destRegUser = "yyy"
$destRegPwd = "222"
$destRegHost = "registry.xxx.com"
# get repositories from source registry
# httpie
$response = (http -b -a "${srcRegUser}:${srcRegPwd}" "https://${srcRegHost}/v2/_catalog") | ConvertFrom-Json
# curl
#$response = (curl -u "${srcRegUser}:${srcRegPwd}" "https://${srcRegHost}/v2/_catalog") | ConvertFrom-Json
# repository
$repositories = $response.repositories
#
Write-Host $repositories
# login source registry
docker login $srcRegHost -u $srcRegUser -p $srcRegPwd
# login dest registry
docker login $destRegHost -u $destRegUser -p $destRegPwd
# sync
foreach($repo in $repositories)
{
Write-Host "sync $repo begin"
$srcTag = "${srcRegHost}/${repo}:latest"
$destTag = "${destRegHost}/${repo}:latest"
Write-Host "source image tag: $srcTag"
Write-Host "dest image tag $destTag"
Write-Host "docker pull $srcTag begin"
docker pull $srcTag
Write-Host "docker pull $srcTag completed"
Write-Host "docker tag $srcTag $destTag ing"
docker tag $srcTag $destTag
Write-Host "docker push $destTag begin"
docker push $destTag
Write-Host "docker push $destTag completed"
Write-Host "docker rmi $srcTag $destTag begin"
docker rmi $srcTag $destTag
Write-Host "docker rmi $srcTag $destTag end"
Write-Host "sync $repo completed"
}
Write-Host "Completed..."
More
如果要同步的鏡像比較多,考慮使用阿里云的鏡像同步工具去同步
Reference
https://stackoverflow.com/questions/31251356/how-to-get-a-list-of-images-on-docker-registry-v2
https://github.com/AliyunContainerService/image-syncer
https://docs.docker.com/registry/spec/api/
總結(jié)
到此這篇關(guān)于docker registry 鏡像同步的文章就介紹到這了,更多相關(guān)docker registry 鏡像內(nèi)容請(qǐng)搜索腳本之家以前的文章或繼續(xù)瀏覽下面的相關(guān)文章希望大家以后多多支持腳本之家!
相關(guān)文章
Docker 創(chuàng)建容器后再修改 hostname的詳細(xì)過(guò)程
這篇文章主要介紹了Docker 創(chuàng)建容器后再修改 hostname的詳細(xì)過(guò)程,本文給大家介紹的非常詳細(xì),對(duì)大家的學(xué)習(xí)或工作具有一定的參考借鑒價(jià)值,需要的朋友可以參考下2021-10-10
詳解Docker創(chuàng)建php開(kāi)發(fā)環(huán)境遇到的權(quán)限問(wèn)題解決方案
本篇文章主要介紹了Docker創(chuàng)建php開(kāi)發(fā)環(huán)境遇到的權(quán)限問(wèn)題解決方案,具有一定的參考價(jià)值,有需要的可以了解一下。2016-11-11
導(dǎo)出與導(dǎo)入Docker的容器實(shí)現(xiàn)示例
本文主要介紹了導(dǎo)出與導(dǎo)入Docker的容器實(shí)現(xiàn)示例,文中通過(guò)示例代碼介紹的非常詳細(xì),具有一定的參考價(jià)值,感興趣的小伙伴們可以參考一下2021-12-12
docker compose方式如何安裝ClickHouse數(shù)據(jù)庫(kù)
這篇文章主要介紹了docker compose方式如何安裝ClickHouse數(shù)據(jù)庫(kù)問(wèn)題,具有很好的參考價(jià)值,希望對(duì)大家有所幫助,如有錯(cuò)誤或未考慮完全的地方,望不吝賜教2025-04-04
Windows的docker刪除容器后WSL2磁盤空間不釋放的問(wèn)題的解決方法
很多同學(xué)拉取鏡像使用一段時(shí)間后發(fā)現(xiàn) C 盤快滿了,把之前用過(guò)的鏡像和容器刪除,發(fā)現(xiàn) WSL 掛載目錄的虛擬磁盤大小沒(méi)有變化,非常的奇怪,所以本文介紹了Windows的docker刪除容器后WSL2磁盤空間不釋放的問(wèn)題的解決方法,需要的朋友可以參考下2024-12-12

