it-swarm-eu.dev

Jak klonuji pouze podadresář úložiště Git?

Mám svůj repozitář Git, který má v kořenovém adresáři dva podadresáře:

/finisht
/static

Když to bylo v SVN , /finisht byl odhlášen na jednom místě, zatímco /static byl odhlášen jinde, jako je:

svn co svn+ssh://[email protected]/home/admin/repos/finisht/static static

Existuje způsob, jak to s Gitem udělat?

1180
Nick Sergeant

EDITOVAT: Jako Git 2.19 je to konečně možné, jak je vidět v této odpovědi: https://stackoverflow.com/a/52269934/2988 .

Zvažte upvoting tuto odpověď.

Poznámka: v Git 2.19 je implementována pouze podpora na straně klienta, podpora na straně serveru stále chybí, takže funguje pouze při klonování lokálních úložišť. Všimněte si také, že velké hostitele Git, např. GitHub, ve skutečnosti nepoužívají server Git, používají vlastní implementaci, takže i když se podpora objeví na serveru Git, neznamená to automaticky, že funguje na hostitelů Git. (OTOH, protože nepoužívají server Git, mohou jej rychleji implementovat ve svých vlastních implementacích, než se objeví na serveru Git.)


Ne, to není možné v Gitu.

Implementace něco takového v Gitu by znamenala značné úsilí a znamenalo by to, že integritu klientského úložiště již nelze zaručit. Pokud máte zájem, hledejte diskusi o "řídkém klonu" a "řídkém načítání" na mailinglistu git.

Obecně platí, že konsenzus v komunitě Git spočívá v tom, že pokud máte několik adresářů, které jsou vždy odhlášeny nezávisle, pak se jedná o dva různé projekty a měly by žít ve dvou různých úložištích. Můžete je spojit dohromady pomocí Git Submodules .

510
Jörg W Mittag

To, co se snažíte udělat, se nazývá sparse checkout a tato funkce byla přidána v git 1.7.0 (únor 2012). Kroky k provedení řídkého souboru {klon jsou následující:

mkdir <repo>
cd <repo>
git init
git remote add -f Origin <url>

Tím vytvoříte vzdálené úložiště s dálkovým ovladačem a načte všechny objekty, ale neoznačí je. Pak postupujte takto:

git config core.sparseCheckout true

Nyní musíte definovat, které soubory/složky chcete skutečně zkontrolovat. To se provádí jejich zapsáním do souboru .git/info/sparse-checkout, např.:

echo "some/dir/" >> .git/info/sparse-checkout
echo "another/sub/tree" >> .git/info/sparse-checkout

V neposlední řadě aktualizujte svůj prázdný repo se stavem z dálkového ovladače:

git pull Origin master

Nyní budete mít soubory "check out" pro some/dir a another/sub/tree na vašem souborovém systému (s těmito cestami stále) a žádné další cesty.

Možná se budete chtít podívat na rozšířené tutorial a pravděpodobně byste si přečetli oficiální dokumentace pro řídký checkout .

Jako funkce:

function git_sparse_clone() (
  rurl="$1" localdir="$2" && shift 2

  mkdir -p "$localdir"
  cd "$localdir"

  git init
  git remote add -f Origin "$rurl"

  git config core.sparseCheckout true

  # Loops over remaining args
  for i; do
    echo "$i" >> .git/info/sparse-checkout
  done

  git pull Origin master
)

Používání:

git_sparse_clone "http://github.com/tj/n" "./local/location" "/bin"

Všimněte si, že toto bude stále stahovat celé úložiště ze serveru - velikost je omezena pouze na pokladnu. Momentálně není možné klonovat pouze jeden adresář. Pokud ale nepotřebujete historii úložiště, můžete alespoň ušetřit na šířku pásma vytvořením mělkého klonu. Viz odpověď udondan níže pro informace o tom, jak kombinovat mělké klon a řídká pokladna.

1438
Chronial

Můžete kombinovat sparse checkout a mělký klon features. mělký klon odstřihne historii a sparse checkout pouze vytáhne soubory odpovídající vašim vzorům.

git init <repo>
cd <repo>
git remote add Origin <url>
git config core.sparsecheckout true
echo "finisht/*" >> .git/info/sparse-checkout
git pull --depth=1 Origin master

Budete potřebovat minimálně git 1.9, aby to fungovalo. Testoval jsem ho pouze pomocí 2.2.0 a 2.2.2.

Tímto způsobem budete stále schopni Push , což není možné s git archive.

367
udondan

git clone --filter z Gitu 2.19

Tato volba skutečně přeskočí načítání nepotřebných objektů ze serveru:

git clone --depth 1 --no-checkout --filter=blob:none \
  "file://$(pwd)/server_repo" local_repo
cd local_repo
git checkout master -- mydir/

Server by měl být nakonfigurován s:

git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

Rozšíření bylo provedeno na vzdáleném protokolu Git, který tuto funkci podporuje v2.19.0, ale v té době neexistuje žádná podpora serveru. Ale může být již lokálně testován.

TODO: --filter=blob:none přeskočí všechny bloby, ale stále vyvolá všechny stromové objekty. Ale v normálním repo by to mělo být ve srovnání se samotnými soubory nepatrné, takže je to již dost dobré. Na dotaz: https://www.spinics.net/lists/git/msg342006.html Devs odpověděli, že --filter=tree:0 je v dílech, které to mají dělat.

Nezapomeňte, že --depth 1 již implikuje --single-branch, viz také: Jak klonuji jednu pobočku v Gitu?

file://$(path) je vyžadováno k překonání git clone protokolu shenanigans: Jak mělké klonovat lokální úložiště git s relativní cestou?

Formát --filter je dokumentován v man git-rev-list.

Dokumenty ve stromu Git:

Vyzkoušejte to

#!/usr/bin/env bash
set -eu

list-objects() (
  git rev-list --all --objects
  echo "master commit SHA: $(git log -1 --format="%H")"
  echo "mybranch commit SHA: $(git log -1 --format="%H")"
  git ls-tree master
  git ls-tree mybranch | grep mybranch
  git ls-tree master~ | grep root
)

# Reproducibility.
export GIT_COMMITTER_NAME='a'
export GIT_COMMITTER_EMAIL='a'
export GIT_AUTHOR_NAME='a'
export GIT_AUTHOR_EMAIL='a'
export GIT_COMMITTER_DATE='2000-01-01T00:00:00+0000'
export GIT_AUTHOR_DATE='2000-01-01T00:00:00+0000'

rm -rf server_repo local_repo
mkdir server_repo
cd server_repo

# Create repo.
git init --quiet
git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

# First commit.
# Directories present in all branches.
mkdir d1 d2
printf 'd1/a' > ./d1/a
printf 'd1/b' > ./d1/b
printf 'd2/a' > ./d2/a
printf 'd2/b' > ./d2/b
# Present only in root.
mkdir 'root'
printf 'root' > ./root/root
git add .
git commit -m 'root' --quiet

# Second commit only on master.
git rm --quiet -r ./root
mkdir 'master'
printf 'master' > ./master/master
git add .
git commit -m 'master commit' --quiet

# Second commit only on mybranch.
git checkout -b mybranch --quiet master~
git rm --quiet -r ./root
mkdir 'mybranch'
printf 'mybranch' > ./mybranch/mybranch
git add .
git commit -m 'mybranch commit' --quiet

echo "# List and identify all objects"
list-objects
echo

# Restore master.
git checkout --quiet master
cd ..

# Clone. Don't checkout for now, only .git/ dir.
git clone --depth 1 --quiet --no-checkout --filter=blob:none "file://$(pwd)/server_repo" local_repo
cd local_repo

# List missing objects from master.
echo "# Missing objects after --no-checkout"
git rev-list --all --quiet --objects --missing=print
echo

echo "# Git checkout fails without internet"
mv ../server_repo ../server_repo.off
! git checkout master
echo

echo "# Git checkout fetches the missing directory from internet"
mv ../server_repo.off ../server_repo
git checkout master -- d1/
echo

echo "# Missing objects after checking out d1"
git rev-list --all --quiet --objects --missing=print

GitHub proti proudu .

Výstup v Git v2.19.0:

# List and identify all objects
c6fcdfaf2b1462f809aecdad83a186eeec00f9c1
fc5e97944480982cfc180a6d6634699921ee63ec
7251a83be9a03161acde7b71a8fda9be19f47128
62d67bce3c672fe2b9065f372726a11e57bade7e
b64bf435a3e54c5208a1b70b7bcb0fc627463a75 d1
308150e8fddde043f3dbbb8573abb6af1df96e63 d1/a
f70a17f51b7b30fec48a32e4f19ac15e261fd1a4 d1/b
84de03c312dc741d0f2a66df7b2f168d823e122a d2
0975df9b39e23c15f63db194df7f45c76528bccb d2/a
41484c13520fcbb6e7243a26fdb1fc9405c08520 d2/b
7d5230379e4652f1b1da7ed1e78e0b8253e03ba3 master
8b25206ff90e9432f6f1a8600f87a7bd695a24af master/master
ef29f15c9a7c5417944cc09711b6a9ee51b01d89
19f7a4ca4a038aff89d803f017f76d2b66063043 mybranch
1b671b190e293aa091239b8b5e8c149411d00523 mybranch/mybranch
c3760bb1a0ece87cdbaf9a563c77a45e30a4e30e
a0234da53ec608b54813b4271fbf00ba5318b99f root
93ca1422a8da0a9effc465eccbcb17e23015542d root/root
master commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
mybranch commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
040000 tree b64bf435a3e54c5208a1b70b7bcb0fc627463a75    d1
040000 tree 84de03c312dc741d0f2a66df7b2f168d823e122a    d2
040000 tree 7d5230379e4652f1b1da7ed1e78e0b8253e03ba3    master
040000 tree 19f7a4ca4a038aff89d803f017f76d2b66063043    mybranch
040000 tree a0234da53ec608b54813b4271fbf00ba5318b99f    root

# Missing objects after --no-checkout
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb
?308150e8fddde043f3dbbb8573abb6af1df96e63

# Git checkout fails without internet
fatal: '/home/ciro/bak/git/test-git-web-interface/other-test-repos/partial-clone.tmp/server_repo' does not appear to be a git repository
fatal: Could not read from remote repository.

Please make sure you have the correct access rights
and the repository exists.

# Git checkout fetches the missing directory from internet
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.

# Missing objects after checking out d1
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb

Závěry: chybí všechny skvrny mimo oblast d1/. Např. 0975df9b39e23c15f63db194df7f45c76528bccb, což je d2/b tam není po zaškrtnutí d1/a.

root/root a mybranch/mybranch také chybí, ale --depth 1 skryje to ze seznamu chybějících souborů. Pokud odstraníte --depth 1, zobrazí se v seznamu chybějících souborů.

Mám sen

Tato funkce by mohla způsobit revoluci Gitu.

Představte si, že máte veškerou kódovou základnu vašeho podniku v jediném repo bez ošklivých nástrojích třetích stran, jako je repo .

Představte si ukládání obrovských blobů přímo do repo bez jakýchkoli ošklivých rozšíření třetích stran .

Představte si, že by GitHub umožnil na metadata souboru/adresáře jako hvězdy a oprávnění, takže si můžete uložit všechny své osobní věci pod jediné repo.

Představte si, že submoduly byly zpracovány přesně jako běžné adresáře : stačí požádat o strom SHA a mechanismus podobný DNS vyřeší váš požadavek , nejprve při pohledu na vaše lokální ~/.git , pak první na bližší servery (zrcadlo vaší firmy/cache) a končí na GitHub.

Pro ostatní uživatele, kteříjen chcete stáhnoutsoubor/složka z githubu, jednoduše použijte:

svn export <repo>/trunk/<folder>

např.

svn export https://github.com/lodash/lodash.com/trunk/docs

(ano, to je svn zde. zřejmě v roce 2016 stále potřebujete svn jednoduše stáhnout nějaké soubory github)

Zdvořilost: Stahování jedné složky nebo adresáře z repo GitHub

Důležité - Ujistěte se, že aktualizujete adresu URL github a nahradíte /tree/master/ znakem '/ trunk /'.

Jako bash skript:

git-download(){
    folder=${@/tree\/master/trunk}
    folder=${folder/blob\/master/trunk}
    svn export $folder
}

Poznámka Tato metoda stáhne složku, ne klonuje/nevykonává ji. Nemůžete Push změny vrátit do úložiště. Na druhou stranu to má za následek menší stahování ve srovnání s řídkou pokladnou nebo malou kontrolou.

113
Anona112

Pokud nikdy neplánujete komunikovat s repozitářem, ze kterého jste klonovali, můžete provést úplný git clone a repositář přepsat pomocí git filter-branch --subdirectory-filter . Tímto způsobem bude zachována alespoň historie.

68
hillu

Git 1.7.0 má „řídké pokladny“. Viz "core.sparseCheckout" v souboru git config manpage , "Sparse checkout" v souboru git read-tree manpage , a "Skip-worktree bit ”V git update-index manpage .

Rozhraní není tak pohodlné jako SVN (např. Neexistuje žádný způsob, jak v době počátečního klonování provést řídkou pokladnu), ale nyní je k dispozici základní funkce, na které by bylo možné vytvořit jednodušší rozhraní.

63
Chris Johnsen

Toto vypadá mnohem jednodušší:

git archive --remote=<repo_url> <branch> <path> | tar xvf -
61
ErichBSchulz

Není možné klonovat podadresář pouze pomocí Git, ale níže je několik řešení.

Větve filtru

Možná budete chtít přepsat úložiště tak, aby vypadalo, jako by trunk/public_html/ bylo jeho kořenem projektu, a zahodit všechny ostatní historie (pomocí filter-branch ), zkusit na pobočce služby Checkout:

git filter-branch --subdirectory-filter trunk/public_html -- --all

Poznámky: --, které odděluje možnosti filtr-větev od možností revize a --all k přepsání všech větví a značek. Veškeré informace včetně původních časů potvrzení nebo sloučení budou uchovány. Tento příkaz ctí soubor .git/info/grafts a refs v oboru názvů refs/replace/, takže pokud máte definovaný libovolný počet grafů nebo nahrazení refs, spuštění tohoto příkazu je učiní trvalými.

Varování! Přepisovaná historie bude mít různé názvy objektů pro všechny objekty a nebude konvergovat s původní větví. Nebudete moci snadno přepínat a distribuovat přepsanou větev na původní větev. Nepoužívejte tento příkaz, pokud neznáte úplné důsledky a vyhnete se jeho použití stejně, pokud by stačil jednoduchý opravný prostředek k vyřešení vašeho problému.


Řídká pokladna

Zde jsou jednoduché kroky s přístupem sparse checkout , který naplní pracovní adresář řídce, takže můžete říci Gitu, které složky nebo soubory v pracovním adresáři stojí za to se podívat.

  1. Klonovat repozitář jako obvykle (--no-checkout je nepovinné):

    git clone --no-checkout [email protected]/bar.git
    cd bar
    

    Tento krok můžete přeskočit, pokud jste již uložili svůj repozitář.

    Tip: Pro velké repo operace považujte mělký klon (--depth 1) pouze za poslední revizi nebo/a --single-branch.

  2. Povolit možnost sparseCheckout:

    git config core.sparseCheckout true
    
  3. Určete složku (složky) pro řídkou pokladnu (bez místa na konci):

    echo "trunk/public_html/*"> .git/info/sparse-checkout
    

    nebo upravte .git/info/sparse-checkout.

  4. Pokladna pobočky (např. master):

    git checkout master
    

Nyní byste měli mít vybrané složky ve svém aktuálním adresáři.

Můžete uvažovat o symbolických odkazech, pokud místo toho máte příliš mnoho úrovní adresářů nebo filtrační větve.


28
kenorb

Jenom napsal skript pro GitHub .

Používání:

python get_git_sub_dir.py path/to/sub/dir <RECURSIVE>
9
david_adler

Zde je skript Shell, který jsem napsal pro případ použití jednoho podadresáře řídké pokladny

coSubDir.sh

localRepo=$1
remoteRepo=$2
subDir=$3


# Create local repository for subdirectory checkout, make it hidden to avoid having to drill down to the subfolder
mkdir ./.$localRepo
cd ./.$localRepo
git init
git remote add -f Origin $remoteRepo
git config core.sparseCheckout true

# Add the subdirectory of interest to the sparse checkout.
echo $subDir >> .git/info/sparse-checkout

git pull Origin master

# Create convenience symlink to the subdirectory of interest
cd ..
ln -s ./.$localRepo$subDir $localRepo
5
jxramos

To klonuje konkrétní složku a odstraní všechny historie, které s ní nesouvisejí.

git clone --single-branch -b {branch} [email protected]:{user}/{repo}.git
git filter-branch --subdirectory-filter {path/to/folder} HEAD
git remote remove Origin
git remote add Origin [email protected]:{user}/{new-repo}.git
git Push -u Origin master
0
BARJ