Jak sklonować podkatalog tylko repozytorium Git?

To, co próbujesz zrobić, nazywa się sparse checkout , a ta funkcja została dodana w git 1.7.0 (Feb. 2012). Krok do zrobienia klonu są następujące:

mkdir <repo>
cd <repo>
git init
git remote add -f origin <url>

To tworzy puste repozytorium z pilotem i pobiera wszystkie obiekty, ale nie sprawdza ich. Więc zrób:

git config core.sparseCheckout true

Teraz musisz określić, które Pliki / Foldery chcesz sprawdzić. Można to zrobić, wymieniając je w .git/info/sparse-checkout, np:

echo "some/dir/" >> .git/info/sparse-checkout
echo "another/sub/tree" >> .git/info/sparse-checkout

Last but not least, Zaktualizuj swój pusty repo ze stanem z pilota:

git pull origin master

Będziesz mieć teraz pliki "sprawdzone" dla some/dir i another/sub/tree w systemie plików (z tymi ścieżkami nadal), a inne ścieżki nie są obecne.

Możesz rzucić okiem na Rozszerzony samouczek i prawdopodobnie powinieneś zapoznać się z oficjalną dokumentacją dla sparse checkout.

Jako funkcja:

function git_sparse_clone() (
  rurl="$1" localdir="$2" && shift 2

  mkdir -p "$localdir"
  cd "$localdir"

  git init
  git remote add -f origin "$rurl"

  git config core.sparseCheckout true

  # Loops over remaining args
  for i; do
    echo "$i" >> .git/info/sparse-checkout
  done

  git pull origin master
)

Użycie:

git_sparse_clone "http://github.com/tj/n" "./local/location" "/bin"

Zauważ, że to jeszcze pobierze cały repozytorium z serwera – tylko kasa jest zmniejszona w rozmiarze. W tej chwili nie jest możliwe sklonowanie tylko jednego katalogu. Ale jeśli nie potrzebujesz historii repozytorium, możesz przynajmniej zaoszczędzić na przepustowości, tworząc płytki klon. Zobacz odpowiedź udondana poniżej, aby uzyskać informacje, jak połączyć płytkieklon i rzadkie zamówienie.

Możesz połączyć funkcje sparse checkout i shallow clone. shallow clone odcina historię, a sparse checkout ściąga tylko pliki pasujące do twoich wzorców.

git init <repo>
cd <repo>
git remote add origin <url>
git config core.sparsecheckout true
echo "finisht/*" >> .git/info/sparse-checkout
git pull --depth=1 origin master

Będziesz potrzebował minimum git 1.9 aby to zadziałało. Sam testowałem tylko z 2.2.0 i 2.2.2.

W ten sposób nadal będziesz w stanie wcisnąć , co nie jest możliwe przy git archive.

Dla innych użytkowników, którzy po prostu chcę pobrać plik / folder z github, po prostu użyj:

svn export <repo>/trunk/<folder>

Np.

svn export https://github.com/lodash/lodash.com/trunk/docs

(tak, tu jest svn. najwyraźniej w 2016 nadal potrzebujesz svn, aby po prostu pobrać niektóre pliki github)

Dzięki Uprzejmości: Pobierz pojedynczy folder lub katalog z repo GitHub

Ważne - upewnij się, że zaktualizowałeś adres URL Githuba i zastąp /tree/master/ ' / trunk/'.

Jako bash skrypt:

git-download(){
    folder=${@/tree\/master/trunk}
    folder=${folder/blob\/master/trunk}
    svn export $folder
}

Uwaga Ta metoda pobiera folder, nie klonuje go/kasuje. Nie można wypychać zmian z powrotem do repozytorium. Z drugiej strony - skutkuje to mniejszym pobieraniem w porównaniu do rzadkiego checkout lub shallow checkout.

Git 1.7.0 ma "mało kasy". Zobacz też "rdzeń.sparseCheckout" w git config manpage , "Sparse checkout" w git read-tree manpage , oraz "Skip-worktree bit" w git update-index manpage.

Interfejs nie jest tak wygodny jak SVN ' s (np. nie ma sposobu, aby dokonać oszczędnego zakupu w momencie początkowego klonu), ale podstawowa funkcjonalność, na której mogłyby być zbudowane prostsze interfejsy, jest już dostępna.

Jeśli nigdy nie planujesz interakcji z repozytorium, z którego sklonowałeś, możesz wykonać pełny git clone i przepisać swoje repozytorium używając git filter-branch --subdirectory-filter. W ten sposób przynajmniej historia zostanie zachowana.

To wygląda o wiele prościej:

git archive --remote=<repo_url> <branch> <path> | tar xvf -

Nie jest możliwe sklonowanie podkatalogu tylko z Gitem, ale poniżej znajduje się kilka obejść.

Filter branch

Możesz przepisać repozytorium tak, aby wyglądało tak, jakby trunk/public_html/ było jego głównym projektem i odrzucić całą inną historię (używając filter-branch), wypróbuj już dział checkout:

git filter-branch --subdirectory-filter trunk/public_html -- --all

^{Uwagi: --, która oddziela opcje filter-branch od opcji rewizji, oraz --all, aby przepisać wszystkie gałęzie i tagi. Wszystkie informacje, w tym oryginalne informacje o czasie zatwierdzania lub scalaniu zostaną zachowane . Polecenie to honoruje .git/info/grafts plik i refs w przestrzeni nazw refs/replace/, więc jeśli masz zdefiniowane grafy lub zamienniki refs, uruchomienie tego polecenia sprawi, że będą one trwałe.}

Uwaga! Przepisana historia będzie miała różne nazwy obiektów dla wszystkich obiektów i nie będzie zbieżna z oryginalną gałęzią. Nie będziesz w stanie łatwo wcisnąć i rozprowadzić przepisanej gałęzi na górze oryginalnej gałęzi. Nie używaj tego polecenia, jeśli nie znasz pełnych implikacji i unikaj go, jeśli prosty commit wystarczy, aby rozwiązać twój problem.

Sparse checkout

Oto proste kroki z podejściem sparse checkout, które będzie wypełniać katalog roboczy słabo, więc możesz powiedzieć Gitowi, które foldery lub pliki w katalogu roboczym są warte sprawdzenia.

1. Clone repozytorium jak zwykle (--no-checkout jest opcjonalnie):

   git clone --no-checkout git@foo/bar.git
   cd bar
   

   ^{możesz pominąć ten krok, jeśli Twoje repozytorium zostało już sklonowane.}

   Podpowiedź: w przypadku dużych transakcji, rozważ płytki klon (--depth 1) do kasy Tylko najnowsza wersja Lub / i --single-branch.

2. Enable sparseCheckout option:

   git config core.sparseCheckout true
   

3. Określ folder(y) dla oszczędnego checkout (bez spacji na końcu):

   echo "trunk/public_html/*"> .git/info/sparse-checkout
   

   Lub edytuj .git/info/sparse-checkout.

4. Sprawdź oddział (np. master):

   git checkout master
   

Teraz powinieneś wybrać foldery w bieżącym katalogu.

Możesz rozważyć dowiązania symboliczne, jeśli zamiast tego masz zbyt wiele poziomów katalogów lub gałęzi filtrujących.

Właśnie napisałem skrypt dla GitHub .

Użycie:

python get_git_sub_dir.py path/to/sub/dir <RECURSIVE>

Oto skrypt powłoki, który napisałem dla przypadku użycia pojedynczego podkatalogu sparse checkout

CoSubDir.sh

localRepo=$1
remoteRepo=$2
subDir=$3


# Create local repository for subdirectory checkout, make it hidden to avoid having to drill down to the subfolder
mkdir ./.$localRepo
cd ./.$localRepo
git init
git remote add -f origin $remoteRepo
git config core.sparseCheckout true

# Add the subdirectory of interest to the sparse checkout.
echo $subDir >> .git/info/sparse-checkout

git pull origin master

# Create convenience symlink to the subdirectory of interest
cd ..
ln -s ./.$localRepo$subDir $localRepo

git clone --filter od Git 2.19

Ta opcja pomija pobieranie niepotrzebnych obiektów z serwera:

git clone --depth 1 --no-checkout --filter=blob:none \
  "file://$(pwd)/server_repo" local_repo
cd local_repo
git checkout master -- mydir/

Serwer powinien być skonfigurowany z:

git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

Nie ma wsparcia dla serwera od wersji 2.19.0, ale można go już przetestować lokalnie.

TODO: --filter=blob:none pomija wszystkie plamy, ale nadal pobiera wszystkie obiekty drzewa. Ale na normalnym repo, to powinno być małe w porównaniu do samych plików, więc to jest już wystarczająco dobre. Zapytany w: https://www.spinics.net/lists/git/msg342006.html Devs odpowiedział --filter=tree:0 jest w pracach, aby to zrobić.

Pamiętaj, że --depth 1 już implikuje --single-branch, Zobacz także: jak sklonować pojedynczą gałąź w git?

file://$(path) czy wymagane jest pokonanie git clone shenanigans protokołu: Jak sklonować lokalne repozytorium git ze ścieżką względną?

Format --filter jest udokumentowany na man git-rev-list.

Docs on Git drzewo:

• https://github.com/git/git/blob/v2.19.0/Documentation/technical/partial-clone.txt
• https://github.com/git/git/blob/v2.19.0/Documentation/rev-list-options.txt#L720
• https://github.com/git/git/blob/v2.19.0/t/t5616-partial-clone.sh

Przetestuj to

#!/usr/bin/env bash
set -eu

list-objects() (
  git rev-list --all --objects
  echo "master commit SHA: $(git log -1 --format="%H")"
  echo "mybranch commit SHA: $(git log -1 --format="%H")"
  git ls-tree master
  git ls-tree mybranch | grep mybranch
  git ls-tree master~ | grep root
)

# Reproducibility.
export GIT_COMMITTER_NAME='a'
export GIT_COMMITTER_EMAIL='a'
export GIT_AUTHOR_NAME='a'
export GIT_AUTHOR_EMAIL='a'
export GIT_COMMITTER_DATE='2000-01-01T00:00:00+0000'
export GIT_AUTHOR_DATE='2000-01-01T00:00:00+0000'

rm -rf server_repo local_repo
mkdir server_repo
cd server_repo

# Create repo.
git init --quiet
git config --local uploadpack.allowfilter 1
git config --local uploadpack.allowanysha1inwant 1

# First commit.
# Directories present in all branches.
mkdir d1 d2
printf 'd1/a' > ./d1/a
printf 'd1/b' > ./d1/b
printf 'd2/a' > ./d2/a
printf 'd2/b' > ./d2/b
# Present only in root.
mkdir 'root'
printf 'root' > ./root/root
git add .
git commit -m 'root' --quiet

# Second commit only on master.
git rm --quiet -r ./root
mkdir 'master'
printf 'master' > ./master/master
git add .
git commit -m 'master commit' --quiet

# Second commit only on mybranch.
git checkout -b mybranch --quiet master~
git rm --quiet -r ./root
mkdir 'mybranch'
printf 'mybranch' > ./mybranch/mybranch
git add .
git commit -m 'mybranch commit' --quiet

echo "# List and identify all objects"
list-objects
echo

# Restore master.
git checkout --quiet master
cd ..

# Clone. Don't checkout for now, only .git/ dir.
git clone --depth 1 --quiet --no-checkout --filter=blob:none "file://$(pwd)/server_repo" local_repo
cd local_repo

# List missing objects from master.
echo "# Missing objects after --no-checkout"
git rev-list --all --quiet --objects --missing=print
echo

echo "# Git checkout fails without internet"
mv ../server_repo ../server_repo.off
! git checkout master
echo

echo "# Git checkout fetches the missing directory from internet"
mv ../server_repo.off ../server_repo
git checkout master -- d1/
echo

echo "# Missing objects after checking out d1"
git rev-list --all --quiet --objects --missing=print

GitHub upstream .

Wyjście W Git v2. 19. 0:

# List and identify all objects
c6fcdfaf2b1462f809aecdad83a186eeec00f9c1
fc5e97944480982cfc180a6d6634699921ee63ec
7251a83be9a03161acde7b71a8fda9be19f47128
62d67bce3c672fe2b9065f372726a11e57bade7e
b64bf435a3e54c5208a1b70b7bcb0fc627463a75 d1
308150e8fddde043f3dbbb8573abb6af1df96e63 d1/a
f70a17f51b7b30fec48a32e4f19ac15e261fd1a4 d1/b
84de03c312dc741d0f2a66df7b2f168d823e122a d2
0975df9b39e23c15f63db194df7f45c76528bccb d2/a
41484c13520fcbb6e7243a26fdb1fc9405c08520 d2/b
7d5230379e4652f1b1da7ed1e78e0b8253e03ba3 master
8b25206ff90e9432f6f1a8600f87a7bd695a24af master/master
ef29f15c9a7c5417944cc09711b6a9ee51b01d89
19f7a4ca4a038aff89d803f017f76d2b66063043 mybranch
1b671b190e293aa091239b8b5e8c149411d00523 mybranch/mybranch
c3760bb1a0ece87cdbaf9a563c77a45e30a4e30e
a0234da53ec608b54813b4271fbf00ba5318b99f root
93ca1422a8da0a9effc465eccbcb17e23015542d root/root
master commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
mybranch commit SHA: fc5e97944480982cfc180a6d6634699921ee63ec
040000 tree b64bf435a3e54c5208a1b70b7bcb0fc627463a75    d1
040000 tree 84de03c312dc741d0f2a66df7b2f168d823e122a    d2
040000 tree 7d5230379e4652f1b1da7ed1e78e0b8253e03ba3    master
040000 tree 19f7a4ca4a038aff89d803f017f76d2b66063043    mybranch
040000 tree a0234da53ec608b54813b4271fbf00ba5318b99f    root

# Missing objects after --no-checkout
?f70a17f51b7b30fec48a32e4f19ac15e261fd1a4
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb
?308150e8fddde043f3dbbb8573abb6af1df96e63

# Git checkout fails without internet
fatal: '/home/ciro/bak/git/test-git-web-interface/other-test-repos/partial-clone.tmp/server_repo' does not appear to be a git repository
fatal: Could not read from remote repository.

Please make sure you have the correct access rights
and the repository exists.

# Git checkout fetches the missing directory from internet
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.
remote: Enumerating objects: 1, done.
remote: Counting objects: 100% (1/1), done.
remote: Total 1 (delta 0), reused 0 (delta 0)
Receiving objects: 100% (1/1), 45 bytes | 45.00 KiB/s, done.

# Missing objects after checking out d1
?8b25206ff90e9432f6f1a8600f87a7bd695a24af
?41484c13520fcbb6e7243a26fdb1fc9405c08520
?0975df9b39e23c15f63db194df7f45c76528bccb

Wnioski: wszystkie plamy z zewnątrz z d1/ zaginęły. Np. 0975df9b39e23c15f63db194df7f45c76528bccb, czyli d2/b nie ma po sprawdzeniu d1/a.

Zauważ, że root/root i mybranch/mybranch również brakuje, ale --depth 1 ukrywa to z listy brakujących plików. Jeśli usuniesz --depth 1, pojawią się one na liście brakujących plików.