Создать новый репозиторий из существующего подкаталога только с соответствующими файлами и коммитами

Question

У меня есть monorepo с большим количеством различных packages. Я бы хотел взять пакет и создать для него новый репозиторий. Я хотел бы сохранить коммиты, относящиеся к файлам в папке проекта.

Я пытался использовать git filter-branch с --subdirectory-filter, который может создать ветку с файлами из указанной папки.

git filter-branch --subdirectory-filter ./src/project 

git log --pretty=oneline
dc1fd15e212c2e916591d931f81d0f94b0312067 (HEAD -> master) j
a68625cffd59e0bc6efda226042b81979985f77c a1
612e28ee9a2a7e59e8da0dff2c0109f0c03fa216 a2
04335730f1e4ecfbd7882fcdc16d5f2402261b3f a3
3e76c4deecd9b019302bcdf667523dbc866479bd a4
01ca27e1801b1f80d7480110c2861d798b0e6893 a5

Тем не менее, с помощью команды log и флага --all вы можете видеть, что коммитов намного больше, чем просто в основной ветви.

git log --pretty=oneline --all
f96e38e502b6bcab013f4505f40b0060fcafc461 a
06d7edc961690a9e2ec406d64dcee57443441926 b
06723ca315e8f2aad83d4d7e3bfcb095456329c6 c
f7f3ff04c873ba573602e8ed24b88394284d1e7a d
9d355e1802fdb6a44199d7f798d4dfc59ab73244 e
00d3e0d524d7f44bd41ea0e12583e234b7db941c f
97a245266a28d75baffa43cc8fc19a8adcf89fe3 g
faa1c96d7789db06b216be5d989f8d809d626a32 h
a5e892fcb2eb4f05c5cb4f7f0adbf3dfe5bd29b5 i
dc1fd15e212c2e916591d931f81d0f94b0312067 (HEAD -> master) j
68583660582d9184f2ea29e9c74da00793775245 k
a68625cffd59e0bc6efda226042b81979985f77c l
8a224dcebdfc18b13001c600113104f20ea0334e m
4c1606853902e1e3711892e5515e51fee45dcfa2 n
4ecd26965d13266a51f807af3ea88382d5cf8ba8 o
612e28ee9a2a7e59e8da0dff2c0109f0c03fa216 p
31cf0b36a977fa7d2d16fb66465fd59f8a9e274a q
dcc685af381a520795bfafe8df667aeb2cf087e6 r
a2d39ff1e21541e0a638b39877ab19fee2c162d0 s
9a5775e3bc3194bb021a0687140f976f6751cee1 t
2b9535729525537811745456f8917e200effb44f u
f4813470ee84b740e398ed09a68121982f6d171e v
4d46ecbe227d191fc7be0260ff6ddb7c2bd6d759 w
aeb866d98e78fed9aef3e9cc721b21b9d051438c x
e1ac5f9505f75290833a28c6b27cff659f734b24 y
9b3db9df98df1a20da1b8dda1200c2d09603ee2d z
def782319c775c68698666eb5f3fe828a70bf7a6 h
006d44e9f1abb7bba7cb9bdc1dcba09b41a3297d i
1e7eb9b30a6402914344c5ef038076a26bdd4a65 j
2e55da67d626db00043eeddbe1204afd3e7e5790 k
65e868a89ff22412f939ffc71fea8c6cef016683 l
aadc31aa541da8fe0f25af5aec9a967f6c5172f1 m
ed865f5499640eac12cd0b0048a54224898cf998 n
7c51acdc3e57f3c28fdcc9ea5c3c368b29991d9b o
06770a789e66dddc1e87257a4f64ca42e9fed6cf p
8148c5cdaa920900eac1750c2453ead6446b2d08 q

Каждый из этих коммитов имеет файлы и данные, которые не относятся к желаемому subdirectory.

Как мне удалить эти файлы? Это где bfg пришел.

Используя флаг -p (--protect-blobs-from), я могу передать все ссылки в master.

bfg -D '*' -p "`git rev-list master | tr '\n' ','`"

При этом удаляются все файлы , которых нет в ветви master, из всей истории хранилища.

Однако! Если вы git log --all, вы по-прежнему видите все дополнительные коммиты без файлов в коммите.

Я ищу способ предоставить каталог для команды (например, ./src/project) и иметь репозиторий, содержащий только файлы и , относящиеся к файлам в этом каталоге.

Как я могу удалить эти коммиты без изменений файла?

Существует PR для bfg для команды --prune-empty. Это может помочь, но не является жизнеспособным решением, пока оно не объединено, и мне бы все равно нужно было использовать оба filter-branch и bfg.

Я также пытался clone эту ветку. В идеале был бы способ взять master и создать из него совершенно новый репозиторий только с этими refs.

Обновление:

Я расширил пост @ BlythMeister, есть одна проблема с командой filter-branch в , статья subdirectory-filter переместит содержимое subdirectory в голову. Поэтому я должен запустить его после.

DIR=./src/project
git filter-branch --index-filter 'git rm --cached -qr --ignore-unmatch -- . && git reset -q $GIT_COMMIT -- $DIR' --prune-empty -- --all
git filter-branch --subdirectory-filter $DIR

Answer 1

Вот метод, который я собрал, довольно быстрый. Он использует --subdirectory-filter, а затем клон / объединение для перемещения получает только содержимое и фиксирует из данной ветви не всю историю коммитов.

#!/usr/bin/env bash
# clone the original monorepo
git clone $REPO example
# change directory into monorepo
cd example
# remove origin for safety reasons
git remote remove origin
# filter the package / dir you want to be the new submodule / repo
git filter-branch --subdirectory-filter $SUBDIR
# change directory up one 
cd ../
# create a new directory
mkdir example-subdir
# change directory into the new directory
cd example-subdir
# git initialize
git init
# add the filtered monorepo as a remote 
git remote add source ../example
# fetch the source repo
git fetch source
# merge the master branch into this master branch
git merge source/master

Теперь у вас есть репозиторий с изменениями / фиксациями из этого конкретного каталога.

Answer 2

Некоторое время назад у меня возникла именно эта проблема, когда я хотел вытащить немного одного репо с историей, чтобы разделить один репо на 2.

Я не нашел ни одного хорошего руководства, но решил, как это сделать, и написал свое руководство в своем блоге здесь: https://www.blyth.me.uk/2017/06/07/migrating-multiple-folders-between-git-repositories/

Надеюсь, это поможет!