Xóa nhiều tệp trong bộ lọc git-branch

Question

Tôi đang di chuyển một kho lưu trữ từ svn sang git.

Trong bước cuối cùng này, tôi muốn xóa hàng tấn tệp không cần thiết khỏi lịch sử.

Tôi đang cố gắng vào lệnh sau:

git filter-branch --prune-empty --index-filter \ 
    "for file in $(cat files); do git rm -rf --cached --ignore-unmatch ${file}; done" -f 

Nhưng nó nói rằng danh sách đối số quá dài.

tôi có thể viết lại như thế này:

for file in $(cat files); do 
    git filter-branch --prune-empty --index-filter \ 
    "git rm -rf --cached --ignore-unmatch ${file}" -f 
done 

Nhưng nó sẽ chạy tấn filter-branch lần, và lịch sử dài .. như vậy, nó sẽ mất quá nhiều thời gian.

Có cách nào nhanh hơn để lọc nhánh loại bỏ nhiều tệp không?

Answer 1

Tôi khuyên bạn nên sử dụng The BFG, một cách thay thế đơn giản hơn, nhanh hơn để git-filter-branch được thiết kế đặc biệt để xóa các tệp không mong muốn khỏi lịch sử Git.

Bạn đề cập trong your comment rằng các tập tin vấn đề là mã nhị phân thường lớn, và The BFG có một lựa chọn cụ thể để xử lý này - bạn nên cẩn thận làm theo usage instructions của BFG, nhưng phần cốt lõi là chỉ này:

$ java -jar bfg.jar --strip-blobs-bigger-than 10M my-repo.git 

Bất kỳ tệp nào có kích thước vượt quá 10MB (không có trong số cam kết mới nhất của bạn) sẽ bị xóa khỏi lịch sử của kho lưu trữ Git của bạn. Sau đó bạn có thể sử dụng git gc để làm sạch đi những dữ liệu chết:

$ git gc --prune=now --aggressive 

BFG là thường ít nhất 10-720x nhanh hơn chạy git-filter-branch, và thường dễ dàng hơn để sử dụng.

Tiết lộ đầy đủ: Tôi là tác giả của BFG Repo-Cleaner.