Làm thế nào để thay thế kết thúc dòng trong VIM

Question

Làm cách nào để thay thế tất cả các kết thúc dòng trong tệp lớn (> 100MB)? Tôi đã cố gắng để làm

:%s/\n/, /g

nhưng nó quá chậm.

Answer 1

Vì vậy, tôi đã đi qua và thử nghiệm/timed một số câu trả lời đã được đưa ra bởi những người khác, cộng với một câu trả lời python của riêng tôi. Đây là những gì tôi nhận:

tr:

> time tr "\n" "," <lines> line 
real 0m1.617s 
user 0m0.100s 
sys  0m1.520s 

python:

> time python -c 'import sys; print sys.stdin.read().replace("\n",", "),' <lines> line 
real 0m1.663s 
user 0m0.060s 
sys  0m1.610s 

awk:

> time awk '{printf("%s, ", $0)}' lines > line         
real 0m1.998s 
user 0m0.390s 
sys  0m1.600s 

perl:

> time perl -e 'while (<>) { chomp; print "$_, " }' lines > line 
real 0m2.100s 
user 0m0.590s 
sys  0m1.510s 

sed:

> time sed 's/$/, /g' lines > line            
real 0m6.673s 
user 0m5.050s 
sys  0m1.630s 

Dưới đây là file tôi đã sử dụng:

> ls -lh lines 
-rw-r--r-- 1 some one 101M 2010-03-04 19:54 lines 
> wc -l < lines 
1300000 
> head -n 3 < lines 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
The pretty pink puma pounced on the unsuspecting aardvark, the scientist watched. 
> head -n 1 < lines | wc -c 
82 

Nguyên timings được chụp trong Cygwin, họ hiện nay đã được thực hiện với cập nhật đầy đủ ubuntu 9.10. Ngoài ra, kích thước tệp văn bản đã được tăng lên 100 megs, với các dòng có chiều rộng 80 ký tự. Như bạn có thể thấy khá nhiều thứ khác ngoài sed là một ý tưởng hay.

Answer 2

Sử dụng tập lệnh Perl này để xem qua tệp của bạn; nó sẽ nhanh hơn việc giữ mọi thứ trong bộ nhớ với VIM. Chỉ cần đầu ra đường ống cho một tập tin mới.

#!/usr/local/bin/perl 

while (<>) { 
    $_ =~ s/\n/,/g; 
    print $_; 
} 

Answer 3

Bạn có phải thực hiện việc này không?

Có tiện ích Unix tuyệt vời làm bản dịch dựa trên ký tự. Nó được gọi là tr. Một số reference.

Trong trường hợp của bạn nó sẽ là:

 
tr "\n" "," < input_file > output_file 

Answer 4

:%s/$/, / theo sau là một :1,$j có thể nhanh hơn. Nếu không, hãy làm điều đó trong một tiện ích bên ngoài:

perl -e 'while (<>) { chomp; print "$_, " }' input_file > output_file 

awk '{printf("%s, ", $0)}' input_file > output_file 

Không biết đỉnh đầu của tôi sẽ nhanh nhất.

Answer 5

$ more file 
aaaa 
bbbb 
cccc 
dddd 
eeee 

$ awk 'NR>1{printf("%s, ", p)}{p=$0}END{print p}' file 
aaaa, bbbb, cccc, dddd, eeee 

$ sed -e :b -e '$!N;s/\n/, /;tb' file 

Answer 6

Công cụ tốt nhất là sed và bạn có thể sử dụng công cụ này với:! lệnh

nên sử dụng :!sed -e 's/\n/,/g' % > %.tmp ; cat %.tmp > % ; rm %.tmp'

Bạn cần tạo một file tmp với sự thay đổi trước khi tích hợp trong tập tin hiện tại của bạn