golang chuyển đổi iso8859-1 thành utf8

Question

Tôi đang cố gắng chuyển đổi chuỗi mã hóa ISO 8859-1 thành UTF-8.

Chức năng sau đây hoạt động với thử nghiệm của tôi có chứa dấu âm tiếng Đức, nhưng tôi không chắc chắn mã hóa nguồn rune (b) cast giả định. Nó có giả định một loại mã hóa mặc định hay không, ví dụ: ISO8859-1 hoặc là có cách nào để nói cho nó những gì mã hóa để sử dụng?

func toUtf8(iso8859_1_buf []byte) string { 
    var buf = bytes.NewBuffer(make([]byte, len(iso8859_1_buf)*4)) 
    for _, b := range(iso8859_1_buf) { 
     r := rune(b) 
     buf.WriteRune(r) 
    } 
    return string(buf.Bytes()) 
} 

Answer 1

rune là một bí danh cho int32, và khi nói đến mã hóa, một rune được giả định là có giá trị ký tự Unicode (điểm code). Vì vậy, giá trị b trong rune(b) phải là giá trị unicode. Đối với 0x00 - 0xFF, giá trị này giống với Latin-1, vì vậy bạn không phải lo lắng về nó.

Sau đó, bạn cần phải mã hóa các rune thành UTF8. Nhưng mã hóa này đơn giản được thực hiện bằng cách chuyển đổi một số []rune thành string.

Đây là một ví dụ về chức năng của bạn mà không sử dụng gói byte:

func toUtf8(iso8859_1_buf []byte) string { 
    buf := make([]rune, len(iso8859_1_buf)) 
    for i, b := range iso8859_1_buf { 
     buf[i] = rune(b) 
    } 
    return string(buf) 
} 

Answer 2

Hiệu quả của

r := rune(expression) 

là:

• Khai báo biến r với loại rune (bí danh cho int32).
• Khởi tạo biến số r với giá trị expresion.

Không có (tái) mã hóa có liên quan và nói cái nào nên được sử dụng tùy chọn chỉ có thể bằng cách viết/xử lý một cách rõ ràng mã hóa lại mã. May mắn thay, trong trường hợp này không cần mã hóa (re), Unicode kết hợp các mã của ISO 8859-1 theo cách tương đương với ASCII. (Nếu tôi đã kiểm tra chính xác here)