Có cách nào để đặt id tài liệu ElasticSearch theo cách thủ công khi chèn qua AWS Kinesis Firehose không?

Question

Tôi có một luồng AWS Kinesis Firehose được thiết lập để nạp dữ liệu vào một cụm Tìm kiếm Đàn hồi AWS và tôi có thể chèn tài liệu thành công bằng cách gửi chúng tới Dòng Firehose, tải chúng vào ElasticSearch.

Nhưng tôi muốn có thể chỉ định/đặt giá trị id của tài liệu một cách thủ công khi gửi nó tới Dòng Firehose. Tôi đang sử dụng thành công SDK AWS PHP để gửi dữ liệu đến Firehose, tôi không thể tìm ra liệu có cách nào để đặt thủ công tài liệu là id của tài liệu hay không.

$firehoseParams = [ 
    'DeliveryStreamName' => 'myStreamName', // REQUIRED 
    'Record' => [ // REQUIRED 
     'Data' => '{"json_encoded": "data", ...}', // REQUIRED 
    ], 
]; 
$firehoseResult = $this->_firehoseClient->putRecord($firehoseParams); 

Tôi đã thử đặt id, _id, và esDocumentId giá trị trong dữ liệu JSON, tất cả không có kết quả.

Bất kỳ ai có ý tưởng nào?

Answer 1

Chúng tôi có cùng một vấn đề chính xác và tôi rất tiếc phải nói rằng hiện tại không có giải pháp tốt. Amazon hỗ trợ đã xác nhận rằng họ đã nhận được nhiều yêu cầu cho điều này và họ hiện đang làm việc trên một giải pháp.