Использование Apache Kafka в качестве альтернативы FTP

Question

Я новичок в технологии с открытым исходным кодом. Я просто хочу знать, можем ли мы использовать Apache Kafka в качестве альтернативы нашему обычному FTP, где мы храним файлы в определенном месте, откуда конечный пользователь получает к ним доступ. Источником моих файлов будет в основном SAP HANA. Откуда я хочу отправить файлы в Kafka, откуда конечный пользователь сможет их использовать. Может кто-нибудь подсказать, с чего начать или перечислить шаги по достижению этого?

Answer 1

Кафка обычно не предназначена для больших данных, таких как файлы.Я полагаю, что вы хотели бы сделать некоторые операции с этими файлами.Вы можете передать ссылки на эти файлы в раздел Kafka и позволить своим потребителям читать данные из этих файлов, используя эти ссылки.

Я не знаю о SAP Hana.Но вас может заинтересовать SAP Hana Connector для Kafka

Answer 2

Кафка не замена 1: 1, нет.

Можете ли вы использовать Apache Kafka для интеграции потоковых данных между системами более масштабируемым и менее хрупким способом, чем FTP? Конечно. Вы можете просто поменять одно на другое? №

Взгляните на эти ресурсы, чтобы понять, для чего можно использовать Kafka и как его использовать:

• http://go.rmoff.net/devoxx18-embrace-the-anarchy
• http://go.rmoff.net/devoxx18-build-streaming-pipeline
• http://rmoff.dev/ksny19-no-more-silos