amazon-kinesis-client-python 提供了一个到 Amazon Kinesis Client Library(KCL)接口,它是 Amazon KCL for Java 的一部分。开发者可以用 Amazon KCL 建立可处理大规模流数据的分布式应用程序。Amazon KCL 照顾了很多与分布式计算相关的复杂任务。这个接口管理着 MultiLangDaemon 的交互,所以开发者可以专注于实现他们可执行的记录处理器。
示例代码:
#!env python from amazon_kclpy import kcl import json, base64 class RecordProcessor(kcl.RecordProcessorBase): def initialize(self, shard_id): pass def process_records(self, records, checkpointer): pass def shutdown(self, checkpointer, reason): pass if __name__ == "__main__": kclprocess = kcl.KCLProcess(RecordProcessor()) kclprocess.run()