企业官网建设流程全解析

备案号放网站下面居中,关键词优化师,家装商城系统网站建设,南京网站专业制作文章目录核心概念部署交互架构数据逻辑模型核心概念 Kafka是一个事件流平台#xff0c; 结合了三大关键功能#xff1a; 发布#xff08;写入#xff09;和订阅#xff08;读取#xff09;事件流#xff0c;包括从其他系统持续导入/导出数据。持久可靠地存储事件流 结合了三大关键功能发布写入和订阅读取事件流包括从其他系统持续导入/导出数据。持久可靠地存储事件流存储时间长短随您所需。对正在发生的事件流进行处理或进行回顾性处理。并且所有这些功能都以分布式、高度可扩展、弹性、容错和安全的方式提供。事件流是指从数据库、传感器、移动设备、云服务和软件应用程序等事件源实时捕获数据并将这些数据以事件流的形式存储起来将这些事件流持久化存储以便后续检索实时以及回顾性地操作、处理和响应这些事件流并根据需要将事件流路由到不同的目标技术。因此事件流能够确保数据的持续流动和解读从而保证在正确的时间将正确的信息传递到正确的位置。部署交互架构Kafka由服务器和客户端组成并通过TCP网络协议进行通信服务端Kafka 以集群形式运行集群由一个或多个服务器组成。其中一些服务器构成存储层称为Broker其他服务器运行Kafka Connect以事件流的形式持续导入和导出数据从而将 Kafka 与您现有的系统例如关系数据库以及其他 Kafka 集群集成。客户端它们允许您编写分布式应用程序和微服务以并行、大规模且容错的方式读取、写入和处理事件流即使在网络问题或机器故障的情况下也能正常运行。数据逻辑模型事件事件记录了世界上或您的业务中“发生了某些事情”这一事实也被称为记录或消息。当您向 Kafka 读取或写入数据时您是以事件的形式进行的。从概念上讲事件包含键、值、时间戳和可选的元数据标头。生产者生产者是向 Kafka 发布写入事件的客户端应用程序。消费者消费者则是订阅读取和处理这些事件的应用程序。主题事件被组织并持久存储在主题中。简单来说主题类似于文件系统中的文件夹而事件则是该文件夹中的文件。Kafka 中的主题始终是多生产者和多订阅者的一个主题可以有零个、一个或多个生产者向其写入事件也可以有零个、一个或多个消费者订阅这些事件。主题中的事件可以根据需要多次读取并且事件在被使用后不会被删除相反您可以通过每个主题的配置设置来定义 Kafka 应该保留事件的时间之后旧事件将被丢弃。Kafka 的性能与数据大小几乎无关因此长时间存储数据完全没有问题。分区主题是分区的这意味着一个主题分布在位于不同 Kafka Broker上的多个“存储桶”中。这种分布式数据放置对于可扩展性至关重要因为它允许客户端应用程序同时从多个Broker读取和写入数据。当一个新事件发布到主题时它实际上会被追加到该主题的某个分区中。具有相同事件键类似标签的概念的事件会被写入同一个分区Kafka保证给定主题分区的任何消费者始终会按照写入顺序读取该分区中的事件。为了确保数据的容错性和高可用性每个主题都可以进行复制即使跨越不同的地理区域或数据中心这样就能保证始终有多个代理服务器拥有数据副本以应对可能出现的故障、代理服务器维护等情况。常见的生产环境配置是复制因子为 3也就是说始终会有三个数据副本。这种复制是在主题分区级别执行的。