当前位置:K88软件开发文章中心大数据Apache Kafka → 文章列表
文章标题关闭所有内容预览 | 展开所有内容预览
  • Apache Kafka 相关讨论 [内容预览] 0 | 2019-01-26 10:05:00
    由bjcl创建,youj最后一次修改2016-12-27ApacheKafka起源于LinkedIn,后来在2011年成为开源Apache项目,然后在2012年成为First-classApache项目。Kafka是用Scala和Java编写的。ApacheKafka是基于发布订阅的容错消息系统。它是快速,可扩展和设计...

    [阅读全文]

  • Apache Kafka 相关资源 [内容预览] 0 | 2019-01-26 10:04:59
    由bjcl创建,youj最后一次修改2016-12-27以下资源包含有关ApacheKafka的其他信息。请使用它们获得更多的深入的知识。ApacheKafka相关链接ApacheKafka官方网站-ApacheKafka官方网站ApacheKafkaWiki-ApacheKafka的维基百科参考ApacheKafka...

    [阅读全文]

  • Apache Kafka 快速指南 [内容预览] 0 | 2019-01-26 10:04:58
    由bjcl创建,youj最后一次修改2016-12-27ApacheKafka-简介在大数据中,使用了大量的数据。关于数据,我们有两个主要挑战。第一个挑战是如何收集大量的数据,第二个挑战是分析收集的数据。为了克服这些挑战,您必须需要一个消息系统。Kafka专为分布式高吞吐量系统而设计。Kafka往往工作得很好,作为一个...

    [阅读全文]

  • Apache Kafka 应用 [内容预览] 0 | 2019-01-26 10:04:57
    由bjcl创建,youj最后一次修改2016-12-27Kafka支持许多当今最好的工业应用。我们将在本章中简要介绍Kafka最为显着的应用。TwitterTwitter是一种在线社交网络服务,提供发送和接收用户推文的平台。注册用户可以阅读和发布tweet,但未注册的用户只能阅读tweets。Twitter使用Stor...

    [阅读全文]

  • Apache Kafka 工具 [内容预览] 0 | 2019-01-26 10:04:55
    由bjcl创建,youj最后一次修改2016-12-27Kafka在“org.apache.kafka.tools。"下打包的工具。工具分为系统工具和复制工具。系统工具可以使用运行类脚本从命令行运行系统工具。语法如下-bin/kafka-run-class.shpackage.class--options下面提到一些系...

    [阅读全文]

  • Apache Kafka 实时应用程序(Twitter) [内容预览] 0 | 2019-01-26 10:04:54
    由bjcl创建,youj最后一次修改2016-12-27让我们分析一个实时应用程序,以获取最新的TwitterFeed和其标签。早些时候,我们已经看到了Storm和Spark与Kafka的集成。在这两种情况下,我们创建了一个Kafka生产者(使用cli)向Kafka生态系统发送消息。然后,storm和spark集成通过...

    [阅读全文]

  • Apache Kafka 与Spark的集成 [内容预览] 0 | 2019-01-26 10:04:53
    由bjcl创建,youj最后一次修改2016-12-27在本章中,我们将讨论如何将ApacheKafka与SparkStreamingAPI集成。关于SparkSparkStreamingAPI支持实时数据流的可扩展,高吞吐量,容错流处理。数据可以从诸如Kafka,Flume,Twitter等许多源中提取,并且可以使用...

    [阅读全文]

  • Apache Kafka 整合 Storm [内容预览] 0 | 2019-01-26 10:04:52
    由bjcl创建,youj最后一次修改2016-12-27在本章中,我们将学习如何将Kafka与ApacheStorm集成。关于StormStorm最初由NathanMarz和BackType的团队创建。在短时间内,ApacheStorm成为分布式实时处理系统的标准,允许您处理大量数据。Storm是非常快的,并且一个基准...

    [阅读全文]

  • Apache Kafka 消费者组示例 [内容预览] 0 | 2019-01-26 10:04:51
    由bjcl创建,youj最后一次修改2016-12-27消费群是多线程或多机器的ApacheKafka主题。消费者群体消费者可以使用相同的group.id加入群组一个组的最大并行度是组中的消费者数量←不是分区。Kafka将主题的分区分配给组中的使用者,以便每个分区仅由组中的一个使用者使用。Kafka保证消息只能被组中的...

    [阅读全文]

  • Apache Kafka 简单生产者示例 [内容预览] 0 | 2019-01-26 10:04:50
    由bjcl创建,youj最后一次修改2016-12-27让我们使用Java客户端创建一个用于发布和使用消息的应用程序。Kafka生产者客户端包括以下API。KafkaProducerAPI让我们了解本节中最重要的一组Kafka生产者API。KafkaProducerAPI的中心部分是KafkaProducer类。Kaf...

    [阅读全文]

  • Apache Kafka 基本操作 [内容预览] 0 | 2019-01-26 10:04:49
    由bjcl创建,youj最后一次修改2016-12-27首先让我们开始实现单节点单代理配置,然后我们将我们的设置迁移到单节点多代理配置。希望你现在可以在你的机器上安装Java,ZooKeeper和Kafka。在迁移到KafkaClusterSetup之前,首先需要启动ZooKeeper,因为KafkaCluster使用...

    [阅读全文]

  • Apache Kafka 安装步骤 [内容预览] 0 | 2019-01-26 10:04:47
    由bjcl创建,youj最后一次修改2016-12-27以下是在机器上安装Java的步骤。步骤1-验证Java安装希望你已经在你的机器上安装了java,所以你只需使用下面的命令验证它。$java-version如果java在您的机器上成功安装,您可以看到已安装的Java的版本。步骤1.1-下载JDK如果没有下载Java...

    [阅读全文]

  • Apache Kafka 工作流程 [内容预览] 0 | 2019-01-26 10:04:46
    由bjcl创建,youj最后一次修改2016-12-27到目前为止,我们讨论了Kafka的核心概念。让我们现在来看一下Kafka的工作流程。Kafka只是分为一个或多个分区的主题的集合。Kafka分区是消息的线性有序序列,其中每个消息由它们的索引(称为偏移)来标识。Kafka集群中的所有数据都是不相连的分区联合。传入消...

    [阅读全文]

  • Apache Kafka 集群架构 [内容预览] 0 | 2019-01-26 10:04:45
    由bjcl创建,youj最后一次修改2016-12-27看看下面的插图。它显示Kafka的集群图。下表描述了上图中显示的每个组件。S.No组件和说明1Broker(代理)Kafka集群通常由多个代理组成以保持负载平衡。Kafka代理是无状态的,所以他们使用ZooKeeper来维护它们的集群状态。一个Kafka代理实例可...

    [阅读全文]

  • Apache Kafka 基础 [内容预览] 0 | 2019-01-26 10:04:44
    由bjcl创建,Alma最后一次修改2016-12-27在深入了解Kafka之前,您必须了解主题,经纪人,生产者和消费者等主要术语。下图说明了主要术语,表格详细描述了图表组件。在上图中,主题配置为三个分区。分区1具有两个偏移因子0和1.分区2具有四个偏移因子0,1,2和3.分区3具有一个偏移因子0.副本的id与承载它的...

    [阅读全文]

  • Apache Kafka 概述 [内容预览] 0 | 2019-01-26 10:04:43
    由bjcl创建,youj最后一次修改2016-12-27在大数据中,使用了大量的数据。关于数据,我们有两个主要挑战。第一个挑战是如何收集大量的数据,第二个挑战是分析收集的数据。为了克服这些挑战,您必须需要一个消息系统。Kafka专为分布式高吞吐量系统而设计。Kafka往往工作得很好,作为一个更传统的消息代理的替代品。与...

    [阅读全文]

 Apache Kafka   16   30   1/1页   首页   1   尾页   GO