kafka+manager页面

政祝青827kafka哪个配置文件里有版本号 -
濮怪庭18231786072 ______ kafka没有像别的软件一样有,kafka -verison的命令,但是你可以查看kafka/libs 下的库文件,知道kafka的版本号:find ./libs/ -name \*kafka_\* | head -1 | grep -o '\kafka[^\n]*'[root@kafka1 kafka]# find ./libs/ -name \*kafka_\* | head -1 | grep -o '\kafka[^\n]*'kafka_2.9.2-0.8.1.1.jar.asc

政祝青827kafka apache 使用在什么场合 -
濮怪庭18231786072 ______ 1、Messaging 对于一些常规的消息系统,kafka是个不错的选择;partitons/replication和容错,可以使kafka具有良好的扩展性来和性能优势.不过到目前为止,我们应该很清楚认识到,kafka并没有提供JMS中的＂事务性＂＂消息传输担保(消息...

政祝青827kafka+spark+redis可否用来构建实时推荐引擎 -
濮怪庭18231786072 ______ 前面应该还有个数据生产者,比如flume.flume负责生产数据,发送至kafka.spark streaming作为消费者,实时的从kafka中获取数据进行计算.计算结果保存至redis,供实时推荐...

政祝青827nginx 日志可以显示到毫秒吗 -
濮怪庭18231786072 ______ 1、日志写入时间.默认为[$time_local] 2、$msec #当前的Unix时间戳,单位为秒,精度是毫秒. [$time_local-$msec] 3、日志显示 [1493346827.996] date -d @1493346827 Fri Apr 28 10:33:47 CST 2017

政祝青827如何为Kafka集群选择合适的主题和分区数量 -
濮怪庭18231786072 ______ 如何决定kafka集群中topic,partition的数量,这是许多kafka用户经常遇到的问题.本文列举阐述几个重要的决定因素,以提供一些参考.分区多吞吐量更高 一个话题topic的各个分区partiton之间是并行的.在producer和broker方面,写不同的分区...

政祝青827在spring怎么读取kafka文件 -
濮怪庭18231786072 ______ ound Channel Adapter用来发送消息到Kafka. 消息从Spring Integration Channel中读取. 你可以在Spring application context指定这个channel. 一旦配置好这个Channel,就可以利用这个Channel往Kafka发消息. 明显地,Spring Integration特定的消息发送给这个Adaptor,然后发送前在内部被转为Kafka消息.当前的版本要求你必须指定消息key和topic作为头部数据 (header),消息作为有载荷(payload). 例如

政祝青827Spark直连消费Kafka数据,防止数据丢失问题. -
濮怪庭18231786072 ______ 除非你将处理后的数据结果储存在支持事物的数据库中,比如这样:开启事物 保存偏移量 保存处理结果 结束事物 在这里事物(原子性)保证了数据处理和偏移量保存的原子性 否则无法保证真正避免的数据重复消费或数据丢失.看你更倾向于是可接受重复消费或者数据丢失

政祝青827怎么启用spark - sql报错 -
濮怪庭18231786072 ______ 怎么启用spark-sql报错/data/spark-1.4.0-bin-cdh4/bin/spark-sql --master spark://master:7077 --total-executor-cores 10 --executor-memory 1g --executor-cores 2 注:/data/spark-1.4.0-bin-cdh4/为spark的安装路径/data/spark-1.4.0-bin-cdh4/bin/spark-sql –help 查看启动选项

政祝青827key为null时Kafka会将消息发送给哪个分区 -
濮怪庭18231786072 ______ 当你编写kafka Producer时, 会生成KeyedMessage对象.KeyedMessage keyedMessage = new KeyedMessage(topicName, key, message) 这里的key值可以为空,在这种情况下, kafka会将这个消息发送到哪个分区上呢?依据Kafka官方的文...

政祝青827java客户端使用kafka时什么情况下使用kafka client和spring kafka? -
濮怪庭18231786072 ______ spring-kafka 是基于 java版的 kafka client与spring的集成,提供了 KafkaTemplate,封装了各种方法,方便操作 所以你使用spring的情况下,可以用spring-kafka,当然直接用kafka client也行