首页 >>  正文

kafka+配置

来源:baiyundou.net   日期:2024-09-24

邵天使3314kafka 怎么创建group -
傅项戴19858902636 ______ innodb_log_file_size = 500M #事物日志大小 #innodb_log_file_size =100M innodb_log_files_in_group = 2 #两组事物日志 innodb_log_group_home_dir = /longxibendi/mysql/mysql/var/#日志组

邵天使3314kafka 部署方式是独立还是嵌入 -
傅项戴19858902636 ______ kafka的部署模式为3种模式 1)单broker模式 2)单机多broker模式 (伪集群) 3)多机多broker模式 (真正的集群模式)

邵天使3314怎么彻底删除kafka的topic,然后重建 -
傅项戴19858902636 ______ server.properties 中添加delete.topic.enable=true 执行D:\Developer\kafka_2.10-0.10.0.0\bin\windows>kafka-topics.bat --zookeeper 127.0.0.1:2181 --delete --topic TEST-TOPIC 执行zookeeper-server-stop.bat,后在重启kafka 重新发送消息即可,会自动根据配置的partitions重建 注意:不执行1步骤,就是假删除.

邵天使3314如何将kafka数据导入到spark streaming -
傅项戴19858902636 ______ 我这边的应用是这样的: ①采集程序:使用avro方式将自定义对象序列化成字节流存入Kafka ②spark streaming:获取Kafka中的字节流,使用avro反序列化为自定义对象

邵天使3314kafka+spark+redis可否用来构建实时推荐引擎 -
傅项戴19858902636 ______ kafka+spark+redis可否用来构建实时推荐引擎 程序如下:void inv(int *x,int n) /*形参x为指针变量*/ { int *p,temp,*i,*j,m=(n-1)/2; i=x;j=x+n-1;p=x+m; for(;i{temp=*i;*i=*j;*j=temp;} return; } main() {int i,a[10]={3,7,9,11,0,6,7,5,4,2}; printf("The original ...

邵天使3314kafka batch.size 设置多大合适 -
傅项戴19858902636 ______ 使用bulk API 初次索引的时候,把 replica 设置为 0 增大 threadpool.index.queue_size 增大 indices.memory.index_buffer_size 增大 index.translog.flush_threshold_ops 增大 index.translog.sync_interval 增大 index.engine.robin.refresh_interval

邵天使3314kafka 11 client 兼容 0.8的吗 -
傅项戴19858902636 ______ 因为0.9 之后的kafka使用了新的consumer API进行消费,配置bootstrap-server.旧API虽然兼容,但是会被逐渐取代.参照官方文档2.2 Consumer API As of the 0.9.0 release we have added a new Java consumer to replace our existing high-level ...

邵天使3314spark 怎么处理kafka中的json的数据 -
傅项戴19858902636 ______ 1、KafkaUtils.createDstream 构造函数为KafkaUtils.createDstream(ssc, [zk], [consumer group id], [per-topic,partitions] ) 使用了receivers来接收数据,利用的是Kafka高层次的消费者api,对于所有的receivers接收到的数据将会保存在spark ...

(编辑:自媒体)
关于我们 | 客户服务 | 服务条款 | 联系我们 | 免责声明 | 网站地图 @ 白云都 2024