2017 年 9月 24 日随笔档案 - 四叶草Grass - 博客园

2017年9月24日

摘要：运行 ./sbin/start-master.sh : SparkCommand:/usr/lib/jvm/java-8-openjdk-amd64/jre/bin/java -cp /home/server/spark/conf/:/home/server/spark/jars/*:/home/s 阅读全文

posted @ 2017-09-24 22:27 四叶草Grass 阅读(374) 评论(0) 推荐(0) 编辑

【Spark Java API】broadcast、accumulator

摘要：转载自：http://www.jianshu.com/p/082ef79c63c1 broadcast 官方文档描述： Broadcast a read-only variable to the cluster, returning a [[org.apache.spark.broadcast.Br 阅读全文

posted @ 2017-09-24 22:17 四叶草Grass 阅读(385) 评论(0) 推荐(0) 编辑

Kafka简介

摘要：转载自：http://www.cnblogs.com/luotianshuai/p/5206662.html Kafka初识 1、Kafka使用背景在a56爆大奖在线娱乐们大量使用分布式数据库、分布式计算集群的时候，是否会遇到这样的一些问题： a56爆大奖在线娱乐们想分析下用户行为（pageviews），以便a56爆大奖在线娱乐们设计出更好的广告位阅读全文

posted @ 2017-09-24 21:12 四叶草Grass 阅读(140) 评论(0) 推荐(0) 编辑

Kafka主要参数详解

摘要：转载自：http://www.cnblogs.com/weixiuli/p/6413109.html 一、相关参数配置 1、System ############################ System ############################# #唯一标识在集群中的ID，要求阅读全文

posted @ 2017-09-24 21:03 四叶草Grass 阅读(176) 评论(0) 推荐(0) 编辑

公告