2020年7月31日
Spark系列之工具Jupyter
摘要： 下载地址：https://www.anaconda.com/products/individual ，需要注册用户 配置安装bzip2 yum -y install bzip2 1、bash Anaconda3-2020.07-Linux-x86_64.sh 2、回车通过 3、配置环境变量 expo 阅读全文
posted @ 2020-07-31 17:42 Wind_LPH 阅读(392) 评论(0) 推荐(0) 编辑
Spark系列之体系结构
摘要： Spark的体系结构如下图。基本认知入门。 数据接口访问层是第一层绿色部分，包含Spark Streming、Spark SQL、MLIB和GraphX。 数据核心处理是第二层橙色，主要包含Spark Core。 数据的存储集中在第三层天蓝色，以HDFS、Hive、S3等为主。 任务调度则集中在第四 阅读全文
posted @ 2020-07-31 09:38 Wind_LPH 阅读(426) 评论(0) 推荐(0) 编辑