视图库配置说明

视图库配置说明 #

一、端口说明 #

宿主机端口	镜像端口	端口说明
10022	22	SSH 端口
9200	9200	Elasticsearch 端口
9006	9006	Minio 接口端口
9007	9007	Minio 网页端口
13306	3306	Mysql 端口
9870	9870	Hdfs 网页端口
16010	16010	Hbase 网页端口
18088	18088	Spark 网页端口
8023	8023	Stkgateway 网关端口
6035	6035	Stkcore 程序端口
9006	9006	minio 对象存储端口
9092	9092	kafka端口
7180	7180	cdh网页

二、视图库软件下载 #

StkGW #

版本	更新说明	下载链接
1.0.8	1、完善订阅跟通知部分内容	stkgateway-1.0.8.RELEASE.tar.gz

StkCore #

版本	更新说明	下载链接
1.0.1	1、上传版本	stkcore-1.0.1.RELEASE.tar.gz

StkSpark #

版本	更新说明	下载链接
1.0.2	1、上传版本	stkspark-1.0.2-jar-with-dependencies.jar

三、其他命令 #

spark启动命令

spark-submit --class com.pqtel.spark.Main  --master yarn --deploy-mode cluster  --executor-memory 4G --num-executors 3 $app_dirname/$jar_name > $log_dirname/spark.log &
  nohup spark-submit \
  --class $spark_class  \
  --master local[2] \
  --deploy-mode client  \
  --files $config_path \
  --executor-memory 4G \
  --num-executors 3 \
  
  
 spark-submit \
    --class com.pqtel.spark.Main  \
    --master spark://localhost:7077 \
    --deploy-mode client \
    --files config/stkspark.properties \
    --driver-memory 4g \
    --executor-memory 4G \
    --num-executors 3 \
    stkspark-1.0.2-jar-with-dependencies.jar