视图库配置说明
视图库配置说明#
一、端口说明#
宿主机端口 | 镜像端口 | 端口说明 |
---|---|---|
10022 | 22 | SSH 端口 |
9200 | 9200 | Elasticsearch 端口 |
9006 | 9006 | Minio 接口端口 |
9007 | 9007 | Minio 网页端口 |
13306 | 3306 | Mysql 端口 |
9870 | 9870 | Hdfs 网页端口 |
16010 | 16010 | Hbase 网页端口 |
18088 | 18088 | Spark 网页端口 |
8023 | 8023 | Stkgateway 网关端口 |
6035 | 6035 | Stkcore 程序端口 |
9006 | 9006 | minio 对象存储端口 |
9092 | 9092 | kafka端口 |
7180 | 7180 | cdh网页 |
二、视图库软件下载#
StkGW#
版本 | 更新说明 | 下载链接 |
---|---|---|
1.0.8 | 1、完善订阅跟通知部分内容 | stkgateway-1.0.8.RELEASE.tar.gz |
StkCore#
版本 | 更新说明 | 下载链接 |
---|---|---|
1.0.1 | 1、上传版本 | stkcore-1.0.1.RELEASE.tar.gz |
StkSpark#
版本 | 更新说明 | 下载链接 |
---|---|---|
1.0.2 | 1、上传版本 | stkspark-1.0.2-jar-with-dependencies.jar |
三、其他命令#
spark启动命令
spark-submit --class com.pqtel.spark.Main --master yarn --deploy-mode cluster --executor-memory 4G --num-executors 3 $app_dirname/$jar_name > $log_dirname/spark.log &
nohup spark-submit \
--class $spark_class \
--master local[2] \
--deploy-mode client \
--files $config_path \
--executor-memory 4G \
--num-executors 3 \
spark-submit \
--class com.pqtel.spark.Main \
--master spark://localhost:7077 \
--deploy-mode client \
--files config/stkspark.properties \
--driver-memory 4g \
--executor-memory 4G \
--num-executors 3 \
stkspark-1.0.2-jar-with-dependencies.jar