发表评论取消回复
相关阅读
相关 [Spark、hadoop]Spark Streaming整合kafka实战
目录 一.KafkaUtils.createDstream方式 二.KafkaUtils.createDirectStream方式 -------------------
相关 遇到问题----hadoop组件---spark实战-----spark on k8s---hail--Expected n part files but found 0
遇到问题 在jupyter notebook中使用hail进行操作,使用命令如下: import hail as hl mt = hl.import_v
相关 hadoop组件---spark实战-----airflow----调度工具airflow定时运行任务的理解
我们在前面已经初步了解了 airflow: [hadoop组件—spark实战-----airflow----调度工具airflow的介绍和使用示例][hadoop_spar
相关 hadoop组件---spark实战-----airflow----调度工具airflow部署到k8s中使用
在之前的文章中 我们已经了解了airflow 和 它的工作原理。 [hadoop组件—spark实战-----airflow----调度工具airflow的介绍和使用示例][
相关 hadoop组件---spark实战-----airflow----调度工具airflow的介绍和使用示例
Airflow是什么 Airflow是一个可编程,调度和监控的工作流平台,基于有向无环图(DAG),airflow可以定义一组有依赖的任务,按照依赖依次执行。airflo
相关 hadoop组件---spark实战----遇到问题---executor无法删除
遇到问题----executor无法删除一直重启序号自增 如下: [zzq@localhost spark-2.4.4-bin-hadoop2.7]$ kube
相关 hadoop组件---spark实战----spark on k8s模式k8s原生方式---cluster mode调用运行spark程序
我们在上篇文章中已经记录了 如果 安装spark on k8s模式k8s原生方式—cluster mode。 [hadoop组件—spark实战----spark on k8
相关 hadoop组件---spark实战----spark on k8s模式Spark Standalone on Docker方式安装spark
在本文的例子中,你将使用 Kubernetes 和 Docker 创建一个功能型 Apache Spark 集群。 你将使用 Spark standalone 模式 安装一个
相关 Spark的Lost executor错误问题
Spark的Lost executor错误问题 问题一 问题二 问题一 19/06/17 09:50:52 WARN cluster.Yarn
相关 Hadoop组件
---------Hive--------------------------zooKeeper-------------------------------kafka----
还没有评论,来说两句吧...