回答情况：
提问时间：
问题标签：
0回答
spark executor容器内存如何规划？
linux、容器、缓存、spark
spark executor内存分为3部分,执行内存/缓存内存/程序内存，如何合理的分配服务器内存给这3个部分？为什么？
浏览 208提问于2021-12-24
0回答
org.apache.spark.executor.CoarseGrainedExecutor？
linux、腾讯云测试服务、yarn、spark
最近遇到一个问题org.apache.spark.executor.CoarseGrainedExecutor 我通过java调用yarn api去提交spark任务。但是在生产环境（有kerberos认证）中，同一份代码，通过yarn api去提交任务就出现问题，问题的日志主要是executor container启动不起来。。通过日志查看到APPmaster已经启动，但是在启动executor的container时报出 org.apache.spark.executor.CoarseGrained
浏览 359提问于2020-05-26
0回答
spark的executor容器资源如何规划？
linux、容器、spark
spark运行的进程需要在executor容器中运行，executor容器的数量、CPU资源、内存资源如何规划？
浏览 204提问于2021-12-24
0回答
spark容器运行任务数量如何优化？
linux、容器、spark
1、spark是线程级别的任务，那么executor容器内应该运行多少个任务（线程）？如何进行考虑？
2、executor容器内运行的任务（线程）较多会出现什么问题？
浏览 172提问于2021-12-24
0回答
k8s配置spark.kubernetes.driver.podTemplateFile不生效 ？
http、容器、kubernetes、spark、大数据
问题： spark on k8s 配置 --conf spark.kubernetes.driver.podTemplateFile 参数不生效，但是指定spark.kubernetes.executor.podTemplateFilecluster \--class org.apache.spark.examples.streaming.HdfsWordCount \--conf spark.kubernetes.driver.podTemplateF
浏览 528提问于2021-12-24
0回答
为什么TencentKona-8 协程池堵塞不执行任何任务？
factory、scheduler、task、线程池、协程
大概协程池创建如下：2、通过指定scheduler的方式创建ThreadFactory，并创建10个协程的协程池。ThreadFactory factory = Thread.ofVirtual().scheduler(executor).name("vt-" + task.getThreadNamePrefix(
浏览 217提问于2023-04-03
0回答
Spark 3.x中借助hdfs分发python环境出现问题？
python、打包、spark、apache-spark、hdfs
/PyEnv/test_env/bin/python3.6 \--num-executors 20 \--executor-memory/PyEnv/test_env/lib/python3.6/site-packages \--num-executors 20 \--ex
浏览 225提问于2023-05-18
0回答
sparkstreaming产生的日志，越来越大，如何定期删除？？
官方文档、消息队列 CKafka 版
sparkstreaming一直运行，hdfs://***:9000/spark-log 下的log文件很大，spark-default.conf下配置 spark.executor.logs.rolling.time.interval
浏览 326提问于2018-07-13
0回答
spark sql报错了，本地没报错？？
java、scala、linux、编程算法、spark
ShuffleMapTask.scala:55) at org.apache.spark.executor.Executor$TaskRunner$$anonfun$11.apply(Executor.scala:407) at org.apache.spark.<
浏览 797提问于2020-03-09
0回答
jenkins 从节点拉取git失败bad line length character: Acti？
git、github、ssh、jenkins、windows
FreeStyleBuild.java:43) at hudson.model.Executor.run(Executor.java:429) at hudson.model.ResourceC
浏览 462提问于2022-12-20
0回答
mybatis在linux 莫名Error NullPointerException？
java、servlet、android、access、网络安全
io.shardingsphere.shardingjdbc.jdbc.core.statement.ShardingPreparedStatement.execute(ShardingPreparedStatement.java:139) at org.apache.ibatis.executor.statement.RoutingS
浏览 1144提问于2020-03-06
1回答
rocketMQ5事务消息,消费提示RejectedExecutionException，怎么解决？
java、消息队列 RocketMQ 版、grpc、rocketmq、threadpoolexecutor
org.apache.rocketmq.shaded.io.grpc.internal.ManagedChannelImpl$2.uncaughtException 264736 grpc-default-executor
浏览 334提问于2024-07-10
1回答
mysql8.4不稳定，报错SQLSTATE(08S01), ErrorCode(1160)？
java、apache、com、invoke、mysql
$Proxy914.execute(Unknown Source) at org.apache.ibatis.executor.statement.RoutingStatementHandler.query$Proxy913.query(Unknown Source)
at org.apache.ibat
浏览 823提问于2026-03-03
1回答
seatunnel mysql 同步数据，怎么解决？
mysql、数据、同步
com.hazelcast.spi.impl.operationexecutor.impl.OperationThread.executeRun(OperationThread.java:123) at com.hazelcast.internal
浏览 1036提问于2024-01-12
1回答
如何配置Spark 的log4j的日志？
专用宿主机、日志数据、yarn、spark、大数据
\--conf "spark.executor.extraJavaOptions
浏览 1978提问于2020-05-28
1回答
oozie4.1.0怎么调用spark2 ？
oozie、配置
spark.sql.queryExecutionListeners, spark.dynamicAllocation.enabled, spark.dynamicAllocation.minExecutors, spark.executor.extraLibraryPath--conf --executor-memory1G
--total-<em
浏览 1307提问于2018-06-16
1回答
红米K60至尊版超广角镜头没法捕获图像？
facebook-c#-sdk、配置、摄像头
= new SessionConfiguration(SessionConfiguration.SESSION_REGULAR,outputConfigsAll, AsyncTask.SERIAL_EXECUTOR
浏览 515提问于2023-12-18
0回答
WEB应用托管,npm i 的时候出现这个错误,是什么原因呢？
.net、网站、npm
page=artifacts',[2022-05-04 11:17:58] EXECUTOR_NUMBER:
浏览 362提问于2022-05-04
腾讯云开发者
Copyright © 2013 - 2026 Tencent Cloud. All Rights Reserved. 腾讯云 版权所有
深圳市腾讯计算机系统有限公司 ICP备案/许可证号：粤B2-20090059 
粤公网安备44030502008569号
腾讯云计算（北京）有限责任公司 京ICP证150476号 | 京ICP备11018762号