有时无法使用火花打开本机连接

2018-06-09 03:19:31

我正在Spark版本1.4和Cassandra 2.18上运行Spark工作。我从主人telnet和它的作品cassandra机器。有时候这项工作运行良好，有时我会得到以下例外。为什么有时候会发生这种情况？

“线程中的异常”main“org.apache.spark.SparkException：由于阶段失败导致作业中止：阶段0.0中的任务0失败4次，最近失败：阶段0.0中丢失的任务0.3（TID 7,172.28.0.162）： java.io.IOException：无法在{172.28.0.164}：9042处打开本地连接，位于com.datastax.spark.connector.cql.CassandraConnector $ .com $ datastax $ spark $ connector $ cql $ CassandraConnector $$ createSession（ CassandraConnector.scala：155）“

它有时也给我这个例外以及上面的例外：

导致：com.datastax.driver.core.exceptions.NoHostAvailableException：所有主机尝试查询失败（尝试：/172.28.0.164:9042（com.datastax.driver.core.TransportException：[/ 172.28.0.164： 9042]连线已关闭））

链接地址: http://www.djcxy.com/p/27469.html

上一篇: Unable to open native connection with spark sometimes

下一篇: How wordCount mapReduce jobs, run on hadoop yarn cluster with apache tez?