当前位置: 首页 > wzjs >正文

c2c网站有哪几个关键词热度分析

c2c网站有哪几个,关键词热度分析,建设银行网站个人中心,seo教程自学1,背景 在docker中部署spark服务和调用spark服务的微服务,微服务之间通过fegin调用 2,问题,docker容器中服务器来后,注册中心都有,调用服务也正常,但是调用spark启动任务后报错,报错…

1,背景
在docker中部署spark服务和调用spark服务的微服务,微服务之间通过fegin调用
2,问题,docker容器中服务器来后,注册中心都有,调用服务也正常,但是调用spark启动任务后报错,报错信息

exception in thread "main" org.apache.spark.SparkException: Invalid Spark URL: spark://HeartbeatReceiver@pinganan_datastudio_pinganan-scheduler-worker.1.n9zf1yk8znety8x2lw2pzn9a8.db2_net:35159at org.apache.spark.rpc.RpcEndpointAddress$.apply(RpcEndpointAddress.scala:66)at org.apache.spark.rpc.netty.NettyRpcEnv.asyncSetupEndpointRefByURI(NettyRpcEnv.scala:134)at org.apache.spark.rpc.RpcEnv.setupEndpointRefByURI(RpcEnv.scala:101)at org.apache.spark.rpc.RpcEnv.setupEndpointRef(RpcEnv.scala:109)at org.apache.spark.util.RpcUtils$.makeDriverRef(RpcUtils.scala:32)at org.apache.spark.executor.Executor.<init>(Executor.scala:184)at org.apache.spark.scheduler.local.LocalEndpoint.<init>(LocalSchedulerBackend.scala:59)at org.apache.spark.scheduler.local.LocalSchedulerBackend.start(LocalSchedulerBackend.scala:127)at org.apache.spark.scheduler.TaskSchedulerImpl.start(TaskSchedulerImpl.scala:183)at org.apache.spark.SparkContext.<init>(SparkContext.scala:501)at org.apache.spark.SparkContext$.getOrCreate(SparkContext.scala:2520)at org.apache.spark.sql.SparkSession$Builder$$anonfun$7.apply(SparkSession.scala:935)at org.apache.spark.sql.SparkSession$Builder$$anonfun$7.apply(SparkSession.scala:926)at scala.Option.getOrElse(Option.scala:121)at org.apache.spark.sql.SparkSession$Builder.getOrCreate(SparkSession.scala:926)at com.itcom.pinganan.standmodel.engine.spark.context.SparkContext.<init>(SparkContext.java:78)at com.itcom.pinganan.standmodel.engine.spark.context.SparkContext.getInstance(SparkContext.java:104)at com.itcom.pinganan.standmodel.engine.spark.context.SparkContext.getInstance(SparkContext.java:99)at com.itcom.pinganan.standmodel.engine.spark.Launcher.main(Launcher.java:49)at sun.reflect.NativeMethodAccessorImpl.invoke0(Native Method)at sun.reflect.NativeMethodAccessorImpl.invoke(NativeMethodAccessorImpl.java:62)at sun.reflect.DelegatingMethodAccessorImpl.invoke(DelegatingMethodAccessorImpl.java:43)at java.lang.reflect.Method.invoke(Method.java:498)at org.apache.spark.deploy.JavaMainApplication.start(SparkApplication.scala:52)at org.apache.spark.deploy.SparkSubmit.org$apache$spark$deploy$SparkSubmit$$runMain(SparkSubmit.scala:845)at org.apache.spark.deploy.SparkSubmit.doRunMain$1(SparkSubmit.scala:161)at org.apache.spark.deploy.SparkSubmit.submit(SparkSubmit.scala:184)at org.apache.spark.deploy.SparkSubmit.doSubmit(SparkSubmit.scala:86)at org.apache.spark.deploy.SparkSubmit$$anon$2.doSubmit(SparkSubmit.scala:920)at org.apache.spark.deploy.SparkSubmit$.main(SparkSubmit.scala:929)at org.apache.spark.deploy.SparkSubmit.main(SparkSubmit.scala)
25/06/05 15:34:43 INFO ShutdownHookManager: Shutdown hook called
25/06/05 15:34:43 INFO ShutdownHookManager: Deleting directory /tmp/spark-98ea3d8e-e10e-4766-8f54-e9e4bd4499d8
25/06/05 15:34:43 INFO ShutdownHookManager: Deleting directory /tmp/spark-abd80629-1d00-4f9d-8ab0-f337e6de09ab

3,分析
HeartbeatReceiver@pinganan_datastudio_pinganan-scheduler-worker.1.n9zf1yk8znety8x2lw2pzn9a8.db2_net这个是中pinganan-scheduler-worker这个服务在注册中心的虚拟域名,解析不到这个域名,
注册中心的服务信息```java
pinganan_datastudio_everdc-scheduler-worker.1.n9zf1yk8znety8x2lw2pzn9a8.db2_net:pinganan-scheduler-worker:8080 【11.10.33.67】

4,尝试将这个服务注册的ip在编排文件中指定这个服务的ip

      environment:- eureka.instance.prefer-ip-address=true- eureka.instance.ip-address=192.168.10.224- eureka.instance.non-secure-port=8080

5,运行后报错

调用5park执行引擎服务出错:
feign.RetryableException: no route to host [Host unreachable]executing PO5T http://pinganan-scheduler-worker/spark/executor/getSubmitResult?applicationПame=
pinganan-data-studio&modelRunld=12 at feign.FeignException.errorExecuting[FeignExcep
tion.java:249]~

6,分析上面问题
这样制定后,其他服务fegin调用失败,找不到这个服务,只能再改回去

7,尝试在spark提交任务中指定driver的ip,spark.driver.host=11.10.33.67
提交运行正常
8,但是如果重启docker服务后这个ip会变化,所以将这个服务注册的ip在编排文件中更改指定一下
将 - net:
- db2_net
替换为
networks:
db2_net:
ipv4_address: 11.10.13.67

9,重启任务后,提交任务正常


文章转载自:

http://vmMGeyOI.qqbjt.cn
http://9e0twKIT.qqbjt.cn
http://UancJ7aN.qqbjt.cn
http://X7x7SpCl.qqbjt.cn
http://iMqZI6TB.qqbjt.cn
http://dawjqpDp.qqbjt.cn
http://AlLRWQja.qqbjt.cn
http://DL1PSDU3.qqbjt.cn
http://GbI6MikN.qqbjt.cn
http://82NpNRS7.qqbjt.cn
http://k4jLvH2e.qqbjt.cn
http://8gHFyfvy.qqbjt.cn
http://3TU1z1s1.qqbjt.cn
http://LXXrVXwF.qqbjt.cn
http://pAEyEQ4G.qqbjt.cn
http://VysC1RCg.qqbjt.cn
http://or22RAw5.qqbjt.cn
http://yPOmQBeY.qqbjt.cn
http://zDatTEgU.qqbjt.cn
http://lvQj4xvn.qqbjt.cn
http://9OPOQ4mu.qqbjt.cn
http://UaNxjrvB.qqbjt.cn
http://a7mIr9jr.qqbjt.cn
http://c3ZTtjDR.qqbjt.cn
http://TeCeQ2TU.qqbjt.cn
http://lLXPXRV0.qqbjt.cn
http://63rtPrDj.qqbjt.cn
http://a42NZUiB.qqbjt.cn
http://MSF7DEv4.qqbjt.cn
http://47DKNF6l.qqbjt.cn
http://www.dtcms.com/wzjs/643318.html

相关文章:

  • 三位数的域名网站wordpress企业主题破解版
  • 怎样建设一个能上传数据的网站宁波优化网站排名软件
  • 相城建设监理有限公司网站网站维护工程师工资
  • 郫县网站制作建设网站方法有哪些内容
  • 网站开发的工作好做吗龙岩网站推广营销
  • 超值的扬中网站建设wordpress织梦帝国
  • 最专业的手机网站制作wordpress不用它的首页
  • 海阳做网站搭建网站架构怎么做
  • 怎样做网站的关键字搜索功能怎样搭建电商平台
  • 网站策划方案书网站开发这行怎么样
  • 网站建设管理及维护佛山全网优化
  • 如何做网站的维护工作做网站在图片里加文字
  • 个人兴趣网站设计网页设计培训机构推荐
  • 网页设计与制作长江职业学院做百度手机网站优化
  • 网站前端设计与制作pptwordpress调用自定义分类标题
  • 网站建设流程包括哪些运城姚孟网站建设
  • 纯净软件网站推荐淮南创业网
  • 想要建一个营销型网站 服务器的费用在多少苏州网站建设制度
  • 外贸商城网站资质做一个网站做少多少钱
  • 上海网站建设排名公司哪家好wordpress 评论提示
  • 单位建设网站申请个人做网站费用
  • 网站开发需要懂多少代码建设婚恋网站基本功能有哪些
  • 钓鱼网站 企业形象广西建设信息网官网
  • 成都需要网站制作高端网页设计欣赏科技感
  • 百度网站权重排行手机app制作多少钱
  • 自己创建网站赚钱房产中介 网站模板
  • 宾馆网站建设方案wordpress发布图片错位
  • 网页设计免费模板图片济宁seo
  • seo教程技术整站优化汽车行业网站建设比较
  • 汽车类网站怎让做淘宝网站