3.1.7版本be节点无法起来

两套集群一套A库3.1.4一套B库3.1.7版本,两套集群之间通过jdbc catalog方式访问
中午升级A库3.1.4版本为3.1.7版本
B库节点异常,停掉无法起来
报错信息如下

show backends 和 show frontends 结果请发下,be无法启动的话请发下be.out

192.168.8.188_9010_1679309079772 192.168.8.188 9010 8030 9030 9020 LEADER 962760352 false true 1413931469 2024-01-26 13:59:01 true 2024-01-18 21:17:52 3.1.7-7e897e2
192.168.8.187_9010_1679309079144 192.168.8.187 9010 8030 9030 9020 FOLLOWER 962760352 false true 1413931462 2024-01-26 13:59:01 true 2024-01-18 21:19:03 3.1.7-7e897e2
192.168.8.186_9010_1671432358955 192.168.8.186 9010 8030 9030 9020 FOLLOWER 962760352 false true 1413931462 2024-01-26 13:59:01 true 2024-01-18 21:16:15 3.1.7-7e897e2
10002 192.168.8.196 9050 9060 8040 8060 2024-01-18 20:58:49 2024-01-26 13:05:36 false false false 2299 159.854 GB 5.389 TB 6.871 TB 21.57 % 23.16 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.545 TB 2.82 % 80 0 23.38 % 0.0 %
10003 192.168.8.197 9050 9060 8040 8060 2024-01-18 21:04:52 2024-01-26 13:05:51 false false false 4435 158.270 GB 5.659 TB 6.871 TB 17.64 % 18.30 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.814 TB 2.66 % 80 0 23.60 % 1.0 %
10004 192.168.8.198 9050 9060 8040 8060 2024-01-18 21:02:36 2024-01-26 13:06:08 false false false 4418 156.396 GB 5.594 TB 6.871 TB 18.59 % 20.06 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.747 TB 2.66 % 80 2 23.63 % 3.7 %
10005 192.168.8.199 9050 9060 8040 8060 2024-01-18 21:05:12 2024-01-26 13:06:26 false false false 277 152.490 GB 4.994 TB 6.871 TB 27.32 % 31.28 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.143 TB 2.90 % 80 3 23.94 % 1.5 %
10006 192.168.8.200 9050 9060 8040 8060 2024-01-18 21:05:12 2024-01-26 13:06:42 false false false 2374 155.451 GB 5.579 TB 6.871 TB 18.81 % 19.35 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.731 TB 2.65 % 80 4 23.62 % 0.9 %
10007 192.168.8.201 9050 9060 8040 8060 2024-01-18 21:05:53 2024-01-26 13:06:59 false false false 223 157.530 GB 5.634 TB 6.871 TB 18.00 % 20.30 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.788 TB 2.66 % 80 4 23.44 % 2.2 %
10008 192.168.8.202 9050 9060 8040 8060 2024-01-18 21:04:07 2024-01-26 13:07:16 false false false 239 159.733 GB 5.348 TB 6.871 TB 22.16 % 23.88 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.504 TB 2.83 % 80 4 23.52 % 0.1 %
10009 192.168.8.203 9050 9060 8040 8060 2024-01-18 21:06:09 2024-01-26 13:07:36 false false false 209 155.302 GB 5.535 TB 6.871 TB 19.44 % 20.86 % java.net.ConnectException: Connection refused (Connection refused) 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 13:15:25”} 5.687 TB 2.67 % 80 5 23.48 % 2.6 %
10010 192.168.8.204 9050 9060 8040 8060 2024-01-18 21:07:47 2024-01-26 14:02:11 true false false 12758 231.529 GB 5.682 TB 6.871 TB 17.31 % 19.74 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:25”} 5.908 TB 3.83 % 80 0 22.08 % 0.4 %
10011 192.168.8.205 9050 9060 8040 8060 2024-01-18 21:07:12 2024-01-26 14:02:11 true false false 12592 235.247 GB 5.540 TB 6.871 TB 19.38 % 21.12 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:47”} 5.770 TB 3.98 % 80 0 22.27 % 0.1 %
10012 192.168.8.206 9050 9060 8040 8060 2024-01-18 21:07:37 2024-01-26 14:02:11 true false false 12478 233.267 GB 5.543 TB 6.871 TB 19.33 % 20.80 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:02:07”} 5.771 TB 3.95 % 80 0 22.10 % 1.4 %
10013 192.168.8.207 9050 9060 8040 8060 2024-01-18 21:07:57 2024-01-26 14:02:11 true false false 12760 240.172 GB 5.697 TB 6.871 TB 17.10 % 17.67 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:02:07”} 5.931 TB 3.95 % 80 0 22.17 % 0.1 %
10014 192.168.8.208 9050 9060 8040 8060 2024-01-18 21:09:26 2024-01-26 14:02:11 true false false 12369 236.520 GB 5.694 TB 6.871 TB 17.13 % 19.50 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:02:04”} 5.925 TB 3.90 % 80 0 22.05 % 0.0 %
10015 192.168.8.209 9050 9060 8040 8060 2024-01-18 21:07:32 2024-01-26 14:02:11 true false false 12260 228.086 GB 5.710 TB 6.871 TB 16.90 % 18.89 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:32”} 5.933 TB 3.75 % 80 1 22.10 % 0.0 %
10016 192.168.8.210 9050 9060 8040 8060 2024-01-18 21:07:47 2024-01-26 14:02:11 true false false 12567 231.879 GB 5.633 TB 6.871 TB 18.01 % 19.00 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:26”} 5.860 TB 3.86 % 80 0 22.15 % 0.1 %
10017 192.168.8.211 9050 9060 8040 8060 2024-01-18 21:10:26 2024-01-26 14:02:11 true false false 12435 232.951 GB 5.504 TB 6.871 TB 19.90 % 23.81 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:28”} 5.732 TB 3.97 % 80 0 22.11 % 1.3 %
10018 192.168.8.212 9050 9060 8040 8060 2024-01-18 21:10:01 2024-01-26 14:02:11 true false false 12915 233.057 GB 5.540 TB 6.871 TB 19.37 % 20.43 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:28”} 5.768 TB 3.95 % 80 0 22.28 % 0.1 %
10019 192.168.8.213 9050 9060 8040 8060 2024-01-18 21:11:01 2024-01-26 14:02:11 true false false 12840 235.382 GB 5.731 TB 6.871 TB 16.60 % 18.68 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:53”} 5.960 TB 3.86 % 80 0 22.09 % 0.6 %
10020 192.168.8.214 9050 9060 8040 8060 2024-01-18 21:12:01 2024-01-26 14:02:11 true false false 12758 246.064 GB 5.715 TB 6.871 TB 16.83 % 18.03 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:56”} 5.955 TB 4.04 % 80 0 22.01 % 0.2 %
10021 192.168.8.215 9050 9060 8040 8060 2024-01-18 21:12:06 2024-01-26 14:02:11 true false false 12894 239.323 GB 5.708 TB 6.871 TB 16.93 % 18.19 % 3.1.7-7e897e2 {“lastSuccessReportTabletsTime”:“2024-01-26 14:01:22”} 5.942 TB 3.93 % 80 0 22.00 % 0.0 %

image

您发个196到203中的一个be节点的be.out

这个日志往下的内容请您也截图看下


这就是be节点的全部报错内容了

这个已经是全部信息了

您将 be/lib/jdbc_drivers 这个目录下

mysql的这个jar删除下,然后重启下be,看下是否可以启动成功,可以的话可以先通过这种方式把be都启动下。

目前集群恢复了使用,但是catalog创建报错

driver_url的路径下是jar是存在的么?be 里面有更多的日志信息么

又莫名奇妙的好了。。

这个的原因是什么呢?

connector create failed时候的日志麻烦能发下么?

这个自动好了是重建了catalog还是说之前创建报错的catalog可以用了?

可以重建catalog了,也能正常使用了。前面的catalog我们是删了的,然后一段时间创建catalog报错connector create failed,等了一会我们又尝试了一下就正常了

从日志看是当时10002和10003这两个节点还没有完全启动,然后FE在更新状态时和BE连接失败了。后面节点完全启动后恢复正常了。

1赞