框架学习

Nacos服务列表变更时,订阅者接受不到推送 #4008

 

 Closed

guozongkang opened this issue on 16 Oct 2020 · 8 comments

 Closed

Nacos服务列表变更时,订阅者接受不到推送#4008

guozongkang opened this issue on 16 Oct 2020 · 8 comments

Comments

@guozongkang

guozongkang commented on 16 Oct 2020 • 

edited 

中午遇到了一个问题,服务A有BCD三个订阅者,
11点45的时候,服务A手动上线,只推送了B订阅
再次手动下线,只推送了服务C订阅,然后多次操作,仍然没有推送服务D
11点49 的时候,才恢复正常,点上线的时候才给服务D发送了推送,但是又没给B、C发....

 

@guozongkang

Author

guozongkang commented on 16 Oct 2020 • 

edited 

11:45-11:49这几分钟内,asset-service这个服务多次发生变更(手动上下线),都没有推送到10.52.5.144这个IP,在11:51的时候,再次手动上下线时才发生了推送。(并没有改动什么,自己就好了),想问下这个是什么原因导致的?

 

@KomachiSion

Collaborator

KomachiSion commented on 16 Oct 2020

Check naming-push.log in nacos server to check whether these changes push successfully

 

@KomachiSion KomachiSion added the status/need feedback label on 16 Oct 2020

@guozongkang

Author

guozongkang commented on 16 Oct 2020 • 

edited 

第一次下线,两个订阅者都推送了
2020-10-16 17:57:07,518 INFO DEFAULT_GROUP@@okcoin-asset-service is changed, add it to push queue.
2020-10-16 17:57:07,519 INFO serviceName: DEFAULT_GROUP@@okcoin-asset-service changed, schedule push for: 10.52.12.154:55161, agent: Nacos-Java-Client:v1.2.1, key: 10.52.12.154,55161,5870602902792709
2020-10-16 17:57:07,521 INFO serviceName: DEFAULT_GROUP@@okcoin-asset-service changed, schedule push for: 10.52.5.144:36761, agent: Nacos-Java-Client:v1.2.1, key: 10.52.5.144,36761,5870602902792709

第二次上线,只推送了一个消费者
2020-10-16 17:57:31,906 INFO DEFAULT_GROUP@@-asset-service is changed, add it to push queue.
2020-10-16 17:57:31,907 INFO serviceName: DEFAULT_GROUP@@-asset-service changed, schedule push for: 10.52.12.154:55161, agent: Nacos-Java-Client:v1.2.1, key: 10.52.12.154,55161,5870627290391952

第三次上线,两个消费者都没推送
2020-10-16 17:57:50,590 INFO DEFAULT_GROUP@@-asset-service is changed, add it to push queue.

第四次下线,只推送了其中一个消费者
2020-10-16 17:58:09,480 INFO DEFAULT_GROUP@@-asset-service is changed, add it to push queue.
2020-10-16 17:58:09,482 INFO serviceName: DEFAULT_GROUP@@-asset-service changed, schedule push for: 10.52.5.144:36761, agent: Nacos-Java-Client:v1.2.1, key: 10.52.5.144,36761,5870664865102549

 

@guozongkang

Author

guozongkang commented on 16 Oct 2020

并且nacos的订阅者列表一直在变动,1s内点击两次展示的值都不一样,有时候会显示一个,有时候回显示两个

 

@guozongkang

Author

guozongkang commented on 16 Oct 2020 • 

edited 

企业微信截图_67c066bd-b203-4342-a609-3b928eba6890

44-49这5分钟内对该服务进行了多次手动上下线,10.52.5.144这个IP都没有接收到推送事件 正当要排查问题时,51分进行了一次操作,发现又恢复了

企业微信截图_b4ebbdba-67f0-433b-9660-49b9ed0e461a

 

@KomachiSion KomachiSion added kind/research area/Naming and removed status/need feedback labels on 16 Oct 2020

@KomachiSion

Collaborator

KomachiSion commented on 16 Oct 2020

你是单机模式部署还是集群模式部署

 

@guozongkang

Author

guozongkang commented on 17 Oct 2020

集群部署,出现这个问题的时候专门看了下naming-raft.log日志,集群间通信都是正常的

 

@KomachiSion

Collaborator

KomachiSion commented on 25 Dec 2020 • 

edited 

经过排查之后有了一些进展,同步一下。

您这个看到的现象是正常的, 因为这个是目前nacos的订阅逻辑导致的。

nacos客户端订阅之后会每隔一个Cache时间(默认10s)去进行对账查询并续约订阅,但是集群部署的时候由于http请求的无规则性。可能会在不同的集群节点上续约。旧的节点上可能由于未续约从而被当作僵尸订阅者清理了。

所以您看到的现象会发生同一个node时而给这个客户端推送,时而不给他推送。
如果是集群模式,建议将整个集群的push日志整合起来看。 同步和推送都有聚合延迟, 同一个服务变更可能会在不同的节点有1~2s的延迟,但是所有节点的订阅者推送合起来应该是正确的。

 

@KomachiSion KomachiSion added status/need feedback kind/question and removed kind/research status/need feedback labels on 25 Dec 2020

@KomachiSion KomachiSion closed this on 31 Dec 2020