Google 收录下降是否和服务器地理位置有关系？

我的 WordPress 网站原本放在香港的虚拟主机上，访问速度在国内和亚洲地区还算不错，Google 的收录情况也比较稳定。

但是我把网站迁移到了美国的服务器，想着能在北美地区访问更快，同时服务器配置也更高一些。但是迁移上线后不到两周，Google 的收录量就明显下降了，很多本来在首页的关键词排名也掉下去了。