En cierta manera, sí.

No hay una lista escrita de tus seguidores en ningún lado.

Hay listas de a quién sigue cada usuario. Y son los clientes los que en base a consultar la listas de miles de usuarios, se quedan con las personas que te siguen para construir la lista de tus seguidores.

Por eso es tan variable, porque depende de la información de miles de usuarios disponible en los relays a los que se está en ese momento conectado.