Effectivement, la tournure semble correcte grammaticalement. On peut passer par chez soi, comme on peut passer par la Lorraine (pour reprendre la fameuse expression), ou passer par le couloir.
Ceci dit, cela peut sembler incorrect car « chez moi » ne fait pas partie de l’itinéraire. On ne passe pas par chez soi comme un chemin alternatif pour rejoindre une destination. Il s’agit ici plutôt d’un détour, d’une étape. Dire « il faut que je passe chez moi d’abord » me semble donc plus approprié.

Je n’ai pas de preuve de ce que j’avance, c’est simplement le ressenti que j’ai sur le problème.

Les deux tournures sonnent correctement à mon oreille:

• Je passe chez moi avant de vous rejoindre.
• Je passe par chez moi avant de vous rejoindre.

Je pense utiliser les deux vraiment indistinctement.