Les deux sens ne sont pas les mêmes, avec ou sans y . y précise le verbe aller.

y aller = aller à cet endroit, dans cette pièce, au cinéma, …

y est un pronom adverbial, représente le lieu où l’on est ou le lieu où l’on va.

The verb aller (when describing actual movement) requires somewhere to go to or from and that’s where y comes in.

Je voudrais y aller avec vous

means I would like to go there with you.

Aller can also be used to form the future tense by meaning going to as in Je vais manger tôt – I am going to eat soon. In this case there is no movement, so y is not used.

Y is a pronoun that stands in as a dummy destination when used with aller. In English, we can just skip it.