On peut dire « dont la plupart est délicieuse » (accord grammatical) ou « dont la plupart sont délicieux » (accord sémantique).

Avec des expressions qui désignent un groupe pluriel quantifié par un nom singulier (« la plupart des … », « la majorité des … », « une partie des … », etc.), les deux accords sont acceptés par les grammairiens. Le pluriel est plus fréquent dans les cas comme ici où c’est chaque restaurant qui est délicieux à titre individuel. Le singulier est plus courant dans des cas comme « la moitié des coureurs est arrivée avant l’orage » où l’on parle du groupe dans son ensemble.

En tout cas il faut être cohérent : le verbe et l’attribut du sujet doivent s’accorder avec le même nom, soit restaurants (masculin pluriel), soit plupart (féminin singulier).