Permissão para executar comando em determinada pasta.

Boa tarde!

Minha dúvida é o seguinte:
Um grupo de usuários acessa uma pasta e precisa fazer modificações nela (até ai tudo bem, mudo as permissões e o dono da pasta para o grupo ter o acesso).

Porém, vez ou outra, esse grupo precisa modificar as permissões de alguns arquivos dentro desta pasta.

Como faço para que esse grupo execute o chmod somente nessa pasta ( se eu colocar no sudoers eles poderão mudar outros arquivos da máquina e não quero isso).