Я - большой поклонник Core Python
Думаю, вам понадобится mappedBy = "UserGroup" в аннотации @OneToMany .
mappedBy = "UserGroup"
@OneToMany