İki sütunuda User tablosu ile ilşkilendirdiğiniz için hata alıyorsunuz.Mapping etmede hata verir. Ayrı bir tabloda Modified useri illa ilişkilendirebilir yada benim şuan yaptığım gibi Id ile barındırabilirsiniz.
public int CreatedUserId { get; set; }
public virtual User CreatedUser { get; set; }
public int ModifiedUserId { get; set; }
user tablosunda da
public ICollection<Advert> CreatedAdverts { get; set; }