A XIV. század elején a várat Csák Máté birtokolta, tőle Károly Róbert hívei ostrommal foglaltak el. Az Anjou király 1323-ban helyezte át székhelyét Temesvárról Visegrádra. Ekkorra keltezhető a Salamon-torony átépítése is. A király a második emelet keleti ablakát bejárattá alakíttatta át, belül pedig a termeket keresztfalakkal osztották meg. Az ötödik szintet fedő fa födémet bordás boltozatokkal helyettesítették, ezáltal a torony felső teraszán nagyobb hajítógépeket lehetett felállítani.