Kralj Nikola ga je nazivao "Andrija, moj četvrti sin", tako da su Radoviću sva vrata crnogorske državne uprave bila širom otvorena - bio je maršal Dvora, ravnatelj Ministarstva unutarnjih poslova, ministar financija, ministar građevinarstva, na koncu premijer i to dva puta.
Otuda je za sve bilo pravo iznenađenje kad je uhićen u Bombaškoj aferi 1908., te kad mu je sudski dokazana krivnja u toj terorističkoj uroti organiziranoj iz Beograda radi ubojstva kralja Nikole. Radović je osuđen na 15 godina zatvora.
U egzilu
No, 1913. ga je kralj Nikola pomilovao, te odmah s robije Radović postaje državnim savjetnikom.
U siječnju 1917. Radović je opet iznenadio kralja Nikolu podnoseći neopozivu rezignaciju na premijersku dužnost. Odlazi Radović u Ženevu i tamo, uz financijsku potporu Nikole Pašića oformljuje Crnogorski odbor za narodno ujedinjenje, te pokreće list Ujedinjenje i započinje obavještajnu i promidžbenu djelatnost u korist Srbije.
Crnogorski komiti, međutim, nisu mu zaboravili izdaju domovine. Osvetili su se tako što su Radoviću ubili oca.
Kandidiranja za zastupnika
Radovićev rad za Srbiju, osim financijskih efekata, nije za njega osobno imao konkretne političke koristi u samoj Crnoj Gori, gdje se pokušavao nametnuti za stranačkog lidera. Naime,iako se odmah upisao u Demokratsku stranku iz Beograda na parlamentarnim izborima 1920. je Radović s 5,2% dobivenih glasova propao kao kandidat.
Na izborima 1923. Radović također se nije uspio kvalificirati za zastupnika.
Na narednim izborima 1925. njegove ga kolege iz Demokratske stranke nisu ni stavljali na listu.
No, 1927. je, kao osoba koja je zadužila srpske interese, stupio na dužnost viceguvernera Narodne banke u Beogradu gdje će i ostati do mirovine.
