Il titolo venne creato nel 1801 per Alexander Wedderburn, I barone Loughborough, Lord Cancelliere dal 1793 al 1801, con possibilità di trasmissione a suo nipote Sir James St Clair-Erskine, dal momento che Wedderburn non aveva avuto figli sopravvissutigli. Wedderburn era già stato creato Barone Loughborough, di Loughborough nella Contea di Leicester, nella Parìa di Gran Bretagna nel 1780, con concessione ordinaria agli eredi maschi, e Barone Loughborough, di Loughborough nella contea del Surrey, nella Parìa di Gran Bretagna nel 1795, con le medesime modalità di concessione della contea. La baronia creata nel 1780 si estinse alla sua morte, ma la baronia del 1795 e la contea passarono, per decreto speciale, a suo nipote, che pertanto divenne II conte di Rosslyn. Questi fu Tenente Generale d'esercito ed ebbe anche l'incarico politico di Lord Privy Seal e Lord President of the Council.
Attualmente i titoli sono passati ad un suo discendente, il VII conte, che è succeduto a suo padre nel 1977.
La Baronettia Erskine, di Alva nella Contea di Clackmannan, venne creata nel 1666 per Charles Erskine nel Baronettaggio di Nova Scotia. Questi fu rappresentante delle costituenti di Clackmannan e Stirling nel Parlamento di Scozia. Suo figlio primogenito, il II baronetto, venne ucciso nella Battaglia di Landen del 1693 e venne pertanto succeduto dal fratello minore, il III baronetto. Questi fu uno dei rappresentanti scozzesi al primo parlamento di Gran Bretagna e fu poi rappresentante del Clackmannanshire. Suo figlio primogenito, il IV baronetto, venne ucciso nella battaglia di Lauffeld nel 1747. Il fratello minore, suo successore come V baronetto, fu Tenente Generale nell'esercito e membro del parlamento per Ayr Burghs e Anstruther Burghs. Erskine sposò Janet Wedderburn, figlia di Peter Wedderburn e sorella di Alexander Wedderburn, I conte di Rosslyn. Venne succeduto da suo figlio, il già menzionato VI baronetto, che nel 1805 succedette a suo zio come lord Rosslyn nella baronia di Loughborough e nella contea di Rosslyn (vedi sopra).