27. augustil 1965 nimetati Harrison Nõukogude Liidu suursaadikuks. Aastal 1968 oli tal lühike afäär vene kambrihoidjaga, kes töötas Briti saatkonnas. Harrison meenutas, et ta ei küsinud ega teadnud, kas ta töötab KGB-s, kuid ta ütles, et eeldati, et iga Nõukogude töötaja saatkonnas töötas või oli Nõukogude salateenistuse agent. Kui Tšehhoslovakkia Nõukogude okupatsioon tekitas julgeolekuprobleeme
, ja talle oli saadetud KGB poolt tehtud süüdistavad fotod, teavitas Harrison välisministeeriumi oma diskreetsusest, mis otsekohe lõpetas tema ametikoha ja kutsus ta tagasi Suurbritanniasse. Harrison paljastas suhte ajalehele "The Sunday Times" 1981. aastal.