PGP ist halt ein großer Aufwand und muss von beiden Seiten genutzt werden. Public PGP key vom Empfänger hinzufügen -> Nachricht manuell verschlüsseln -> senden -> Empfänger entschlüsselt mit Private key.

Edit: Und man kann seine eigenen Nachrichten nicht mehr lesen, bzw. später gar nicht mehr nachvollziehen.