Die Möglichkeit dazu besteht seit (mindestens) April 2014.
Sie müssen ein Paket namens pam_ssh_agent_auth installieren (verfügbar für Centos 7, YMMV), dann konfigurieren Sie /etc/pam.d/sudo als Autorisierungsmethode zu akzeptieren. Schließlich müssen Sie möglicherweise SSH_AUTH_SOCK hinzufügen in die Liste der Umgebungsvariablen, die während sudo bestehen bleiben .
Das Gentoo-Wiki enthält Details zu diesen Schritten.