GPG должен молча давать сбой, когда внешняя карта не вставлена, вместо того, чтобы спрашивать снова и снова

Я использую Linux.

У меня есть Yubikey 4, где хранятся мои подключи GPG. На компьютере gpg-agent прозрачно использует эти ключи.

Проблема в том, что мне не вставили мой Yubikey. Если что-то хочет расшифровать что-то (например, я использую pass для моих паролей, включая мою электронную почту, которая проверяется по 2-минутному таймеру с mbsync), gpg-agent покорно попросит меня вставить ключ. Я бы предпочел, чтобы он молча провалился. Это возможно?