segan, ragu-ragu, takut akan pendapat orang

「人目を憚る」は、他人の視線や評価を気にして行動をためらう、隠れて行うという意味です。密かに会う状況に合います。

「世論を憚る」は、世間の意見を気にして行動をためらうことを意味します。「憚ることなく」で、世論を気にせずに行動したことを強調します。