Piosenkę możemy zinterpretować jako opis zakazanego romansu pomiędzy dwojgiem ludzi, którzy nie powinni spotykać się ze sobą. Mężczyzna wydaje się zwracać do partnerki, usiłując uspokoić ją, że wszystko będzie dobrze, a ich „mały sekret” nigdy nie wyjdzie na jaw („nikt nigdy nie będzie wiedział / że to się działo”). Zachęca ją, aby nie próbowała niepotrzebnie komplikować sprawy – chodzi przecież tylko o chwilę dzielonej wzajemnie przyjemności („ty i ja jesteśmy sami / czysta prostota”).
Chociaż mężczyzna dopuszcza się zdrady, nie przejmuje się tym specjalnie ani nie czyni sobie wyrzutów sumienia – w końcu nie on pierwszy i nie on ostatni („nie jestem pionierem / konstelacje pozostają takie same”).
W outro piosenki możemy usłyszeć gościnny wokal popularnej kanadyjskiej songwriterki Feist. Wokalistka występuje na płycie „Riot on an Empty Street” w dwóch utworach – oprócz „Know How” pojawia się jeszcze w „The Build-Up”.
