Šī frāze sāka tikt izmantota spāņu rakstnieku vidū pirms apmēram 400 gadiem.
Jau kopš seniem laikiem pils un cietokšņu sienās tika veidotas slēptas atveres un caurules, kas ļāva nemanāmi noklausīties sarunas. Pastāv daudzas versijas par to, kur pirmo reizi tika izmantoti šādi ierīces. Angliski runājošie avoti visbiežāk atsaucas uz seno grieķu ķēniņu Dionīziju no Sirakūzām (Dionīzijs I Vecākais), kamēr krieviski runājošie norāda uz Bizantijas valdniekiem. Tomēr līdz XVII gadsimta sākumam izteiciens «sienām ir ausis» kļuva par metaforu, kas apzīmē jebkādu noklausīšanos.
Literāro formu šai frāzei piešķīra Servantess. Viņa darbā «Don Kihots», kura otrā daļa tika publicēta 1615. gadā (48. nodaļa), ir teikts: «Nē, labāk es klusēšu, jo arī sienām ir ausis». Tomēr iespējams, ka pirmavots pieder citam spāņu rakstniekam — dramaturgam Lopu de Vegai.
Viņa komēdijā «Valensijas atraitne», kas uzrakstīta XVII gadsimta sākumā, var sastapt vārdus: «Tātad, siena, arī tev ir ausis». Tomēr galīgā versija šai lugai tika izdota tikai 1620. gadā. Līdzīga izteiciena angļu valodā pazīstama kopš 1620. gada.
