Sehnal bych si nějakou trubku, třeba ze staré garnyže, do ní stříknul trochu montážní pěny, pak trubku vsunul pod regálem až k otvoru a do druhé strany trubky fouknul - hubou nebo nějakým kompresorem...
Otázkou je, jestli by myši pěnu neprožrali? V tom případě do pěny rozdrobit např. skleněné střepy nebo něco, co jim nechutná... Případně teda místo pěny použít rovnou ten beton, sádru, lepidlo na perlinkua podobně, co najdeš doma...

Mimochodem, z druhé strany té díry je co? Venkovní zeď? Nebo nějaká další místnost?