Подскажите, а существуют источники, в которые можно сходить без заселения в отель, просто заплатить и на 20 минут сходить? Желательно в районе Осаки

конечно, но в самой Осаке источников нет, только эрзац. прокатитесь в Арима-онсен, час от Осаки. там множество онсенов для разового посещения. и публичные, и приватные, какие хотите.

Если вам не нужен опыт онсен-городка, то в самой Осаке есть самая что ни на есть натуральная термальная вода. Только это формат супер-сенто. Например https://maps.app.goo.gl/11Nc4L7GJnMt3XiY6

я не знаю для чего вам на 20 минут)) если просто для атмосфЭры и быстро/ недорого

то вот место( правда не настояший онсен) его и иностранцы любят, и местные, и не так далеко от центральных районов

Solaniwa Onsen

https://maps.app.goo.gl/Zjrzyd731xvWTEUEA