それは無理な範囲に入るので行けません。
満員電車で体調崩しやすいので1時間以上かかる店舗は遅番でお願いします!と前に言いましたよね?って聞き返して、上司の認識をしっかり確認しておいた方がいい。
万が一「これ位で無理とか言ってたら他の所でやってけないよ」とか言ってくるようなら即別のバイトを探そう。