初歩的な質問だとは思いますがお返答頂ければ幸いです。

あゆみさん、初めまして。

あゆみさんは標識・標示などに従うこと（教習項目３）は受けられましたか？同じ教科書だと思いますのでＰ４１を見て下さい。２、追越しのための右側部分はみ出し通行禁止と書かれていますよね。これははみ出すことを禁止しています。なので、それを横断することは出来ます。しかし、Ｐ３２の１４．車両横断禁止の標識があったら横断できません。

かよさんがおっしゃるように黄色い中央線は「追越しのための右側部分はみ出し通行禁止」です。
右側のお店に入るのは「横断」です。追い越しのために中央線を越えるわけではないので、お店に入るのはＯＫです。