Stora arenor i huvudstaden Tokyo tillåts nu ta in 5 000 åskådare, eller halva kapaciteten, enligt restriktioner som gäller till den 20 juni.
Det är sedan tidigare bestämt att inga utländska åskådare kommer att släppas in på OS, som invigs den 23 juli.
Ett besked om hur det blir med den inhemska publiken väntas under juni, men kommer att tas med hänsyn till smittläget och utbredningen bland virusvarianter, säger Japans kabinettssekreterare Katsunobu Kato.
Regeringen har föreslagit att nödläget i de flesta prefekturer under sommarspelen delvis ska lyftas för att barer och restauranger ska kunna ha öppet längre.
Men än är inget klart och idén att hålla ett OS under en pandemi har ifrågasatts från experthåll.
En av dem som stått i frontlinjen är regeringens medicinske rådgivare Shigeru Omi, som ska hålla en presskonferens under onsdagen.
Omi menar att Internationella olympiska kommittén (IOK) ignorerat riskerna han och andra experter presenterat.
IOK försvarar sig med att de flesta idrottare och medier på plats i Tokyo kommer att vara vaccinerade och att reglerna med bland annat daglig testning och munskydd ska minska smittspridningen ytterligare.