וַֽיִּגְּשׁוּ֙ אֶל־הָאִ֔ישׁ אֲשֶׁ֖ר עַל־בֵּ֣ית יוֹסֵ֑ף וַיְדַבְּר֥וּ אֵלָ֖יו פֶּ֥תַח הַבָּֽיִת׃
И они подошли к управляющему Иосифа'дом, и они говорили с ним у дверей дома,
Radak
פתח הבית, in order that the people of Joseph’s household should not overhear them.
Rav Hirsch
Am Eingang des Hauses... Sie fürchteten sich, hineinzufolgen.