Ezért Józsefre bízta mindenét, és semmire sem volt gondja mellette, legfeljebb csak arra, hogy megegye az ételt. Józsefnek szép termete és szép arca volt.
Ezek után történt, hogy Józsefre szemet vetett gazdájának felesége, és ezt mondta: Hálj velem! Ő azonban ezt nem akarta, és azt felelte gazdája feleségének: Nézd, az én gazdámnak semmi gondja sincs mellettem háza dolgaira, és rám bízta mindenét. Senki sem nagyobb nálam ebben a házban. Semmit sem tiltott el tőlem, csak téged, mert te a felesége vagy. Hogyan követhetném el ezt a nagy gonoszságot, vétkezve az Isten ellen?! Bár az asszony nap mint nap ezt mondogatta Józsefnek, ő mégsem engedett neki, és nem feküdt mellé, hogy vele legyen. Egy napon, mint mindig, bement József a házba a munkáját végezni. A háznép közül senki sem volt a házban. Ekkor megragadta őt az asszony a ruhájánál fogva, és azt mondta: Hálj velem! Ő azonban otthagyta ruháját az asszony kezében, futásnak eredt, és kiszaladt. Amikor az asszony látta, hogy kezében hagyta a ruháját, és kifutott, összecsődítette háza népét, és ezt mondta nekik: Nézzétek, egy héber embert hozott hozzánk, és az csúffá tesz bennünket. Bejött hozzám, hogy velem háljon, de én hangosan kiáltozni kezdtem. Amikor meghallotta, hogy jó hangosan kiáltozni kezdek, nálam hagyta a ruháját, futásnak eredt, és kiszaladt.
Az asszony magánál tartotta József ruháját, míg az ura haza nem jött. Akkor neki is ugyanazt mondta: Bejött hozzám a héber szolga, akit idehoztál, hogy csúffá tegyen engem. De amikor hangosan kiáltozni kezdtem, nálam hagyta a ruháját, és kifutott.
Amikor a gazdája meghallotta feleségének a szavait, amelyeket neki mondott: Ilyen dolgokat tett velem a szolgád! – akkor haragra gerjedt. Fogta Józsefet a gazdája, és abba a börtönbe vetette, ahol a király foglyait tartották fogva. Így került József a börtönbe. De az ÚR Józseffel volt, hűséges maradt hozzá, és gondoskodott róla, hogy elnyerje a börtönparancsnok jóindulatát. A börtönparancsnok Józsefre bízta mindazokat a foglyokat, akik a börtönben voltak, és ő dolgoztatta mindazokat, akik ott dolgoztak. A börtönparancsnoknak nem kellett törődnie semmivel, ami rá volt bízva, mert az ÚR Józseffel volt, és eredményessé tette az ÚR, amihez hozzáfogott.