וַיְמָאֵ֣ן אָבִ֗יו וַיֹּ֙אמֶר֙ יָדַ֤עְתִּֽי בְנִי֙ יָדַ֔עְתִּי גַּם־ה֥וּא יִֽהְיֶה־לְּעָ֖ם וְגַם־ה֣וּא יִגְדָּ֑ל וְאוּלָ֗ם אָחִ֤יו הַקָּטֹן֙ יִגְדַּ֣ל מִמֶּ֔נּוּ וְזַרְע֖וֹ יִהְיֶ֥ה מְלֹֽא־הַגּוֹיִֽם׃
Ale wzbraniał się ojciec jego, i rzekł: "Wiem, synu mój, wiem! I z niego powstanie lud; i on będzie wielkim; wszakże brat jego młodszy większym będzie od niego, a ród jego będzie mnóstwem plemion."
Rashi on Genesis
ידעתי בני ידעתי I KNOW IT, MY SON, I KNOW that he is the first-born.
Or HaChaim on Genesis
וימאן אביו ויאמר, His father refused, saying, etc. The reason the Torah uses the word "he refused," is to indicate that Joseph had taken hold of his father's hand to try and place it on Menashe's head.