ויחי קושיא: מדוע דוקא אצל בני יוסף נסתלקה שכינה ?

[התורה]

בפרשתן: "וַיַּ֥רְא יִשְׂרָאֵ֖ל אֶת־בְּנֵ֣י יוֹסֵ֑ף וַיֹּ֖אמֶר מִי־אֵֽלֶּה",
וברש"י: בקש לברכם ונסתלקה שכינה ממנו, לפי שעתיד ירבעם ואחאב לצאת מאפרים, ויהוא ובניו ממנשה,
ומקורו מדדברי המדרש.
וצ"ב, מדוע בברכתו לשאר השבטים לא מצינו זה, וכגון ביהודה שיצאו ממנו מנשה ואחיתופל (סנהדרין קד:),
וכן בשאר רשעים שיצאו מן השבטים,
וצ"ע ?