צניעות

שמעתי פעם בשם אחד מגדולי הדורות, שעיקר יצר הרע לבנים זה ביטול תורה, ולנשים זה צניעות. יש מקור לעניין זה?