这个“是时”指的就是袁隗在司徒之位上的时候。而且，杨赐对以袁隗为代表的司徒府之所作所为在给汉灵帝的密奏中写得更为具体：
而今所序用无它德：有形势者，旬日累迁；守真之徒，历载不转；劳逸无别，善恶同流。
这说明袁隗正是靠着担任宦官集团的政治“黑手套”到处卖官、腐败成风。而他被杨赐取代，也算是汉灵帝对汝南袁氏一个不大不小的打击。
但仅仅过了一年多，袁隗的哥哥袁逢便在汉灵帝光和元年（公元178年）十月出任司空之职，依然拥有人事辟召之权。这标志着袁氏一族又回到了汉室权力核心圈。而这一切，显然都是他们的宗亲、中常侍袁赦在幕后运作而来的。
不过，好景不长。汝南袁氏很快又一次走到了家族命运大转折的关头：光和二年（公元179年）四月，司隶校尉阳球借着杨赐之子杨彪的举报，对王甫、淳于登、袁赦、朱瑀、刘毅、庞训等一批宦官的贪腐行为进行问罪追究。其中，王甫父子竟被阳球拷问而死。此举大大震动了宦官集团。他们的联手反扑，将阳球以“谋议不轨”之罪陷害身亡。虽然宦官集团终是大获全胜，但袁赦毕竟被阳球奏议所波及，从此退出禁省，淡出政坛。汝南袁氏在内廷最大的政治靠山就此崩塌。他们又一次直面未来将何去何从的核心问题。