אגרסון שיחק שנה אחת במכללת ג'ורג'טאון, ולאחר מכן עבר לשנתיים במכללת דלאוור. בעונתו השלישית והאחרונה בקולג' העמיד ב-32 משחקים שורה סטטיסטית של 15.4 נקודות, 10.3 ריבאונדים, 2.6 אסיסטים ו-38% מהשלוש בממוצע למשחק.
ביחד עם ג'ורג'טאון זכה אגרסון ב-2007 באליפות העונה הרגילה של הביג-איסט ואף העפיל עמה לפיינל פור של ליגת המכללות. בנהריה יצטרף אגרסון לישראלים עודד שעשוע, יוגב אוחיון, דניאל גור אריה ו-ולאדי ירמישין ולגארד הזר טאשיד קאר החתומים לעונה הקרובה.