徐庶南下迁居荆州的主要原因与历史记载和民间传说相关，可归纳为以下几点：

避乱需求

徐庶原籍河南颍川（今属河南禹州市），东汉末年董卓之乱爆发后，为躲避战乱，他带领家人南下荆州避难。荆州在刘表主政时期相对稳定，成为流民的避难所。

与诸葛亮的结缘

在荆州期间，徐庶结识了诸葛亮等一批志同道合的谋士，包括崔州平、孟建、石韬等。他们常聚首讨论天下大势，徐庶对诸葛亮的才能尤为钦佩，并向刘备推荐了诸葛亮。

战略考量

徐庶南下后并未立即投奔刘备，而是选择在荆州蛰伏，等待时机。当刘备南下荆州时，他主动投靠，并协助刘备规划战略，如推荐诸葛亮。这种策略体现了他的远见和隐忍。

历史记载与民间传说的结合

正史《三国志》明确记载徐庶因母亲被俘被迫离开刘备，但民间传说中常以“徐庶进曹营——一言不发”来形容其忠诚与隐忍。这一歇后语虽带有戏剧性，但也反映了徐庶对刘备的复杂情感。

综上，徐庶南下迁居荆州是避乱、结交知己与战略布局共同作用的结果，而其离开刘备则与母亲被俘等现实因素密切相关。