《孔子世家赞》开篇借用《诗经·车舝》里的两句诗，云：巍峨的高山可以仰望，宽广的大道可以行走。自己虽然不能到达那里，但心中对它却充满向往。——使人可望而不可即，这是太史公对孔子的总体评价。这种评价，很容易使人想起颜回、子贡等人对孔子的看法。颜回曾经感慨：“仰之弥高，钻之弥坚；瞻之在前，忽焉在后。”子贡则说：其他贤人仅如丘岭，而孔子则如日、月，世人无法逾越。夫子仿佛数仞宫墙，不得其门而入，则无以发现其内部的富丽和华美。非深知孔子，不能有此种决断。
赞语又云：“余读孔氏书，想见其为人。”对于司马迁来说，读孔子书即如面对孔子本人。读其谈坟羊、楛矢，可以见其渊博；读其意欲“浴乎沂，风乎舞雩，咏而归”，可以见其风雅；读其“以不义之富且贵为天边之浮云”，可以见其闲淡；读其“席不正，不坐”、“割不正，不食”，可以见其整饬赞语用一个“读”字、一个“想”字，传达出作者对孔子人格的深深憧憬。“读”乃是投入地读，“想”乃是深情地想。尽管从时间上说，司马迁与孔子相差几百年，但从精神上说，司马迁与孔子之间却似乎没有丝毫间隔。司马迁尝云：自周公卒，五百岁而有孔子；自孔子卒，至今又五百岁矣。司马迁似乎认定要做孔子第二。他创作《史记》五十余万言，其本意正在于继承孔子之《春秋》赞语接下来说：“适鲁，观仲尼庙堂、车服、礼器，诸生以时习礼其家。余低回留之，不能去云。”仲尼虽逝，然其遗物依然，其遗教犹在司马迁面对这一切，恍若重逢故人，不忍离去。一“低回留之”，一“不能去云”，写出了作者眷眷的深情。
然而，生死是最最真实的问题，人鬼殊途是最最真实的分离。孔子那“太山坏乎，梁柱摧乎，哲人萎乎”的悲歌，早已成为司马迁深志不忘的绝响司马迁意识到：恰恰是一个人在后世影响的大小，增损着其生命本身的意义。天下君王、贤人众矣，他们生前的荣耀与其自身的生命一起完结；孔子身为平民百姓，可其思想学说在后世却一直广为流传，从天子王侯到其他所有研究六经的人，都以孔子的学说为准则。正是在这种意义上，司马迁给孔子无以复加的赞誉，即孔子“可谓至圣矣”。
赞语开篇以总评揭出自己对孔子的无限景仰；继而从遗书、遗物、遗教三个方面，极言自己对孔子的向往；结篇再以总评写自己对孔子的崇奉。前一总评，主要是立足于孔子与作者自身的比照，主要从作者自身的感情落笔，因此显得亲切；后一总评，主要是立足于孔子与天子、王侯以及后世儒家学者的比照，主要从孔子的历史影响着墨，因此显得得体。二者相互映衬，而各有韵味。另外，赞语第一层主要是描写，第二层主要是叙事，第三层主要是议论。但描写含情，叙事含情，议论亦含情。读之，觉字里行间，深情无限。