太子李建成为笼络齐王李元吉，大力提携其部属亲信，见谢叔方为人正直、群众基础好，于是破例提拔他为长安尉，主管京城治安。如果换作常人，必然感恩戴德、竭力报效，而谢叔方非但没有投桃报李，反而多次冒犯李建成。
　　谢叔方上任不久，李建成妻弟的一个车夫喝醉了，明知危险，李建成妻弟却仍让他驾车。马车途经一个人口密集的岔路口时，辕马（马车中靠近前轮的马）突然双目圆睁，昂头嘶鸣，醉意朦胧的车夫不但没刹车，还扬起马鞭狂抽辕马，导致辕马狂奔，碾死一个小孩。由于事发突然，李建成妻弟也被甩出车外，受伤昏厥。谢叔方接到手下报告，及时赶到事发现场，当场就把李建成妻弟和车夫羁押起来。
　　李建成听说此事，马上派心腹找到谢叔方，称妻弟是“无心之过”，要谢叔方立马放人。但李建成心里也没底，因为他太了解谢淑方的为人了。
　　刚打下京城时，李建成手下的一个亲兵趁乱私闯民宅，大肆抢劫财物，结果被执勤的谢叔方发现，当场抓了起来。亲兵的同乡忙向李建成报告，他知道犯事的亲兵曾在战场救过李建成的命，李建成绝不会不管。可当李建成亲自找到谢叔方，请他对亲兵从轻发落时，谢叔方不但没顾太子的“佛”面，反而下令将亲兵斩首。
　　李建成明知谢叔方不好说话，但为了妻弟免遭惩罚，还是表示情愿多出些金银抚恤死者家属。谢叔方听后斩钉截铁地说：“这个车夫酒后驾车绝非一次，屡教不改，这次酿成大祸，主仆均有大罪。车夫当斩首，主人死罪可免，活罪难逃。”
　　说完，谢叔方即刻命人斩了车夫，将李建成妻弟当众打了50大棍。李建成妻弟养尊处优惯了，加上刚摔伤，哪经得起这般痛打？仅仅打了二十几下，就只见进气不见出气了。站在一边观刑的李建成立刻要求减刑，谢叔方照打不误。50大棍打完，李建成妻弟便气息微弱，很快身亡。
　　人们都以为谢叔方这回摊上大事了，但李建成并没找他算账，因为知道他素有清廉之声，长安百姓对他简直“如事严父”，找个由头将他治罪不难，却不免遭世人唾骂。
　　武德九年（626年），李世民发动玄武门之变時，谢叔方作为齐王旧部协助李建成出兵平叛。后来李世民取代李建成的太子之位，非但没因谢叔方是李建成的人就赶尽杀绝，还大力提拔了他。直到贞观末年，谢叔方才卸任广州都督。可见，谢叔方能平安终老既得益于清廉之声，也离不开公平待人的处世之道。