在中国，根据《中华人民共和国道路交通安全法》的规定，驾驶营运客车（不包括公共汽车）、校车载人超过核定人数20%以上的，一次记12分；超过核定人数未达20%的，或者驾驶其他载客汽车载人超过核定人数20%以上的，一次记6分。
所以，如果一辆5座的车上坐了5个大人和1个婴儿，总共6人，那么这属于超过核定人数未达20%的情况，会被记6分。但是，需要注意的是，这里的“婴儿”是否被视为一个独立的人来计算超员情况，可能因地区或具体法规而有所不同。在某些情况下，婴儿可能被视为不属于超员范围内。建议在实际驾驶中遵守当地的具体规定和交警的指导。