Tønsberg ble eget tollsted på 1600-tallet. Fra 1821 og til nedleggelsen i 1843 hørte Tønsberg tollsted under Tønsberg tolldistrikt. Fra 1844 og fram til 1881 lå Tønsberg tollsted under Larvik tolldistrikt. Fra 1881-1893 var Tønsberg tollsted en del av Drammen tolldistrikt. I perioden 1893-1967 hørte Tønsberg igjen under Larvik tolldistrikt. Tønsberg tollsted var midlertidig underlagt Tønsberg tolldistrikt fra 1967-1969. Fra 1969-1993 var Tønsberg tollsted en del av 4. tolldistrikt (Drammen). Fra 1993-2001 hørte Tønsberg tollsted under Telemark og Vestfold tolldistrikt. Tønsberg tollsted var i årene 2001-2004 en del av Buskerud, Vestfold og Telemark tolldistrikt. Tønsberg tollsted ble lagt ned i 2004. Underliggende tollstasjoner: Årøsund, Sandøysund, Tønsberg østfjord (Jersøy), Tønsberg vestfjord, Kjøpmannskjær, Vallø, Natholmen, Langvika og Vrengen