Foreldrene til Peter – Johannes Jacobsen Berg[i] og Gjöe Thorsdatter[ii] – bodde i 1801 i Sandefjord, närmere bestemt i hus nummer 15 i Østre Gade. De hadde giftet seg i 1789 og hadde ved folketellingen allerede fem barn[iii]: Jacob (11); Thor (9); Anne Helvig (6); Preben (3); og Peder (1).
To aar senere fikk de datteren Anne Johanne[iv] saa Peter ble födt inn i enfamlie med opptil seks eldre sösken. Det skjedde 13 mai 1805 med pafölgende daap[v] 5 juni samme aar. Han fikk fadrene Kristine Marie, Jakob Osmundsens Kone; Anne Thorsdatter; Ole Johannesen Grön; Hans Johannesen; og Hendrik Hauff Seglmager – alle fra Sandefjord.
Peter var antagelig den siste i flokken som ble födt i Sandefjord, for i 1807 flyttet familien til Larvik der faren ogsaa tidligere hadde drevet tobaksspinneri, slik han ogsaa gjorde i Sandefjord. Dette var noe efter at Johannes bror Peter Jacobsen döde i 1805 og Johannes ble formynder for svigerinnen og niesene.
Hvorom allting er ble Peter konfirmert[vi] i Larvik 12 mars 1820; med karakteren meget god for „Kundskab og Opförsel”han ble nummer 1 paa listen over 15 gutter i dette kullet.
Sammen med broren Peder overtok Peter driften av familiens forretninger fra moren, og gjorde det meget godt.
Peter giftet seg aldri, og det er ikke mange spor efter ham i de kildene som er tilgjngelige för folketellingen i 1865[vii], informasjonen derfra er oppsummert av Tor Björvik[viii] paa dette viset:
