Citation: 5A_680/2020 E. A

A.a. A.________ a été condamné en 2010 à une peine privative de liberté à vie. Il a été détenu pendant une dizaine d'années, avec quelques interruptions, aux Etablissements de la Plaine de l'Orbe, dans la canton de Vaud (ci-après: EPO). Pendant cette détention, des commandements de payer lui ont été notifiés à cet endroit. A.b. Le 13 novembre 2018, A.________ a été transféré, pour une durée illimitée, à l'établissement d'exécution des peines de Bellevue, à Gorgier (ci-après: EEPB). A.c. A.c.a. Le 25 janvier 2019, l'Office des poursuites du district du Jura-Nord vaudois, à Yverdon-les-Bains, a avisé celui de Neuchâtel (ci-après: office) de ce transfert. A.c.b. Le 28 janvier 2019, l'office a invité A.________ à se constituer, dans un délai de deux semaines, un représentant légal au sens de l'art. 60 LP. L'intéressé ne s'est pas manifesté à ce sujet. A.d. Entre le 14 février 2019 et le 30 avril 2020, l'office a enregistré huit poursuites et ouvert deux séries de poursuites au nom de A.________. Plusieurs poursuites ont été notifiées au poursuivi à l'EEPB. L'intéressé y a fait opposition. A.e. Entre le 4 mars 2019 et le 19 mai 2020, A.________ a envoyé à l'office divers courriers dans lesquels il contestait la compétence de ce dernier et mentionnait qu'il tenait à garder, en tant que for de la poursuite, l'Office des poursuites du district du Jura-Nord vaudois. L'office a répondu au poursuivi par plusieurs courriers que le for de la poursuite se trouvait dans le canton de Neuchâtel puisqu'il séjournait à la prison de Gorgier.