Faits: A. A._, domiciliée à C._ (France), fait l'objet de trois poursuites auprès de l'Office des poursuites de Genève, exercées par B._ (poursuites n°s xxxx et xxxx) et par l'Etat de Genève, administration fiscale cantonale (poursuite n° xxxx). Le 20 septembre 2011, à la suite de la vente de deux parts de copropriété saisies dans le cadre de ces poursuites (feuillets 10063-1 et 10063-3, parcelle n° 10063 sise route ..., commune de D._), l'office a adressé à la débitrice, en pli simple et en recommandé, un avis de dépôt du compte final auquel était annexé un tableau de distribution et/ou état de collocation, faisant état d'un montant revenant aux créanciers de 595'016 fr. 65 (593'960 fr. 45 au premier et 1'056 fr. 20 au second). L'avis de dépôt du compte final mentionnait que la répartition des fonds aurait lieu aussitôt après l'expiration du délai de plainte de dix jours prévu par l'art. 17 LP. Le pli recommandé contenant l'acte en question a été distribué à la débitrice le 30 septembre 2011. Par courrier du même jour, celle-ci a demandé à l'office de prolonger le délai pour porter plainte, vu son domicile à l'étranger. Elle a joint à sa demande un certificat médical du 30 août 2011 attestant que "[son] état de santé [...] contre-indique formellement tous déplacements et la met donc dans l'incapacité de voyager pour une période de cent quatre dix jours [sic] à dater de ce jour". Par plis, prioritaire et recommandé, du 6 octobre 2011, l'office a informé la débitrice que sa demande de prolongation du délai de plainte était refusée. Selon les données de La Poste (Track & trace), le pli recommandé, arrivé à la frontière du pays de destination le 7 octobre 2011, n'a pu être distribué ni le 14 ni le 17 suivants. Par courrier du 17 octobre 2011, la débitrice a sollicité Me François Membrez, avocat à Genève, de "bien vouloir entre autre, recourir contre cette décision qui refuse une prolongation", avec cette précision: "pour votre gouverne, je n'ai jamais été informée de la mise en vente aux enchères publiques de la maison de feue ma mère et évidemment ni des conditions (...)". B. Le 19 octobre 2011, par l'entremise de l'avocat précité, la débitrice a formé une plainte contre la décision de l'office, qu'elle déclarait avoir reçue le 14 octobre 2011. Elle a conclu à l'annulation de cette décision et à ce qu'un nouveau délai lui soit octroyé, subsidiairement à ce qu'il soit ordonné à l'office de prolonger le délai de plainte. Elle faisait valoir que, pour des raisons de santé, elle était dans l'impossibilité de se rendre à Genève et de mandater un avocat, ou simplement de consulter le dossier et de se déterminer. Par décision du 8 décembre 2011, la Cour de justice, Chambre de surveillance des Offices des poursuites et faillites, du canton de Genève a rejeté la plainte en considérant que l'office n'avait pas abusé de son pouvoir d'appréciation en refusant une prolongation du délai pour porter plainte. C. Par acte du 4 janvier 2012, la débitrice a interjeté un recours en matière civile au Tribunal fédéral, reprenant ses conclusions formulées en instance cantonale. Elle invoque la violation de l'art. 33 al. 2 LP et l'appréciation arbitraire des preuves (art. 9 Cst.). La recourante sollicite en outre l'octroi de l'assistance judiciaire. Le dépôt de réponses n'a pas été requis.