שקיעת האימפריה העות'מאנית ותהליך הגירת היהודים מסיליברי הותיר את הקהילה במצב כלכלי קשה. ב-1907 תועדו בסיליברי 400 משפחות של יהודים כאשר רק 12 מתוכן היו בעלות מעמד כלכלי איתן (נוֹטָבֶּלִים). בראשית המאה ה-20 כיהן יצחק קטריבאס כנשיא הקהילה היהודית. במהלך מלחמת העולם הראשונה ולאחריה עזבו יהודים מסיליברי את העיר והיגרו לארצות הברית, צרפת, ארץ ישראל ומקצתם לאיסטנבול. בעיר נותרה קהילה קטנה. ביולי 1934 פרצו פרעות על רקע אנטישמי נגד יהודי טורקיה שהתגוררו באזור תראקיה. הפרעות היו שיאו של גל אנטישמי בחברה הטורקית ששאב השראה מגרמניה הנאצית, ולובה על ידי ג'וואט ריפאט אטילהאן שהיה עיתונאי וסופר אנטישמי. הקהילה בסיליברי הותקפה ובניה נטשו אותה ועברו לאיסטנבול.