כנראה שהתיישבו היהודים בילניה גורה (בגרמנית: Hirschberg) כבר בחצי הראשון של המאה ה-14, אך לפי דבריו של מרקוס בראן, הופיעו היהודים בעיר רק בשנת 1345. אין שום ספק לגבי מיקומו של Judengasse – רחוב היהודים, שנמצא סמוך לכיכר השוק (כיום רחוב שקולנה – Szkolna). כנראה, שהיה קיים שם גם בית כנסת. תום קיומה של הקהילה היהודית בילניה גורה מימי הביניים היה במאה ה-15, כאשר גורשו היהודים מערים רבות של שלזיה.

התיישבו היהודים בעיר שוב רק במאה ה-18. האוכלוסייה היהודית בילניה גורה לא הייתה רבה – בשנת 1812 התגוררו כאן 35 יהודים, ובשנת 1852 – 194. בשנות 1840-1867 פעל בעיר בית הספר היהודי הפרטי. בשנת 1880 התגוררו בילניה גורה 450 יהודים – מספר היהודים הגבוה ביותר בהיסטוריה של העיר. שיחקו היהודים תפקיד חשוב בחיים כלכליים של העיר כבעלי חנויות, בתי מסחר ומפעלים רבים.

בראשית, התקיימו התפילות בדירה פרטית שייכת לסוחרת, שנקראה לופפרט, ברחוב Hintergasse. זמן קצר לאחר מכן התברר, כי הדירה קטנה מדי למספר היהודים ההולך ועולה. נבנה בית הכנסת בשנת 1845 על ידי הבנאי מוריץ אלטמן; כתובתו הבאה הייתה  Priesterstraße מס' 20 (כיום רחוב ניקולס קופרניקוס – Mikołaja Kopernika). טקס קידושו של בית הכנסת התקיים ב14 בספטמבר בשנת 1846, בהשתתפות נציגי דתות שונות. תרם בכתיבת ספר תורה, כמתנה בשביל הקהילה היהודית בילניה גורה, הסוחר פרויידנטל. בית הכנסת נבנה מאבן, כוסה בגג עץ שטוח ובקצה של הגג נמצא אפריז קישוטי. הכניסה מצד הרחוב הובילה דרך מדרגות מורכבות מארבעת שלבים. שרד הבניין את פוגרום ליל הבדולח בשנת 1938 – אמנם נהרס אז, אך שרד בניין עצמו. רק בתחילתן של שנות ה-70 של המאה ה-20 נהרס בית הכנסת בצורה שלמה, יחד עם כל בניני רחוב ניקולס קופרניקוס העכשווי. 

אחרי מלחמת העולם השנייה, הפכה ילניה גורה למקום התיישבותם של יהודי פולין. בינואר בשנת 1946 התגוררו בעיר כבר 433 יהודים, וביולי באותה השנה – 579. אחרי הפוגרום בקיילצה, היגרו יהודים רבים בפניקה ומספרם הלך וירד. בנובמבר בשנת 1946 התגוררו בילניה גורה 350 יהודים, ובפברואר בשנת 1947 נשארו כאן רק 300. במשך שנת 1947 הופיעה קבוצת מתיישבים יהודיים חדשה - בפברואר בשנת 1948 התגוררו בעיר 569 יהודים. בחצי שנת 1949 גרו כאן 654 יהודים. בתקופה זו פעלו בעיר גם ארגונים ומכונים יהודיים רבים – בין השאר, הוועדה היהודית ,הקהילה הקדושה היהודית, אגודת השמירה על בריאות האוכלוסייה היהודית (ר''ת:TOZ ).