ציטוט של ClassMulder

יפה! ממש פיתחת את ה-NAS קדימה. כמה הערות:

1. הדיסקים שקנית הם מחודשים? משומשים? מצבם לפי מידע ה-SMART שנתת הוא לא להיט. בדרך כלל, אם דיסקים עוברים RECERTIFICATION במפעל כמו שצריך, חלק מהנתונים ב-SMART מאופסים וזה לא נראה כך במה שראיתי אצלך. לדוגמא, הדיסקים שלי מוגדרים Factory Recertified 0 Used Time Sealed Pristine, ולכן, מבחינת נתוני SMART הם מראים 0 שעות שימוש. גם המדדים האחרים שלהם טובים יחסית. כמובן שאצלי מדובר בדיסקים של 22TB שזה אומר שסביר להניח שהם הגיעו מחוות שרתים כזאת או אחרת והם לא ישנים כמו שלך. כל עוד הדיסקים שלך לא עושים רעשים חשודים והם מתפקדים, אז סבבה. אני רואה שיש לך שישה (?) דיסקים? עם יתרות של 1 או 2? (אני לא מחשיב את ה-NVMe שאני מניח שאתה משתמש בו עבור CACHE)

2. נושא החשמל שציינת. אצלי הצריכה נעה בין 68 וואט ל-82 וואט (עם חמישה דיסקים פעילים ועוד כונן M2), ואין לי כרטיס מסך (חוץ מהמובנה). אבל.. אני מאמין שזה גם קשור לספק המתח שבו אתה משתמש. בספקי מתח יש דרגות כפי שאתה ציינת. ברונזה, כסף, זהב, פלטיניום. ככל שהדרגה גבוהה יותר, כך היעילות גבוהה יותר. אם אני לא טועה השיא הוא באיזור 93-94 אחוזים. ככל שהיעילות טובה יותר, חשמל לא מתבזבז בדרך. דרך נוספת (חוץ מבחירת ספק כוח בעל יעילות גבוהה) היא לבחור מעבד שצורך פחות חשמל. כמו סדרת מעבדי T של אינטל. זה משהו שאני מכוון אליו, אבל בינתיים המעבד שאני רוצה פשוט עולה יותר מדי ואין לי צורך ממשי בזה.

3. אני שיחקתי קצת עם JELLYFIN אבל בסוף הסרתי אותו. הוא נחמד והוא עובד, אבל הוא מעלה אצלי צריכת חשמל, ואין לי כרטיס מסך שייקח עומס משמעותי מהמעבד. אני מעדיף דוקרים אחרים. יותר לכיוון של AI. יש כיום כאלה של טקסט לתמונה, צ'אטבוטים, וגם משהו חדש שעדיין לא בטוח שיש לו גרסת דוקר, שזה AUDIO SUPER RESOLUTION שאמור להשתמש בבינה מלאכותית כדי לשדרג קובץ צליל דחוס (MP3 למשל) חזרה לקובץ באיכות גבוהה (HI-RES).

ראשית , תודה , אכן אני מנסה להתקדם כמה שיותר, די נהנה להגדיר את הדברים. 

1. לגבי הדיסקים הקשיחים, כולם משומשים, עבדו בין 3-4 שנים, אני חושב שהדיסקים הללו פורקו מחוות שרתים, אם זה לצורך שידרוג או ניהול סיכונים, הדיסקים של HGST עם MTBF של 2.5 מיליון שעות, מספיק לי שהם יחזיקו 10% מהצהרה הזאת, 

הדיסקים לא עושים רעשים מוזרים, וגם לא מתחממים ברוב הזמן בסביבות 38-40, ואם אני מפעיל את המאווררים על 100 אחוז הם יורדים עד 32 מעלות, כל שאר הרכיבים גם יורדים ל34 מעלות , שזה אינדקציה מעולה מבחינתי.

הדיסקים לא עובדים אצלי קשה, היות וכל קבצי המערכת, דוקרים מאוחסנים בNVME, ואת ההורדות הMOVER  מבצע אחת ליום לדיסקים הקשיחים.

כמו שניתן לראות בתמונות שני הדיסקים שהוספתי בStandby כי לא יהיה בהם שימוש עד לפחות שהדיסק השני יגיע ל50 אחוז. 

2. הצריכת חשמל שלך נראת בסדר גמור, אני לא מכיר כלכך את ניהול החשמל במערכת שלך, 

אבל אני מאמין שאתה יכול להפחית אותה עוד יותר,

אכן מעבד מסדרה T או GE יכול להפחית עוד יותר את צריכת החשמל, 

הספק כח שלי הוא גולד אך עם ניצולת של 92 אחוז. 

3. אתה עושה שימושים מעניינים בNAS שלך, השאלה היא האם AI לא מצריך כ.מסך רציני לצורך חישובים ?

לגבי JELLYFIN אני משתמש בו מחוץ לבית, הוא נהדר, אבל בתוך הרשת אני משתמש בPLEX, 

אני חושב להתקין דוקר שאמור לסנכרן בניהם את הציפיות שלי. 

 

 

 

 

ציטוט של ClassMulder

ועוד משהו, הכלי שבו אני משתמש לבדיקת דיסקים הוא HARD DISK SENTINEL

שים לב שהוא עובד נהדר, אבל בדיסקים מעל נפח מסוים, כאשר אתה מחבר אותם דרך מארז USB חיצוני, בדיקה מהירה תסתיים אחרי 30 שניות בלי שתעשה כלום (היא אמורה לקחת דקה). זה קשור לממשק ולחומרה של המארז החיצוני. זה מה שקרה לי עם הדיסקים שקניתי, למרות שהם תקינים לחלוטין. כדי לוודא, התחלתי הרצת בדיקת סקטורים עם אותה תוכנה ונתתי לזה לרוץ כשש דקות לדיסק. בדרך כלל יהיו בעיות עם ההתחלה של הדיסק בדיסקים תקולים. זה לא אופטימלי, אבל לא באמת רציתי לשרוף ימים על בדיקה של כל דיסק ודיסק. אז אם אתה רוצה להריץ בדיקה מהירה בצורה תקינה, תצטרך כנראה לחבר אותם ישירות ללוח שלך ב-SATA - במחשב עם חלונות.

ניתן להתקין בUNRAID

 HARD DISK SENTINEL (משתמש בו בוינדוס)  

אבל בפועל אין צורך בו, זה ניהול דיסקים התראות וכו' בצורה מובנת , הוא מצוין.

 

ציטוט של shimonta

3. אתה עושה שימושים מעניינים בNAS שלך, השאלה היא האם AI לא מצריך כ.מסך רציני לצורך חישובים ?

לגבי JELLYFIN אני משתמש בו מחוץ לבית, הוא נהדר, אבל בתוך הרשת אני משתמש בPLEX, 

אני חושב להתקין דוקר שאמור לסנכרן בניהם את הציפיות שלי. 

כן, בשביל ביצועים טובים אכן צריך להתקין כרטיס מסך (רצוי של NVIDIA כי הוא הכי נתמך באפליקציות ובדוקרים), ואני בינתיים לא מצליח לרתום את כרטיס המסך המובנה למטרה הזאת. עם זאת, LLAMA-GPT ו-SERGE - שני הדוקרים שאני משתמש בהם, יודעים להשתמש במעבד בלבד (אם כי באיטיות, ובמחיר של אחוז שימוש גבוה והתחממות) כדי לבצע את פעולתם. זה כמובן שגם מגביל אותי מבחינת גודל המודלים בהם אני יכול להשתמש, ובינתיים גם אני לא טורח לנסות אפילו טקסט לתמונה אלא נשאר עם צ'אטבוטים. כנראה אצטרך לעבור למארז יותר מרווח ולהוסיף כרטיס מסך כפי שאמרת אם ארצה לעבוד עם ה-NAS בצורה טובה יותר ל-AI.

אגב מארזים , 

ראית את המארז של JONSBO N5 מתערוכת Computex 2024 ?

ציטוט של shimonta

אגב מארזים , 

ראית את המארז של JONSBO N5 מתערוכת Computex 2024 ?

כן, ראיתי. מאוד מרשים. אבל אני מיד חושב כמה קירור אצטרך להוסיף ככל שאני מוסיף עוד דיסקים 

את חושב?

במארז כזה, לא חושב שיש בעיית התחממות, יש שפע של מקום. 

ציטוט של shimonta

את חושב?

במארז כזה, לא חושב שיש בעיית התחממות, יש שפע של מקום. 

עם 12 דיסקים וגם כרטיס מסך? סביר להניח שיהיה צריך הרבה קירור..

נראה שהמארז מאוורר כראוי ויש עוד מקום ל 3 מאווררים, 

לא הייתי דואג יותר מדי  

26.09.2024

 

עדכונים קטנים : 

 

אז בתקופה האחרונה התמקדתי בחידוד הביצועים ובעיקר בתוספת אבטחה לכל מה שחשוף לאינטרנט

דרך Reverse proxy

 

לצורך בחינת הביצועים של השירותים שלי, השתמשתי pingdom

קיבלתי שם טיפים שיישמתי כמו תיקון Cache ועוד כמה דברים,

אחרי התיקון ניתן לבחון שוב ולראות את הציון, ישנו שיפור ביצועים.

 

 

DDNS

 עדכון כתובת הIP שלי היה נעשה באמצעות קונטיינר DUCKDNS

 אך היות ואני כבר משתמש בCLOUDFLARE  לנהל את הDNS

 החלטתי ליישר קו ולהשתמש בקונטיינר של DDNS CLOUDFLARE

 מחובר ישירות לחשבון ומעדכן את כתובת הIP שלי.

  

REVESE PROXY

SWAG – הכנסתי כמה שיפורים :

• 1. הוספתי אוטומציה באמצעות DOCKERSCOKET זה מאפשר להכין את החיבור בצורה כמעט אוטומטית.
• זיהוי כתובת IP אמיתיות מDNS של CLOUDFLARE.
•  
• 2. הוספת שכבת הגנה לפני כמה ימים התחלתי לחפש דרכים להגביר את האבטחה בחיבור אל השירותים שלי,
• תחילה הפעלתי את היישום fail2ban שהוא כבר חלק מחבילת הreverse proxy  של SWAG,
• יומיים או שלושה לאחר מכן המשכתי לחפש ונתקלתי בכלי אחר (הפירוט למטה)

 

3. CROWSEC – מי שלא מכיר היא תוכנה בקוד (לא להתבלבל עם (CrowdStrike, כמו fail2ban אך הרבה יותר מתוחכמת היא גם רצה על LOG של ה reverse proxy של הקונטנרים / SYSLOG

וע"פ חוקיות מסוימת היא תזהה ניסיון BURTE FORCE  , BOT , 15 אלף כתובות  IPשמתעדכנות כל שעתיים,  ניסיונות לניצול חולשות אבטחה CVE  ידועות שהאקרים מנצלים,

אורך החסימה ניתן  ניתן לקבוע ע"פ רצונכם, 

היא משמשת כ Bouncer ל reverse proxy,   ויכולה להתחבר גם לFIREWELL  של PFSENSE ,WRT , ועוד.

בכל יום נחסמים 7-6 כתובות IP

בנוסף היא יודעת לשלוח התראות למייל וכל מיני שירותים,

במקרה הזה בחרתי בתבנית של discord  היות ואני משתמש בה לקבל את כל ההתראות מNAS אצלי.

 

 

 תמונת טרמינל - האלו החלטות שנלקחו ע"י Crowsec 

 

 

תמונה מדיסקורד ממנו אני מקבל את עידכוני דחיפה מUNRAID  והחסימה שמתקבל בדפדפן

 

 

קונטנרים שהוספתי :

1. Collabora – קונטיינר לשירותי אופיס למעשה מאפשר לפתוח ולערוך מסמכים ישירות מהענן, מבלי להוריד את הקובץ פיזית. עבור NEXTCLOUD שכבר מותקן אצלי, ניתן לערוך WORD ,EXCEL, POWERPOINTיש AUDIT מובנה, כולל שמירת גרסאות.

 

 

- Goacess .2  דשבורד עובר התעבורה התקשורת שמתבסס על הLOG מswag

 

 

3. Mealie – ניהול מתכונים, רשימת מצרכים, עם גישה לרשת, ניהול משתמשים וכו'.

ניתן לטעון מתכונים ישירות מקישורים מאתרי אינטרנט, או ידנית,  הוא יהפוך לכם את זה למתכון שמור.

 

 

תקשורת 

 שקע חכם למדידת צריכת חשמל  הוספת שקע חכם לצורך מדידת צריכת החשמל, עולה בסביבות 8 דולר.

נראה שצריכת החשמל מNAS +UPS צורכים בממוצע 1.6 קילו וואט ליום, אני חושב להוסיף מפצל לUPS שיגבה את הראוטר ועתיד את ממיר המדיה.

 

 

רכשתי ראוטרGL-INET FLINT 2  עם WAN וחיבור LAN אחד במהירות 2.5G לצורך הגברת התעבורה בין הNAS לשאר הצרכנים, בהמשך אני יבעט את הראוטר של הספקית.

נערך 2024 בספטמבר 26ספטמבר 26 על-ידי shimonta

כמה עדכונים מאז הפעם האחרונה:

חוויתי קריסה קטנה,
מערכת הקבצים מסוג btrfs המשמשת את הNVME החלה לדווח עם Corruption errors
מה שנעל את הNVME למצב Read Only הוא מכיל את כל הAPPDATA
את התראה שקיבלתי באמצעות Fix Common Problem

המצב זה לא אפשר פעילות תקינה של הקונטנרים שלי,
והקריס את הIMG של הקונטנרים.
המערכת בנוסף החלה לעשות Parity Check.

ניתן למוצא את השגיאות בנתוני הדיסקים או בLOG של UNRAID


תחילה חשבתי שNVME אינו תקין,
אך במידע שמצאתי בפורום הרשמי של הUNRAID ציון שם שזו תקלה ישירה של הRAM, אז הרצתי סריקה ואכן, אחד הזכרונות נופל בבדיקת MEMTEST המובנת כבר בUNRAID.

הסרתי אותו ונשארתי למספר ימים עם 16GB במקום ה32GB צריכת זיכרון ע"י המערכת עשתה שימוש בסביבות ה 55% מהזיכרון,
שזה אפקטיבית לא אמור להשפיע על הביצועים.

שחזור המערכת היה די פשוט, הודות לפלאגין Appdata Backup
אשר מגבה את הAppdata ואת הXML עם נתוני הקונטיינר (לא פחות חשוב)

- בנוסף העתקתי את תוכן הכונן ה NVME אל המערך הדיסקים או לכונן NVME אחר, אני העתקתי את התוכן לNVME השני , כי מדובר בקבצים קטנים שNVME (מהיר יותר ביחס לדיסק קשיח) ניתן גם להשתמש בMOVER המובנה.
- מעתיקים את התוכן שאינו מגובה ב Cache אם יש כזה.
- מפרמטים את כונן הCache
- נכנסים Appdata Backup ועושים שחזור ליום הרלוונטי.
- לאחר מכן מורידים את כל הקונטנרים מחדש דרך החנות באמצעות Previous Apps מסמנים מה רוצים להתקין והכל מותקן מחדש, חשוב לציין שיש ליצור מראש את Custom Network אם קיימים לכם כאלה.

כל תהליך השחזור לקח לי שעה + -

לאחר שהכול חזר לקדמותו היה לי תחושה לפחות בממשק שהמערכת מעט איטית יותר,
אולי זה בגלל שאיבדתי את הdual channel למרות שטכנית מדובר בתוספת ביצועים זניחה.
חיפשתי להחליף את הזיכרון הנותר, כדי לא להיתקל במצב בו המערכת רצה עם זיכרון יחיד, חיפשתי צמד זיכרונות 16X2 באמאזון הם היו עולים לי כ190 ₪,

אך בסופו של דבר מצאתי ביד שניה זיכרון CRUCIAL DDR4 3200Mhz 32GB*2 ב
במחיר יחסית טוב כ300 ₪, אז כרגע אני עם Gb64 שזה באמת אוברקיל, אבל בשביל הפרש של 100 ₪ לטעמי היה שווה את זה.
אז החלפתי את הזיכרון הקיים, הרצתי MEMTEST הכול נראה תקין,
צריכת הזיכרון הממוצעת היא 14 אחוז מסך הזיכרון.



היות ויש לי כרגע המון זיכרון מיותר, הגדרתי עבור הTRANSCODING שימוש RAM DISK בjellyfin ,
כך שכל הזרמת מדיה שעוברת המרה תשתמש בRAM ולא בNVME זה חוסך קצת wear מNVME, ומקצר את IO
ההגדרה די פשוטה, ניתן ליצור תיקייה חדשה או להשתמש בקיימת /dev/shm אשר מגבילה את השימוש עד ל 50% מנפח הזיכרון.
יתרון נוסף של תייקית /dev/shm לא צריך להכניס פקודה בקובץ האתחול של המערכת שתייצר אותה בכל פעם מחדש לאחר אתחול.


הגדרתי גיבוי לוינדוס באמצעות מערכת הגיבוי המובנת שלו, היא רצה פעם בשבוע, ויוצרת נקודת שחזור,
בקריסה של המערכת ניתן לשחזר ישירות באמצעות דיסק התקנה/מצב השחזור לפני שמערכת ההפעלה עולה.

אופס טעות.

נערך אפריל 5אפריל 5 על-ידי ClassMulder

טיפ מעולה, תודה חבר, אבל זה הדיון שלי. 😆

ציטוט של shimonta

טיפ מעולה, תודה חבר, אבל זה הדיון שלי.

סליחה ומחילה. זה מה שקורה כשמתעוררים בשלוש וחצי בבוקר. עושים שטויות. בהצלחה!

הכל בסדר, אף אחד לא כועס 😄