מפרט לשרת אחסון קבצים - פרטים בפנים

[MightYaad]

שלום,

אני בתהליכי הקמת אתר איטרנט לשיתוף ואחסון קבצים, אני כרגע מתחיל בקטן לטובת התנסות.

אני מכיר שיש שרתים שבאים מוכנים עם הכל בפנים. אני לא רוצה כאלה אלא שרת מבוסס מחשב PC רגיל.

זה בשביל שאני אוכל לשנות אותו עם הזמן ולא יהיה מקובע וגם כי אני רוצה להקים הכל בעצמי.

אני לא בקיא בתחום השרתים בכלל. אשמח לקבל את עזרתכם בהרכבת מפרט למחשב. להלן הדרישות:

אין לי ממש תקציב כי אני עוד בשלבים הראשונים, תגידו אתם כמה לדעתכם הכל צריך לעלות.

בתור התחלה יכולת אחסון של 1-8 הארד דיסקים של 1TB.

מחשב חזק שיכול לשמש כשרת (מה יהיה בפנים זה המלצה שלכם).

מארז שיהיה אפשר לאחסן בו כמה שרתים במקביל, ולא מחשב בודד.

יכולת אוורור וקירור גבוהה, אני גר במקום חם (למרות המיזוג...).

בכללי אני רוצה לשמור את המפרט ואת המבנה הפיזי כמה שיותר דימני לשינויים עתידיים.

כלומר להוסיף עוד כונני אחסון או עוד שרתים.

ד"א אם אני רוצה לשים נגיד 50 כוננים (בכוונה מגזים...) איך עושים את זה?

הכוונה בצורה יותר יעילה שלא צריך מחשב לכל 4-8 כוננים.

תודה.

הנה מארז שחשבתי עליו:

בתוך ארון כזה (לטובת הרחבה עתידית):

[callMeAl]

אני מציע שתנסה לדייק ולצפות את הגדרת הדרישות שלך, למשל:

1. צפי מספר משתמשים במקביל מירבי וכמות העיבוד הנדרשת לכל משתמש (בממוצע ומירבית) - ההערכה הזאת תתן רעיון לגבי מספר השרתים שאתה צריך

2. דרישות שרידות - יש צורך ב-RAID לגיבוי?

3. אבטחה - מה הסיכונים שאתה צופה ומה ההגנות שאתה רוצה לתת

4. מנגנון חלוקת העומסים בין השרתים

5. כמה מידע נדרש לשמור לכל היותר בעבור כל משתמש

אפשרות קלאסית היא להגדיר מערך של שרתים שיעבוד מול המשתמשים ומערך של שני שרתים (אחד פעיל ואחד בSTANDBY לשרידות) שיעבוד מול מאגר האחסון. בין שרתי המשתמשים תצטרך מנגנון ניהול עומסים שיחלק עומסים כך שזה יכול להיות שרת שכל תפקידו להפנות את המשתמש לשרת הפנוי בתור או ע"י רכיב רשת נפרד.

ההבדלה טובה בעיקר אם הקשר או חלק מהקשר עם הלקוח מאובטח/מוצפן שאז העיבוד גדול יותר.

ב-Newegg יש דוגמאות רבות בנוגע לשרתים ואמצעי אחסון ואני מציע שתעיין במה שיש להם להציע לקבל רעיון על המחירים.

[multicore]

למה שלא תשכיר שרת או VPS בחווה? הרבה יותר הגיוני מאשר כל מה שכתבת.

[MightYaad]

כי אני מעדיף שזה ישב אצלי ואני אשלוט בהכל.

בכל מקרה סציפית בעניין של אחסון קבצים זה פחות ריאלי כי צריך המון מקום...אני טועה?

בכל מקרה אשמח לדעת מה טווח המחירים של מחשב כזה.

לגבי RAID אני כנראה ארצה, לא חובה בתור התחלה.

את תחום האבטחה עוד לא חקרתי.

כמות אחסון זה נתון לשיקול שלי, העניין הוא שאני רוצה אפשרות הרחבה נוחה וקלה.

כמות משתמשים תהיה של אתר ממוצע.

תבינו שאני עוד ממש בהתחלה. אני מנסה להבין מה עלות החומרה פה.

[multicore]

כי אני מעדיף שזה ישב אצלי ואני אשלוט בהכל.

מה גורם לך לחשוב שיש לך פחות שליטה? השתמשת פעם בציוד שמאורח בחווה?

בכל מקרה סציפית בעניין של אחסון קבצים זה פחות ריאלי כי צריך המון מקום...אני טועה?

מקום למה? תקנה כמה איחסון שאתה רוצה על גבי איחסון שריד. בAWS יש אחלה תבניות לדברים האלו.

[MightYaad]

פחות נוח כי הכל מתנהל מרחוק על תשתית אינטרנט שהיא פחות מהירה (מאשר אם המחשב לידך...).

הממש' הוא קבוע שלהם והרבה יותר קשה לעשות שינויים.

יצא לי כבר להרים אתר ניסיוני בעבר ואין תחליף לזה שהמחשב נמצא אצלך פיזית.

מה גם שהכמות אחסון לא רלוונטית...אתה מקבל 5GB לכל היותר

שאין לזה משמעות בקנה מידה של אתר אחסון קבצים.

[multicore]

מה אתה כבר צריך? גישה בSSH?

אני חושב שאנחנו מדברים על דברים שונים לגמרי.

אני גם לא מבין מה הבעיה אם יש ך גישה לBMC של השרת בחווה. תעשה כל מה שבא לך עם גישה מהירה ושריד לאינטרנט, חיבור חשמל שריד ויכולות התרחבות.

אתה באמת מתכן לארח שרת 1U ו2U של איחסון אצלך בבית ברצינות?

[MightYaad]

זה הרעיון.

לאחסן את כל הקבצים שיעלו לאתר ע"י משתמשים יגיע מהר מאוד לכמות אחסון שתעלה הרבה כסף...

[multicore]

אז תתרחב/תתצמצם עם הצורך שלך. זה כל הרעיון של resource provision.

ככה כל פרוייקט רציני נבנה.

אני לא כותב את כל זה כי המצאתי את זה עכשיו. בחיים המקצועיים שלי אני DevOps של תשתית של מאות ואלפי nodes.

[MightYaad]

מה הכוונה שלך...?

לבחור באתר שלא מצריך הרבה מקום או להישאר עם הרעיון המקורי ולהשקיע את הסכום הנדרש?

מה החסרונות מבחינתך באחזקת שרת פרטי?

[multicore]

כל החסרונות שאתה יכול לחשוב עליהם:

• צריכת חשמל.
  
• רעש.
  
• צורך בקירור.
  
• חוסר שרידות או שירות כאשר אתה לא ליד החומרה.
  
• חוסר גמישות ומודולריות במשאבים שלך.
  
• קישוריות מוגבלת ולא ללא שרידות החוצה.
  

נגיד והפרוייקט שלך הצליח עכשיו אתה מוכן להריח אותו למשהו רציני או שהכל נכשל ואתה הולך לסגור אותו. מה אתה הולך לעשות עכשיו עם כל הברזל שנערם אצלך בבית?

אתה רוצה להוסיף עוד nodes ולהרחיב את ה cluster שלך. מה תעשה? תהפוך את הבית שלך לחווה? ומה קורה אם אתה רוצה לשמור כמה snapshotים וגיבויים של המערכת? איך תטמיע גרסא בכל המערך?

מחר אתה רוצה להפיץ חלק מהשירות בCDN או לפזר nodes באזורים גיאורפיים שונים. איך תארוז את השירות שלך כאשר הוא לא נבנה לאריזה?

תראה מה מציעים לך היום מבחינת שירותי ענן. יש דברים דיי מדהימים מבחינת יחס מחיר למשאבים.

לדוגמא:

https://www.digitalocean.com/pricing

[MightYaad]

הבנתי אותך.

נניח וקניתי עכשיו מקום לחודש. איך אני מתקין שם את כל הדברים ובונה מזה אתר?

[multicore]

על איזה טכנולוגיות הפרוייקט שלך מבוסס?