racavedigger.com
Daily insights on Bitcoin and crypto markets
  • Facebook
  • Pinterest
  • Home
  • News

האם נטפליקס משתמשת באמזון S3

Νίσα

ארכיטקטורת נטפליקס: כמה עולה AWS של נטפליקס?

אם אי פעם תהיתם כמה נטפליקס משלמת עבור עלויות ה- AWS שלה, אתם במזל. במאמר זה נחקור את מפלצת היעילות שמאחורי כל זה – ארכיטקטורת נטפליקס AWS. בואו נצלול פנימה!

1. היא נטפליקס רווחית בשנת 2021?

נטפליקס הרוויחה הכנסה תפעולית של 4 דולר.6 מיליארד בשנת 2020, אם כי תזרים המזומנים החינמי החיובי שלה היה 1 $.9 מיליארד. עם זאת, ענקית הסטרימינג מצפה להישבר אפילו בתנאים מזומנים בסוף 2021, למרות שיש לו חוב ענק של 15 מיליארד דולר.

2. כמה נטפליקס מוציאה על AWS?

עלויות AWS של נטפליקס הוערכו בסביבות 9 $.6 מיליון לחודש בשנת 2019. עם זאת, החברה מתכננת להוציא מעל מיליארד דולר על שירותי סטרימינג ועלויות מחשוב ענן עד 2023, בממוצע של מעל 27 $.78 מיליון לחודש.

3. איך נטפליקס משתמשת בהוצאת AWS שלה?

נטפליקס מסתמכת על AWS כמעט על כל צרכי מחשוב הענן שלה. זה כולל אחסון מקוון, מנוע המלצות, קידוד וידאו, מסדי נתונים ואנליטיקס. AWS ממלאת תפקיד מכריע בתמיכה בשירותי הסטרימינג של נטפליקס.

4. כיצד נטפליקס עוקבת ומודדת עלויות AWS?

נטפליקס יישמה מערכות ניטור ומדידה קפדניות כדי לעקוב אחר עלויות ה- AWS שלה. הוא משתמש בכלים וטכנולוגיות שונות כדי לנתח ולייעל את הוצאות הענן שלה, להבטיח יעילות מקסימאלית ויעילות עלות.

5. כיצד נטפליקס משתמשת בשירותי מיקרו?

נטפליקס מנצלת ארכיטקטורת שירותי מיקרו -שירות, ומפרקת את היישומים שלה לשירותים קטנים ועצמאיים. זה מאפשר מדרגיות, גמישות ופיתוח מהיר יותר, מה שמאפשר לנטפליקס לספק חוויות סטרימינג חלקות למיליוני משתמשים ברחבי העולם.

6. מדוע נטפליקס בחרה AWS?

נטפליקס בחרה ב- AWS כספק הענן העיקרי שלה בגלל יכולת המדרגיות, האמינות ומגוון השירותים המקיף שלה. AWS הציעה את התשתית והכלים הנחוצים לתמיכה בצמיחה האקספוננציאלית של נטפליקס ולספק חווית סטרימינג יוצאת דופן למשתמשים שלה.

7. איך קידוד הניתוח עובד בארכיטקטורה של נטפליקס?

קידוד הניתוח הוא תהליך המרת קבצי וידיאו מפורמט אחד למשנהו כדי להבטיח תאימות בין פלטפורמות ומכשירים שונים. נטפליקס משתמשת בקידוד כדי להפוך את הספרייה העצומה של התוכן למכשירים שונים, ומאפשרת למשתמשים להזרים את התוכניות המועדפות עליהם בצורה חלקה.

8. איך נטפליקס מטפלת באחסון ב- AWS?

נטפליקס ממנפת שירותי אחסון AWS, כמו אמזון S3, לאחסון הספרייה המסיבית שלה לתוכן וידאו. שירותים אלה מספקים עמידות גבוהה, זמינות ומדרגיות, ומבטיחים כי נטפליקס תוכל לספק תוכן למיליוני צופים ללא הפרעה.

9. כיצד נטפליקס מבטיחה חווית סטרימינג חלקה?

נטפליקס מפסקת טכניקות שונות, כגון רשתות משלוח תוכן (CDNs) וזרם אדפטיבי, כדי להבטיח חווית סטרימינג חלקה עבור המשתמשים שלה. CDNs מפיצים תוכן מבחינה גיאוגרפית, מצמצמים את ההשהיה ושיפור מהירות ההפעלה, ואילו סטרימינג אדפטיבי מתאים את איכות הווידיאו בהתבסס על חיבור האינטרנט של הצופה.

10. כיצד נטפליקס מטפלת בניהול מסדי נתונים ב- AWS?

Netflix משתמשת בשירותי מסד הנתונים של AWS, כמו Amazon Dynamodb ו- Amazon Redshift, כדי לנהל את הכמות העצומה שלה של נתוני משתמשים, מטא נתונים תוכן וניתוח. שירותים אלה מציעים ביצועים גבוהים, מדרגיות ואמינות לצרכי מסד הנתונים של נטפליקס.

בסך הכל, ארכיטקטורת AWS של נטפליקס ממלאת תפקיד מרכזי בהעברת שירותי הסטרימינג הנודעים שלה למיליוני משתמשים ברחבי העולם. השימוש האסטרטגי של החברה בשירותי AWS, ניטור עלויות קפדני ותשתית יעילה מאפשר ל- Netflix לספק חווית סטרימינג יוצאת דופן תוך ניהול עלויותיה ביעילות.

ארכיטקטורת נטפליקס: כמה עולה נטפליקס A AWS

קידוד הוא התהליך שממיר קובץ וידאו מפורמט אחד למשנהו, כדי להפוך את הסרטונים שניתן לצפייה בהם על פני פלטפורמות ומכשירים שונים.

האם נטפליקס משתמשת באמזון S3

Б эой сранице

Ы зé. С помדיר. Почем эо мого?

Эа сраница о бображае тех сах, кога воматеשיים си сисלוח рmе рגות р רבות ш רבות р р рוהים р рוהים которые нé. Сраница пересанет ообрוחים. До эого момента д.

Исочником запросов может сmжж вредоносfte по, подаееые моди базלוח нилm mчnзnзnчnчnчnчnчnчnчnчnчnчnчnчnчnчnчзדי ы з запросов. Еи ы иололalty ощий дדיר. O. Подробнרבה.

Проверка по сов может тelte пояяе, еи ы водите сדיר еами, или же водите запроы ченн часо.

ארכיטקטורת נטפליקס: כמה עולה AWS של נטפליקס?

גלה כמה עלויות חשבון AWS של נטפליקס ומפלצת היעילות מאחורי כל זה, ארכיטקטורת נטפליקס AWS.

2 ביוני 2021 | מאת: צוות Cloudzero |

עלות נטפליקס AWS

האם הכלי הנוכחי שלך עלות הענן מעניק לך את האינטליגנציה עלות שאתה צריך? רוב הכלים הם ידניים, מגושמים ולא מדויקים. גלה כיצד Cloudzero נוקט בגישה חדשה לארגון הוצאות הענן שלך. לחץ כאן כדי ללמוד עוד

אם נטפליקס הייתה סדרה, זו תהיה שובר קופות. כל עונה לא תהיה פחות דרמטית למגינת לב המשקיעים.

רוצה לרסק כמה מספרים?

לשירות הזרמת הווידיאו היה 11 $.הערכת שווי של 5 מיליארד בינואר 2011. היו לה כ -26 מיליון מנויים בסוף אותה שנה. עשר שנים לאחר מכן, נטפליקס דיווחה כי היו לה כ 204 מיליון מנויים והערכה של מעל 220 מיליארד דולר.

הענק של לוס גאטוס, קליפורניה, העביר 25 מיליארד דולר ב -2020 בהכנסות שנתיות. נטפליקס גם בירכה על 37 מיליון מנויים בתשלום מבהיל בשנת 2020 בלבד, רשומה חדשה.

עם זאת, עם כל ההצלחה הזו ומספר עצום של מנויים, יתכן שאתה תוהה מה נטפליקס משלמת בעלויות ה- AWS שלה. כל הפעילות הזו בטוחה בחשבון נכון כמה הוצאות רציניות?

למזלם, יש לנו את התשובה! במאמר זה, נסקור כמה נטפליקס מוציאה על AWS, לאן הכסף הזה הולך, איך הם מודדים ומפקחים על עלויות הענן שלהם, והארכיטקטורה שמאחורי הכל.

תוכן העניינים

  • היא נטפליקס רווחית בשנת 2021?
  • כמה נטפליקס מוציאה על AWS?
  • איך נטפליקס משתמשת בהוצאת AWS שלה?
  • כיצד נטפליקס עוקבת ומודדת עלויות AWS?
  • כיצד נטפליקס משתמשת בשירותי מיקרו?
  • מדוע נטפליקס בחרה AWS?

מאמר קשור: 11 הכלים הטובים ביותר לניהול עלויות ענן בשנת 2022

היא נטפליקס רווחית בשנת 2021?

נטפליקס הרוויחה הכנסה תפעולית של 4 דולר.6 מיליארד בשנת 2020. אבל היה לזה רק $ 1.9 מיליארד בתזרים מזומנים חיובי בחינם לאותה שנה. עם זאת, זה היה שיפור עצום מכיוון שזה בדיוק יצא מ -3 דולר דוקרניים.3 מיליארד מצב תזרים מזומנים שלילי בשנת 2019. היה לו גם חוב ענק של 15 מיליארד דולר בתחילת 2021.

אבל שירות הסטרימינג טוען שזה לא בית כרטיסים. היא מצפה להישבר אפילו בתנאים מזומנים בסוף 2021.

אז אתה יכול לתהות, איפה נטפליקס מוציאה את מיליארדיו?

  • תוֹכֶן
  • תוכן מקורי
  • תוכן מורשה
  • שיווק

אבל שם’קטגוריית השקעות אחרת שלא’לא לקבל תשומת לב רבה, לפחות בוול סטריט: עלויות נטפליקס AWS.

ארכיטקטורת Netflix AWS היא מקרה שימוש גאוני של מיקרו-שירות שכדאי לחפור בפוסט זה.

כמה נטפליקס מוציאה על AWS?

נטפליקס’הוצאות הענן נותרו סוד לאורך זמן, עד עכשיו. מקורות שונים מעריכים כי נטפליקס AWS עלות ב -9 דולר.6 מיליון לחודש בשנת 2019.

אבל הנתון הזה הוא הרבה פחות ממה ששירות הזרמת הווידיאו מתכנן להוציא ב -36 החודשים הבאים.

נטפליקס חשפה שהיא תוציא יותר ממיליארד דולר “שירותי סטרימינג ועלויות מחשוב ענן” עד 2023. זה יהיה ממוצע נטפליקס’S AWS Cloud Services עולה מעל 27 $.78 מיליון לחודש.

אין פלא שאמזון מתגאה בנטפליקס כלקוחה הגדולה ביותר של AWS באופן קבוע, למרות שהיא בעלת שירות מתחרה באמזון פריים. לשם השוואה, Airbnb מתכננת להוציא 1 דולר.2 מיליארד בשירותי אינטרנט AWS לפני 2027, שממוצע ל -16 דולר.67 מיליון לחודש.

Slack משתמשת גם בשירותי ענן AWS כספק הענן הראשי שלה. היא התחייבה להוציא 450 מיליון דולר עד 2025. זה יתחיל עם 75 מיליון דולר בשנת 2021 ויגדל 5 מיליון דולר בכל שנה, בממוצע 6 דולר.25 מיליון לחודש בהוצאות AWS.

איך נטפליקס משתמשת בהוצאת AWS שלה?

נטפליקס משתמשת ב- AWS כמעט לכל מחשוב ענן. זה כולל אחסון מקוון, מנוע המלצות, קידוד וידאו, מסדי נתונים ואנליטיקס. כך שרוב מיליארד דולר נטפליקס מתכננת להוציא על שירותי ענן יועברו לשירותי ענן אמזון.

כמה עלויות חשבון AWS של נטפליקס משקפות את השימוש בו בלמעלה מ 100,000 מקרי שרת, על פי שירותי האינטרנט של אמזון.

כדי לעבד את התנועה הקולוסלית, המנויים העולמיים שלה מייצרים, נטפליקס משתמשת במקביל ליותר מ -1,000 שרידי קינזיס באמזון במקביל.

אבל זה היה בשנת 2017 לפני שנטפליקס צמחה ל 204 מיליון מנויים בסוף 2020.

גרף נטפליקס

אבל זה נהיה מעניין:

  • כ- 83% מהמנויים החדשים נמצאים מחוץ לארצות הברית וקנדה.
  • שבעה מיליון מנויים חדשים הצטרפו לנטפליקס ברבעון הראשון, 2021.
  • נטפליקס משחררת 71 סרטים בשנת 2021 בלבד. זה מעל סרט חדש אחד בשבוע.
  • המתחרים המובילים כמו דיסני+, Paramount+ו- Peacock עשויים לאכול בנטפליקס’הרווחים קדימה. לדוגמה, לדיסני+ היו 7 מתוך 10 מהסרטים שהוזמו ביותר בשנת 2020.
  • נטפליקס רוצה גם להפוך לחברה רווחית ומימון עצמי מעכשיו.
  • אבל זה ירכוש מחדש מניות מהמשקיעים בשנת 2021/2022.

מה זה אומר עבור נטפליקס?

ראשית, בעוד שהחברה מתכננת להוציא פחות על עלויות תוכן, שיווק ואשראי, חשבון AWS שלה יתנדנד רק כלפי מעלה. שנית, החברה צריכה להרוויח רווחים נטו גבוהים יותר כדי לא רק לפייס את בעלי המניות, אלא גם להיות מסוגלת להתנער מימון חיצוני על פעילותה היומיומית.

לחלופין, הוא צריך לחסוך עלויות כדי להרשות לעצמו להישאר תחרותי בשוק יותר ויותר תחרותי.

לכן איזון בין יעילות עלות וקנה מידה הוא עניין של הצלחה או כישלון עבור נטפליקס. עם זאת, חברת הסטרימינג אמרה כי קביעת תקציבים ומעקות כבדים אחרים כדי להגביל את המהנדסים שלה’ ההוצאות הן שניהם “לֹא יָעִיל” וכן “נגד תרבותי”.

אז נטפליקס מאפשרת למפתחים להתפתח. אבל זה לא מתעלם מעלויות חישוב ענן.

ייתכן שתאהב: רשימת כלי DevOps המוחלטת: 55 כלים לשנת 2022

כיצד נטפליקס עוקבת ומודדת עלויות AWS?

הצוות בנטפליקס יודע שעלויות ענן ראויות להיות מדד מהשורה הראשונה. זה אומר שהם מתייחסים לזה כמו כל דרישת הנדסה מדד או לא פונקציונלי אחר.

כדי לספק נראות מלאה של עלות, החברה פורסת לוח מחוונים בהתאמה אישית של נתונים. לוח המחוונים היעילות משמש לולאת משוב שקופה לצרכני הנתונים שלה ומפיקים. קרדיט נטפליקס מיזוג על עלות ושימוש בהקשר באמצעות לוחות מחוונים עבור הארכיטקטורה החסכונית שלה.

לוח המחוונים המותאם אישית עוזר לספק שימוש במודעות עלות ענן לכל צוות.

נטפליקס מצליחה:

  • דווח על נתוני חיוב AWS בהקשר הגיוני
  • השתמש בלוח מחוונים מותאם אישית כדי להעביר את הקשר עלות לכל צוות
  • שפר את נראות עלות הנתונים על ידי דחיפת מידע רלוונטי למקבלי החלטות רלוונטיים

כדי להעריך עד כמה עסקה גדולה, קחו בחשבון את כמויות הנתונים והפלטפורמות השונות שנטפליקס צריכה לצבור במקום אחד, לחשב ולשלוח למהנדסים כדי שיוכלו להמציא אסטרטגיות אופטימיזציה של עלות ענן עובדת.

הנה פירוט מהיר.

שירות הזרמת הווידיאו משתמש בדרך כלל בשני סוגים של פלטפורמות נתונים; נתונים בתנועה ונתונים במנוחה. בעוד שקטגוריית העלות הראשונה כוללת עיבוד נתונים חולפים, נתונים במערכות מנוחה כוללים עלויות אחסון נתונים פיזיות. שתי העלויות כוללות הוצאות תשתית.

הוצאה לאחסון נתונים של נטפליקס עוברת לפלטפורמות כמו מחסן נתונים של S3, AWS RDS, HIVE, DRUID, Elasticsearch ו- Snowflake.

בצד ההפוך, נטפליקס מבזבזת על אבן המפתח, נרת, גמל, קפקא, ניצוץ ופרסטו כדי לעבד נתונים בתנועה.

מערכת אקולוגית של נטפליקס

קרדיט: זרימת נתוני לוח המחוונים של נטפליקס יעילות, בלוג טק של נטפליקס

עכשיו דמיין את זה.

נטפליקס מקבלת את נתוני החיוב של AWS באמצעות דוח עלות AWS ושימוש, כמו כולם. אתה יכול לדעת שהנתונים יכולים להיות קשים לגזור תובנות עסקיות משמעותיות אם אתה צורך אותם באמצעות S3 או CSV. זה מאתגר עוד יותר עבור מקבלי ההחלטות שאינם מדעני נתונים.

שירותי נטפליקס AWS

זה המקום בו נטפליקס’לוח המחוונים ליעילות נכנס. זה מעביר עלויות על כל הפלטפורמות שלה, ואפילו מפרק את זרימת הנתונים לתובנות עסקיות הגיוניות.

מדדי נטפליקס

משם, מקבלי ההחלטות יכולים לדעת לאן ההוצאות הענן שלהם הולכות.

נטפליקס’לוח המחוונים המותאם אישית מספק כמה המלצות אופטימיזציה של עלויות, אשר אינך תום’לא נכנס לדוח החיוב שלך ב- AWS. אמנם אתה יכול להשתמש בתגיות כדי לחשוף פריטי חיוב המתייחסים, אך הטכניקה עשויה לא להראות כיצד מפות משאבים שונים לחיוב מה שחשוב לעסק שלך .

תזדקק לפיתרון נראות טוב יותר לעלות כדי לשייך עלויות ספציפיות לצוות, מוצר, שירות או מחלקה מסוימים. ככה, הייתם קובעים כמה עולה לבנות ולנהל אלמנטים שונים בעסק שלכם.

הכל מבלי להזדקק להעסיק צוותים של מדעני נתונים ומהנדסים מתוחכמים בנטפליקס’S בקנה מידה. מה שאתה יכול לעשות כמו נטפליקס הוא לספק הקשרים רלוונטיים לאנשים שמקבלים החלטות טכנולוגיות בזמן כמעט-זמן.

עם מודיעין בזמן אמת, אתה יכול לשים הנדסה בשליטה בעלויות הענן. הם יכולים לפקח ולמדוד את מדדי היחידה שלך וגלגליות על AWS כדי לגדל את השוליים שלך.

הנה דוגמא.

Cloudzero עובד עם Fruitlab, מדיה חברתית ופלטפורמת סטרימינג לגיימרים. בדומה לנטפליקס, Fruitlab התמקד בהנחת עלות העברת סרטונים למשתמשים שלהם כדי למקסם את הכנסותיהם.

בניגוד לנטפליקס, הם לא עשו זאת’יש צוות של מהנדסים שהם יכולים לסלק את מפת הדרכים שלהם.

אז הם היו זקוקים לפיתרון ראות של עלות AWS הגיוני ביומני הנתונים האינסופיים סטנדרטיים בדוחות חיוב AWS. Cloudzero עזר FruitKlab להפחית את עלות העברת כל זרם ב -18%.

Cloudzero משתמש בתהליך מונע ML כדי לעזור בבניית מיפויי הקשר אלה גם כשאתה לא’יש לך כיסוי תגיות מצוין בחשבונות שלך – ואף יכול להחיל תווית מטא נתונים על משאבים בלתי ניתנים לניתוק.

נטפליקס’גישת לוח המחוונים היעילות סייעה לה להפחית את טביעת הרגל של אחסון מחסן נתונים ב -10%. זהו מרווח משמעותי בהתחשב בסולם בו ארכיטקטורת שירותי המיקרו -שירות של נטפליקס פועלת על AWS.

איך עובדת ארכיטקטורת נטפליקס AWS?

נטפליקס משתמשת בארכיטקטורת שירותי מיקרו ב- AWS. ארכיטקטורת שירותי מיקרו עוזרת לארגון להתקין ללא עבודה נוספת. זה גם עוזר לשמור על פעולה חסכונית בענן ומבטל מקור יחיד לכישלון גם אם מהנדסים משנים אזורי שירות מרובים ב- One.

נטפליקס חוותה הפסקות משמעותיות באוגוסט 2008. זה חזר כשהשתמש בארכיטקטורה מונוליטית ובמרכזי נתונים פרטיים.

השחיתות של מסד הנתונים פירושה שהם לא יכלו למכור תקליטורי DVD במשך שלושה ימים ברציפות.

אירוע זה העיר את נטפליקס כדי להבין שהוא צריך להשתמש במודל פריסה רציף ולנתק יישומים כדי להימנע מהפסקות עתידיות.

הם ימנעו הפסקות אספקת שירותים על ידי שימוש בשירותים מרובים קטנים יותר שרצו באופן עצמאי במקום ערימה יחידה ופגיעה.

כיצד נטפליקס משתמשת בשירותי מיקרו?

שימוש בשירותי מיקרו יסייע גם למהנדסים שלה לשפר את היישומים העצמאיים במהירות ובכל עת. שינויים שנעשו בשירות מיקרו אחד לא ימעכו את כל הפעולה.

המהנדסים שלה יכלו להתנסות ברעיונות עיצוב טריים מבלי להשפיע על כל שירות נטפליקס’ביצועי S.

זריזות זו סייעה לשירות הזרמת הווידיאו לחדש את המהיר והעלות חסכונית יותר, מה שהוביל להנדסת כאוס, ספינקר וענן גלובלי, כמו גם הצמיחה חסרת התקדים שנטפליקס רואים כיום.

נטפליקס משתמשת למעלה מ -1,000 שירותי מיקרו עכשיו.

כל יישום פרוס שולט על היבט ספציפי של פעולת נטפליקס הקולוסלית.

לדוגמה, שירות מיקרו ייחודי שולט בכל אחת מהפעולות הללו:

  • צור רשימת תפריט ראשי של סרטים
  • קבע את סטטוס המנוי שלך כדי לספק תוכן הרלוונטי לאותו שכבת מנוי
  • השתמש בהיסטוריית הצפייה שלך כדי להמליץ ​​על סרטונים שאתה עשוי לאהוב
  • לחייב את כרטיס האשראי שלך כשהגיע הזמן לחדש את תוכנית נטפליקס שלך
  • שמור כרטיסיות על מכשיר משלוח התוכן הטוב ביותר לביצועים (CDA) בקרבתך למקרה שזו שאתה נמצא בו צופה או נכשלת
  • להעביר אותך אוטומטית ל- CDA עם חיבור האינטרנט החזק ביותר
  • אחסן עותק דיגיטלי של קבצי איכות מקוריים בקולנוע בשרתי AWS
  • וודא קבוצה נוספת של שרתי AWS להמיר את העותק המקורי לתכונות וידאו, פורמטים, גדלים ושמע שיכולים לשחק בצורה חלקה על כל מיני מכשירים, החל ממכשירים ניידים ועד טלוויזיות חכמות וציוד משחק
  • קבע באיזה מכשיר אתה צופה בנטפליקס ולספק את פורמט הווידיאו הרלוונטי כדי להגביר את חווית הצפייה שלך
  • הוסף סמני זכויות יוצרים לכל הקבצים (ניהול זכויות דיגיטליות)

אלה רק עשר דרכים שנטפליקס משתמשת בארכיטקטורת שירותי מיקרו -שירות לטובת היתרון שלה. יש מעל 990 דרכים יותר.

מדוע נטפליקס בחרה AWS?

נטפליקס נאבקה גם בסוגיות קנה מידה בארכיטקטורה הקודמת שלה. זה היה זקוק לפיתרון שלא הגביל אותם לקנה מידה אנכי.

היא רצתה לקנה מידה אופקית, לקבל זמן רב אמין ולשמור על הוצאות בענן עלות בענן. AWS סיפק סוג זה של פלטפורמת ענן.

השימוש בענן הציבורי AWS פירושו שנטפליקס יכולה להתמקד בעסקי הליבה שלה; הזרמת וידאו. זה לא היה צריך להוציא מיליארדים על בניית מרכזי נתונים ברמה העולמית כדי לקנה מידה של הארכיטקטורה הקודמת שלה.

עם AWS, נטפליקס מאפשרת למפתחים להשתמש בשיטות עבודה מומלצות לפריסה רציפה כדי לשפר את חוויות הלקוחות, והפכה לשירות הזרמת הווידיאו הגדול ביותר אי פעם.

אופטימיזציה של התשתית שלך כמו נטפליקס

זֶה’הכל טוב ויפה עבור נטפליקס, אבל מה אם אתה לא’יש מיליוני דולרים וצוותים שלמים שאתה יכול להקדיש למיטוב עלויות הענן שלך – קל וחומר לבנות כלי ניהול עלויות משלך?

למרבה המזל, אינך צריך להיות צוות של מדעני נתונים כדי לשפר את נראות עלות AWS שלך. אתה יכול להשתמש בפתרון אינטליגנציה עלות ענן כדי לחפור בחשבון AWS שלך ולהבין מה אתה מוציא ומדוע.

סחף השתמש ב- Cloudzero כדי לחסוך $ 1.8 מיליון עלויות ענן שנתיות. פלטפורמת השיווק השיחה עבדה עם Cloudzero ככלי ולא כצוות של מהנדסים ומדעני נתונים, בניגוד לנטפליקס. כתוצאה מכך, Drift הפחיתה את עלויות ה- AWS שלה עד 150,000 $ לחודש עם Cloudzero.

חיבור הנקודות בין המוצרים שלך ועלויות AWS יכול גם לעזור לך להישאר בשליטה על חשבון AWS שלך. Cloudzero מציעה פלטפורמת אופטימיזציה של עלויות בזמן אמת שמודיעה לך באופן יזום על שינויים, כך שתוכל לנקוט בפעולה בזמן כדי לייעל את ההוצאות שלך ב- AWS.

שוחח איתנו עוד היום על אספקת נתוני עלות רלוונטיים ישירות למהנדסים שלך, כך שתוכל לשפר את נראות עלות הענן שלך בזמן אמת ולהפחית את חשבון AWS שלך לאורך זמן.

האם נטפליקס משתמשת באמזון S3

תַאֲרִיך

יום שני, 11 בדצמבר, 2017 בשעה 8:56 בבוקר

מאמר זה הוא פרק מהספר החדש שלי הסבירו את הענן כמו אני בן 10. המהדורה הראשונה נכתבה ספציפית עבור חידושים בענן. ביצעתי כמה עדכונים והוספתי כמה פרקים –נטפליקס: מה קורה כשאתה לוחץ על Play? וכן מה זה מחשוב ענן?-זה רמה את זה עד כמה קרציות מעבר למתחילים. אני חושב שאפילו אנשים מנוסים למדי עשויים להוציא מזה משהו.

יצרתי גם גרסה מורחבת במקצת של המאמר בספר אלקטרוני של קינדל עצמאי. אתה יכול למצוא את הספר האלקטרוני בנטפליקס: מה קורה כשאתה לוחץ על Play?

אז אם אתם מחפשים היכרות טובה עם הענן או מכירים מישהו שהוא, אנא הסתכל. אני חושב שתאהב את זה. אני די גאה איך זה התברר.

משכתי את הפרק הזה יחד מעשרות מקורות שלעתים היו מעט סותרים. עובדות בשטח משתנות לאורך זמן ותלויות מי מספר את הסיפור ואיזה קהל הם פונים. ניסיתי ליצור נרטיב קוהרנטי ככל שיכולתי. אם יש שגיאות אשמח יותר לתקן אותן. זכור כי מאמר זה אינו צלילה עמוקה טכנית. זה מאמר גדול מסוג תמונה. לדוגמה, אני לא מזכיר את המילה שירות מיקרו אפילו פעם אחת 🙂

נטפליקס נראית כל כך פשוטה. לחץ על Play ו- Video מופיע בצורה קסומה. קל, נכון? לא כל כך.

בהתחשב בדיון שלנו ב מה זה מחשוב ענן? פרק, ייתכן שתצפה שנטפליקס תגיש וידאו באמצעות AWS. לחץ על הפעל ביישום נטפליקס ווידאו המאוחסן ב- S3 יוזרם מ- S3, דרך האינטרנט, ישירות למכשיר שלך.

גישה הגיונית לחלוטין … לשירות קטן בהרבה.

אבל זה’לא איך נטפליקס עובד בכלל. זה’s הרבה יותר מסובך ומעניין ממה שאתה יכול לדמיין.

לראות למה תן’S התבונן בכמה סטטיסטיקות נטפליקס מרשימות לשנת 2017.

  • בנטפליקס יש יותר מ -110 מיליון מנויים.
  • נטפליקס פועלת ביותר מ- 200 מדינות.
  • לנטפליקס הכנסות כמעט 3 מיליארד דולר ברבעון.
  • נטפליקס מוסיפה יותר מחמישה מיליון מנויים חדשים ברבעון.
  • נטפליקס משחקת יותר ממיליארד שעות וידאו בכל שבוע. כהשוואה, YouTube זורמת 1 מיליארד שעות וידאו כל יום בעוד שפייסבוק זורמת 110 מיליון שעות וידאו כל יום.
  • נטפליקס שיחקה 250 מיליון שעות וידאו ביום אחד בשנת 2017.
  • נטפליקס מהווה מעל 37% מתעבורת האינטרנט השיא בארצות הברית.
  • נטפליקס מתכננת להוציא 7 מיליארד דולר על תוכן חדש בשנת 2018.

מה למדנו?

נטפליקס ענקית. הֵם’מחדש גלובלי, יש להם הרבה חברים, הם משחקים הרבה סרטונים, ויש להם הרבה כסף.

פקטואיד רלוונטי נוסף הוא שנטפליקס מבוסס על מנוי. החברים משלמים ל- Netflix מדי חודש ויכולים לבטל בכל עת. כשאתה לוחץ על Play לצנן בנטפליקס, היה זה טוב יותר לעבוד. חברים לא מרוצים מבטלים את המנוי.

אָנוּ’מחדש הולך עמוק

נטפליקס היא דוגמא נהדרת לכל הרעיונות שאנחנו’דיבר עליו, וזו הסיבה שפרק זה פוגע הרבה יותר משירותי הענן האחרים שאנחנו’מכוסה.

סיבה אחת גדולה לצלילה עמוקה יותר בנטפליקס היא שהם מעמידים מידע רב יותר מאשר חברות אחרות.

נטפליקס מחזיקה תִקשׁוֹרֶת כערך תרבותי מרכזי. נטפליקס יותר מאשר עומד בסטנדרטים שלה.

למעשה, אני’D רוצה להודות לנטפליקס על כך שהיא כל כך פתוחה לגבי האדריכלות שלהם. במהלך השנים נטפליקס העניקה מאות שיחות וכתבה מאות מאמרים על עבודות הפנימיות של האופן בו הם פועלים. כל התעשייה טובה יותר עבור זה.

סיבה נוספת להכנסת כל כך הרבה פירוט בנטפליקס היא שנטפליקס פשוט מרתקת. רובנו השתמשנו בנטפליקס בזמן זה או אחר. מי לא היה’לא אהבה מציץ מאחורי הווילון כדי לראות מה גורם לנטפליקס לתקתק?

נטפליקס פועלת בשני עננים: AWS ו- Open Connect.

איך נטפליקס שומרת על חבריהם? עם הענן כמובן. למעשה, נטפליקס משתמשת בשני עננים שונים: AWS ו- Open Connect.

על שני העננים לעבוד יחד בצורה חלקה כדי לספק שעות אינסופיות של וידאו נוגע ללקוח.

שלושת החלקים של נטפליקס: לקוח, Backend, רשת משלוח תוכן (CDN).

אתה יכול לחשוב על נטפליקס כמתחלקת לשלושה חלקים: הלקוח, ה- Backend ורשת משלוח התוכן (CDN).

ה לָקוּחַ הוא ממשק המשתמש בכל מכשיר המשמש לגלוש ולהפעיל סרטוני נטפליקס. זו יכולה להיות אפליקציה באייפון שלך, אתר במחשב השולחני שלך, או אפילו אפליקציה בטלוויזיה החכמה שלך. נטפליקס שולטת בכל לקוח ולכל מכשיר.

כל מה שקורה לפני שאתה מכה לְשַׂחֵק קורה ב Backend, הפועל ב- AWS. זה כולל דברים כמו הכנת כל הווידיאו הנכנס החדש וטיפול בבקשות מכל האפליקציות, האתרים, הטלוויזיות ומכשירים אחרים.

כל מה שקורה אחרי שפגעת לְשַׂחֵק מטופל על ידי Open Connect. Open Connect הוא Netflix’S רשת מסירת תוכן גלובלית מותאמת אישית (CDN). Open Connect Stores וידאו נטפליקס במיקומים שונים ברחבי העולם. כשאתה לוחץ על הפעל את זרמי הווידיאו מ- Open Connect, למכשיר שלך ומוצג על ידי הלקוח. דוֹן’לא לדאוג; אָנוּ’אני מדבר יותר על מה ש- CDN הוא קצת אחר כך.

מעניין, בנטפליקס הם לא’אני באמת אומר לחץ על הפעל בווידיאו, הם אומרים לחיצה על התחל בכותרת. לכל ענף יש לינגו משלו.

על ידי שליטה על שלושת התחומים – לקוח, Backend, CDN – נטפליקס השיגה שילוב אנכי מלא.

נטפליקס שולט בחוויית הצפייה בווידיאו שלך מההתחלה ועד הסוף. זֶה’S הסיבה שזה פשוט עובד כשאתה לוחץ על משחק מכל מקום בעולם. אתה מקבל באופן אמין את התוכן שאתה רוצה לצפות בו כשאתה רוצה לצפות בו.

לתת’תראה איך נטפליקס גורם לזה לקרות.

בשנת 2008 נטפליקס התחילה לעבור ל- AWS

נטפליקס הושקה בשנת 1998. בהתחלה הם שכרו תקליטורי DVD דרך שירות הדואר האמריקני. אבל נטפליקס ראתה שהעתיד היה וידאו על פי דרישה.

בשנת 2007 נטפליקס הציגה את שירות הווידיאו לפי דרישה הזורמת שלהם, שאיפשר למנויים להזרים סדרות וסרטים טלוויזיוניים דרך אתר נטפליקס במחשבים אישיים, או תוכנת נטפליקס במגוון פלטפורמות נתמכות, כולל סמארטפונים וטאבלטים, נגני מדיה דיגיטלית, קונסולות משחקי וידאו וטלוויזיות חכמות.

בנימה אישית, כי הזרמת וידאו לפי דרישה הייתה העתיד עשוי להיראות ברור מאליו. וזה היה. עבדתי בכמה סטארט-אפים שניסו להכין מוצר וידאו לפי דרישה. הם נכשלו.

נטפליקס הצליחה. נטפליקס בהחלט הוציאה להורג טוב, אבל הם איחרו למשחק וזה עזר להם. עד שנת 2007 האינטרנט היה מספיק מהיר וזול מספיק כדי לתמוך בשירותי וידאו זורמים. זה מעולם לא היה המקרה. תוספת של רוחב פס נייד מהיר בעלות נמוכה והכנסת מכשירים ניידים חזקים כמו טלפונים וטאבלטים חכמים, הקלה על זול וזול יותר לכל אחד להזרים וידאו בכל עת מכל מקום. תזמון הוא הכל.

נטפליקס החלה בהפעלת מרכזי נתונים משלהם

EC2 רק התחילה בשנת 2007, בערך באותה תקופה נטפליקס’שירות סטרימינג התחיל. לא הייתה שום דרך שנטפליקס הייתה יכולה להשיק באמצעות EC2.

נטפליקס בנתה שני מרכזי נתונים, הממוקמים ממש אחד ליד השני. הם חוו את כל הבעיות שדיברנו עליהן בפרקים קודמים.

בניית מרכז נתונים זה עבודה רבה. ציוד הזמנה לוקח הרבה זמן. התקנה וקבלת כל הציוד עובד לוקח הרבה זמן. וברגע שהם קיבלו את הכל לעבוד הם היו נגמרים ביכולת, וכל התהליך היה צריך להתחיל שוב.

זמני ההובלה הארוכים של ציוד אילצו את נטפליקס לאמץ את מה שמכונה א קנה מידה אנכי אִסטרָטֶגִיָה. נטפליקס עשתה תוכניות גדולות שרצו במחשבים גדולים. גישה זו נקראת בניין א מונולית. תוכנית אחת עשתה הכל.

הבעיה היא כשאתה’מחדש צומח ממש מהר כמו נטפליקס; זה’קשה מאוד להפוך את מונוליט לאמין. וזה לא היה’t.

הפסקת שירות גרמה לנטפליקס לעבור ל- AWS

במשך שלושה ימים באוגוסט 2008, נטפליקס לא יכלה לשלוח תקליטורי DVD בגלל השחיתות במאגר המידע שלהם. זה לא היה מקובל. נטפליקס נאלצה לעשות משהו.

החוויה של בניית מרכזי נתונים לימדה את נטפליקס שיעור חשוב – הם וורן’לא טוב בבניית מרכזי נתונים.

מה שנטפליקס היה טוב היה בהעברת וידאו לחבריהם. נטפליקס מעדיפה להתרכז בהשתפר בהעברת וידאו במקום להשתפר בבניית מרכזי נתונים. בניית מרכזי נתונים לא הייתה יתרון תחרותי עבור נטפליקס, והעברת וידאו הוא.

באותה תקופה, נטפליקס החליטה לעבור ל- AWS. AWS רק התבסס, כך שבחירת AWS הייתה מהלך נועז.

נטפליקס עברה ל- AWS מכיוון שהיא רצתה תשתית אמינה יותר. נטפליקס רצתה להסיר כל נקודת כישלון יחידה מהמערכת שלה. AWS הציעו מסדי נתונים אמינים ביותר, אחסון ומרכזי נתונים מיותרים. נטפליקס רצה מחשוב ענן, כך שזה לא היה’לא צריך לבנות מונוליטים גדולים לא אמינים יותר. נטפליקס רצתה להפוך לשירות גלובלי מבלי לבנות מרכזי נתונים משלה. אף אחת מהיכולות הללו לא הייתה זמינות במרכזי הנתונים הישנים שלה ולעולם לא תהיה.

סיבה שנטפליקס נתנה לבחירת AWS הייתה שזה לא’לא רוצה לעשות כל הרמה כבדה לא מובחנת. הרמה כבדה לא מובחנת הם אותם דברים שצריך לעשות, אבל אל תעשה’לא לספק כל יתרון לעסקי הליבה של מתן חווית צפייה בווידיאו איכותית. AWS עושה את כל ההרמה הכבדה הבלתי מובחנת עבור נטפליקס. זה מאפשר לנטפליקסאים להתמקד במתן ערך עסקי.

נטפליקס לקח יותר משמונה שנים כדי להשלים את תהליך המעבר ממרכזי הנתונים שלהם ל- AWS. באותה תקופה נטפליקס צמחה את מספר לקוחות הזרימה שלה שמונה פי שמונה. נטפליקס פועלת כעת בכמה מאות אלפי מקרים EC2.

נטפליקס אמינה יותר ב- AWS

זה’זה לא כמו שנטפליקס מעולם לא חוותה זמן על AWS, אבל בסך הכל, השירות שלה אמין הרבה יותר ממה שהיה קודם.

אתה לא דון’לא לראות תלונות כאלה לעתים קרובות מאוד:

נטפליקס כל כך אמין עכשיו כי הם’נקט צעדים יוצאי דופן כדי להפוך את השירות שלהם לאמין.

נטפליקס פועלת משלושה אזורי AWS: אחד בצפון וירג’יניה, אחד בפורטלנד אורגון ואחד בדבלין אירלנד. בתוך כל אזור, נטפליקס פועלת בשלושה אזורי זמינות שונים.

נטפליקס אמרה כי אין תוכניות לפעול מאזורים נוספים. זה’S יקר מאוד ומסובך להוסיף אזורים חדשים. רוב החברות פועלות מחוץ לאזור אחד בלבד, קל וחומר שניים או שלוש.

היתרון בכך שיש שלושה אזורים הוא שכל אזור אחד יכול להיכשל, והאזורים האחרים ידרכו בטיפול בכל החברים באזור הכושל. כאשר אזור נכשל, נטפליקס מכנה זאת פינוי אזור.

לתת’S השתמש בדוגמה. לתת’תגיד לך’צופה מחדש בחדש בית קלפים פרק בלונדון אנגליה. כי זה’S הקרוב ללונדון, רוב הסיכויים שהמכשיר שלך ב- Netflix מחובר לאזור דבלין.

מה קורה אם כל אזור דבלין נכשל? האם זה אומר שנטפליקס צריכה להפסיק לעבוד בשבילך? ברור שלא!

נטפליקס, לאחר גילוי הכישלון, מפנה אותך לווירג’יניה. המכשיר שלך ידבר עכשיו עם אזור וירג’יניה במקום דבלין. אולי אפילו לא תשימו לב שהיה כישלון.

באיזו תדירות אזור AWS נכשל? פעם בחודש. ובכן, אזור לא’אני למעשה נכשל כל חודש. נטפליקס מנהלת בדיקות חודשיות. כל חודש נטפליקס גורמת לאזור להיכשל בכוונה רק כדי לוודא שהמערכת שלה יכולה להתמודד עם כשלים ברמת האזור. ניתן לפנות אזור תוך שש דקות.

נטפליקס מכנה זאת מודל שירותים גלובליים. ניתן להגיש כל לקוח מכל אזור. זה מדהים. וזה לא’לא קורה אוטומטית. ל- AWS אין רוטב קסם לטיפול בכישלונות באזור או לשרת לקוחות מתוך אזורים מרובים. נטפליקס עשתה את כל העבודה הזו לבד. Netflix היא חלוצה במבט כיצד ליצור מערכות אמינות באמצעות אזורים מרובים. אני’מ.

יתרון נוסף של היותה בשלושת האזורים הללו הוא שזה נותן כיסוי ברחבי העולם של נטפליקס. נטפליקס ביצעה כמה בדיקות ומצאת אם אתה משתמש ביישום נטפליקס בכל מקום בעולם, אתה’לקבל שירות מהיר מאחד משלושת האזורים הללו.

נטפליקס חוסכת כסף ב- AWS

זה עשוי להפתיע הרבה אנשים, אבל AWS זול יותר עבור נטפליקס. עלויות הענן לכל תצוגת סטרימינג בסופו של דבר היו חלק מהעלות של מרכזי הנתונים הישנים שלה.

למה? גמישות הענן.

נטפליקס יכולה להוסיף שרתים כשהיה זקוק להם ולהחזיר אותם כשזה לא עשה זאת’t. במקום שיש הרבה מחשבים נוספים שמסתובבים שלא עושים דבר רק כדי להתמודד עם עומס שיא, נטפליקס נאלצה רק לשלם עבור מה שצריך, כשנדרש.

כל הדברים שדיברנו עליהם ב מה זה מחשוב ענן? פֶּרֶק.

מה קורה ב- AWS לפני שאתה לוחץ על Play?

כל מה שלא’לא כרוך בהגשת וידיאו מטופלים ב- AWS.

זה כולל מחשוב מדרגי, אחסון מדרגיות, היגיון עסקי, מסדי נתונים מבוזרים מדרגיים, עיבוד נתונים גדולים וניתוח, המלצות, קידוד ומאות פונקציות אחרות.

דוֹן’לא לדאוג, אתה לא’אני צריך להבין מהם כל הדברים האלה, אבל מכיוון שאתה עשוי למצוא את זה מעניין, אני’יסביר אותם בקצרה.

מחשוב מדרגי ואחסון מדרגי.

מחשוב מדרגי הוא EC2 ו- אחסון מדרגי הוא S3. שום דבר חדש לנו כאן.

מכשיר ה- Netflix שלך – iphone, tv, xbox, טלפון אנדרואיד, טאבלט וכו ‘.- מתווכים לשירות נטפליקס הפועל ב- EC2.

צפה ברשימה של סרטונים פוטנציאליים לצפייה? זֶה’S מכשיר Netflix שלך יצר קשר במחשב ב- EC2 כדי לקבל את הרשימה.

בקש פרטים נוספים על סרטון? זֶה’S מכשיר Netflix שלך יצר קשר במחשב ב- EC2 כדי לקבל את הפרטים.

זה’בדיוק כמו כל שאר שירותי הענן שאנחנו’דיבר על הספר.

מסד נתונים מופץ מדרגי.

נטפליקס משתמשת הן ב- DynamoDB והן בקאסנדרה עבור מסדי הנתונים המופצים שלהם. לא שהשמות האלה צריכים להיות משמעותיים עבורך, הם’רק מוצרי מסד נתונים באיכות גבוהה.

מאגר מידע. בסיס נתונים מאחסן נתונים. פרטי הפרופיל שלך, פרטי החיוב שלך, כל הסרטים שאתה’נצפה אי פעם, כל המידע הזה מאוחסן בבסיס נתונים.

מופץ. מופץ פירושו שמסד הנתונים לא’לא פועל על מחשב אחד גדול, הוא פועל במחשבים רבים. הנתונים שלך מועתקים למחשבים מרובים כך שאם מחשב אחד או אפילו שני המחזיקים את הנתונים שלך נכשלים, הנתונים שלך יהיו בטוחים. למעשה, הנתונים שלך מועתקים לכל שלושת האזורים. ככה, אם אזור נכשל בנתונים שלך יהיו שם כאשר האזור החדש מוכן להתחיל להשתמש בהם.

ניתן להרחבה. מדרגיות פירושה שמסד הנתונים יכול להתמודד עם נתונים רבים ככל שתרצה להכניס לתוכו. זֶה’זה יתרון מרכזי בלהיות בסיס נתונים מבוזר. ניתן להוסיף עוד מחשבים לפי הצורך כדי לטפל בנתונים נוספים.

עיבוד נתונים גדולים ואנליטיקס.

נתונים גדולים פשוט אומר שם’זה הרבה נתונים. נטפליקס אוספת מידע רב. נטפליקס יודעת מה כולם צפו כשצפו בזה ואיפה הם היו כשצפו. נטפליקס יודעת אילו סרטונים הסתכלו אך החליטו לא לצפות. נטפליקס יודעת כמה פעמים נצפה כל סרטון … והרבה יותר.

הנחת כל הנתונים בפורמט סטנדרטי נקראת מעבד.

הגיוני בכל הנתונים נקראים ניתוח. הנתונים מנותחים כדי לענות על שאלות ספציפיות.

נטפליקס מתאימה יצירות אמנות בדיוק בשבילך.

כאן’דוגמה נהדרת לאופן בו נטפליקס מפתה אותך לצפות בסרטונים נוספים באמצעות יכולות ניתוח הנתונים שלה.

כשאתם גולשים ומחפשים מה לצפות בנטפליקס, האם שמת לב שם’תמיד תמונה המוצגת עבור כל סרטון? זֶה’s נקרא תמונת כותרת.

תמונת הכותרת נועדה לסקרן אותך, למשוך אותך לבחירת סרטון. הרעיון הוא ככל שתמונת הכותרת משכנעת יותר, כך סביר יותר שתצפו בסרטון. וככל שאתה צופה יותר בסרטונים, כך סביר להניח שאתה מבטל את המנוי מנטפליקס.

כאן’דוגמה לתמונות כותרת שונות עבור דברים זרים יותר:

אתה יכול להיות מופתע ללמוד את התמונה המוצגת עבור כל סרטון נבחרת במיוחד עבורך. לא כולם רואים את אותה תמונה.

כולם נהגו לראות את אותה תמונת כותרת. כאן’איך זה עבד. חברים הוצגו בתמונה אחת אקראית מקבוצת אפשרויות, כמו התמונות באמור לעיל דברים זרים יותר קולאז ‘. נטפליקס נספרת בכל פעם שהווידיאו נצפה, והקליט איזו תמונה הוצגה כאשר נבחר הסרטון.

בשביל שלנו דברים זרים יותר דוגמה, תן’אומרים שכאשר הוצגה התמונה הקבוצתית במרכז, דברים זרים יותר נצפה 1,000 פעמים. לכל התמונות האחרות, זה נצפה רק פעם אחת.

מכיוון שהתמונה הקבוצתית הייתה הטובה ביותר לגרום לחברים לצפות, נטפליקס הייתה הופכת אותה לתמונת הכותרת עבור דברים זרים יותר לָנֶצַח.

זה נקרא להיות מונע נתונים. נטפליקס ידועה בהיותה חברה מונעת נתונים. הנתונים נאספים – במקרה זה, מספר הצפיות הקשורות לכל תמונה – ומשמשות לקבלת ההחלטות הטובות ביותר האפשריות – במקרה זה, איזו תמונת כותרת לבחור.

חכם, אבל אתה יכול לדמיין לעשות טוב יותר? כן, באמצעות נתונים נוספים. זֶה’נושא העתיד – פתרון בעיות על ידי למידה מנתונים.

אתה ואני ככל הנראה אנשים שונים מאוד. האם אתה חושב שאנחנו מונעים מאותו סוג של תמונת כותרת? כנראה שלא. יש לנו טעמים שונים. יש לנו העדפות שונות.

נטפליקס יודעת גם את זה. זֶה’S הסיבה שנטפליקס מתאימה כעת להתאים אישית את כל התמונות שהם מראים לך. נטפליקס מנסה לבחור ביצירות האמנות המדגישות את ההיבט הרלוונטי ביותר של סרטון עבורך. איך הם עושים את זה?

זכרו, נטפליקס מתעדת ומונה את כל מה שאתה עושה באתר שלהם. הם יודעים איזה סוג של סרטים אתה הכי אוהב, אילו שחקנים אתה הכי אוהב וכן הלאה.

לתת’אומרים שאחת ההמלצות שלך היא הסרט ציד רצון טוב. נטפליקס חייבת לבחור תמונת כותרת שתראה לך. המטרה היא להציג תמונה שמאפשרת לך לדעת על סרט שאתה’אני כנראה מתעניין. איזו תמונה צריכה להראות לך נטפליקס?

אם אתה אוהב קומדיות, נטפליקס תראה לך תמונה המציגה את רובין וויליאמס. אם אתה מעדיף סרטים רומנטיים, נטפליקס תראה לך דימוי מאט דיימון ומיני נהג המועמדות לנשיקה.

על ידי הצגת רובין וויליאמס, נטפליקס מייעדת אותך שם’זה עשוי להיות הומור בסרט ומכיוון שנטפליקס יודעת שאתה אוהב קומדיות, הסרטון הזה הוא התאמה טובה.

תמונה של מאט דיימון ומיני נהג מעבירה הודעה אחרת לגמרי. אם אתה’חובב קומדיה וראה את התמונה הזו, אתה עלול לדלג עליה.

זֶה’S הסיבה שבחירת תמונת הכותרת הנכונה כל כך חשובה. זה שולח אות מותאם אישית חזק המציין על מה סרט עוסק.

כאן’דוגמא נוספת, ספרות זולה.

אם אתה’צפה בהרבה סרטים בכיכובו של אומה תורמן, ואז אתה’סביר להניח שתראה את תמונת הכותרת הכוללת את אומה. אם אתה’צפה בהרבה סרטים בכיכובו של ג’ון טרבולטה, ואז אתה’סביר להניח שתראה את תמונת הכותרת הכוללת את ג’ון.

האם אתה יכול לראות כיצד בחירת יצירות האמנות המותאמות אישית הטובות ביותר עשויה לגרום לך להיות יותר סביר לצפות בסרטון מסוים?

נטפליקס פונה לאינטרסים שלך בבחירת יצירות אמנות, ובכל זאת נטפליקס לא’גם לא רוצה לשקר לך. הם לא מתעסקים’לא רוצה להציג תמונת ClickBait רק כדי לגרום לך לצפות בסרטון שייתכן שלא תאהב. שם’אין תמריץ בזה. נטפליקס ISN’לא שילם לווידיאו שנצפה. נטפליקס מנסה למזער חרטה. נטפליקס רוצה שתהיה מרוצה מהסרטונים שאתה צופה בהם, כך שהם בוחרים את תמונות הכותרת הטובות ביותר שהם יכולים בשבילך.

זו רק דוגמא אחת קטנה לאופן השימוש בניתוח הנתונים על ידי נטפליקס. נטפליקס משתמשת באסטרטגיות מסוג זה בכל מקום.

המלצות.

בדרך כלל נטפליקס תראה לך רק 40 עד 50 אפשרויות וידאו, ובכל זאת יש להם אלפי סרטונים רבים זמינים.

איך מחליטה נטפליקס? באמצעות למידת מכונה.

זֶה’החלק של עיבוד נתונים גדולים ואנליטיקס פשוט דיברנו על. נטפליקס מסתכלת על הנתונים שלה ומנבאת מה אתה’אני אוהב. למעשה, כל מה שאתה רואה רואה על מסך נטפליקס נבחר במיוחד עבורך באמצעות למידת מכונה.

התקדמות ממדיות מקור למה שאתה צופה

כאן’S איפה אנו מתחילים לעבור לאופן הווידיאו מטופל על ידי נטפליקס.

לפני שתוכל לצפות בסרטון וידאו במכשיר המועדף עליך שבחרת, נטפליקס חייבת להמיר את הווידיאו לפורמט שעובד בצורה הטובה ביותר עבור המכשיר שלך. תהליך זה נקרא קידוד אוֹ הַצפָּנָה.

קידוד הוא התהליך שממיר קובץ וידאו מפורמט אחד למשנהו, כדי להפוך את הסרטונים שניתן לצפייה בהם על פני פלטפורמות ומכשירים שונים.

נטפליקס מקודדת את כל הווידיאו שלה ב- AWS על עד 300,000 מעבדים בפעם אחת. זֶה’S גדול יותר מרוב מחשבי העל!

מקור המדיה המקורית.

מי שולח וידאו לנטפליקס? בתי ייצור ואולפנים. נטפליקס מתקשרת לסרטון זה מדיה מקור. הסרטון החדש ניתן ל צוות פעולות תוכן לעיבוד.

הסרטון מגיע בפורמט בהגדרה גבוהה ש’טרה -בתים רבים בגודל. טראביט הוא גדול. דמיין 60 ערימות נייר גבוה כמו מגדל אייפל. זֶה’s terabyte.

לפני שתוכל להציג סרטון, נטפליקס מכניסה אותו לתהליך רב-שלבי קפדני.

אימות הסרטון.

הדבר הראשון שנטפליקס עושה הוא להקדיש זמן רב לתוקף את הסרטון. הוא מחפש חפצים דיגיטליים, שינויי צבע או מסגרות חסרות שעלולות להיות נגרמות על ידי ניסיונות קידוד קודמים או בעיות העברת נתונים.

הסרטון נדחה אם נמצאות בעיות כלשהן.

לצינור התקשורת.

לאחר אימות הסרטון, זה’זה ניזון למה שנטפליקס מכנה את צינור מדיה.

א צנרת היא פשוט סדרה של צעדים שמועברים נתונים כדי להפוך אותם מוכנים לשימוש, בדומה לפס ייצור במפעל. ליותר מ -70 תוכנות שונות יש יד ביצירת כל סרטון.

זה’זה לא מעשי לעבד קובץ בגודל רב-טראבידי אחד, כך שהצעד הראשון של הצינור הוא לשבור את הסרטון להרבה נתחים קטנים יותר.

לאחר מכן מונחים את נתחי הווידיאו דרך הצינור כך שניתן יהיה לקודד אותם במקביל. במקביל פשוט פירושו שהנתחים מעובדים בו זמנית.

לתת’S ממחיש את ההקבלה עם דוגמה.

לתת’אומרים שיש לך מאה כלבים מלוכלכים שצריכים כביסה. וזה יהיה מהיר יותר, אדם אחד שוטף את הכלבים בזה אחר זה? או שיהיה מהיר יותר לשכור מאה מכבשי כלבים ולשטוף אותם כל הזמן?

ברור שזה’S מהיר יותר שיש מאה מכבשי כלבים שעובדים בו זמנית. זֶה’s מקבילות. וזה’S הסיבה שנטפליקס משתמשת בכל כך הרבה שרתים ב- EC2. הם זקוקים להרבה שרתים כדי לעבד את קבצי הווידיאו הענקיים האלה במקביל. גם זה עובד. נטפליקס אומר כי ניתן לקודד ולדחוף את קובץ המדיה המקוריים ולדחוף אותו ל- CDN שלהם תוך 30 דקות.

ברגע שהנתחים מקודדים, הם’תוקף מחדש כדי לוודא שלא הוצגו בעיות חדשות.

ואז הנתחים מורכבים חזרה לקובץ ומאושרים שוב.

התוצאה היא ערימת קבצים.

תהליך הקידוד יוצר הרבה קבצים. למה? המטרה הסופית של נטפליקס היא לתמוך בכל מכשיר המחובר לאינטרנט.

נטפליקס התחילה להזרים וידאו בשנת 2007 ב- Microsoft Windows. עם הזמן נוספו מכשירים נוספים-Roku, LG, Samsung Blu-ray, Apple Mac, Xbox 360, LG DTV, Sony PS3, Nintendo Wii, Apple iPad, Apple iPhone, Apple TV, Android, Kindle Fire ו- Comcast X1.

בסך הכל, נטפליקס תומכת ב 2200 מכשירים שונים. לכל מכשיר יש פורמט וידאו שנראה הכי טוב במכשיר המסוים הזה. אם אתה’צופה מחדש בנטפליקס באייפון, אתה’תראה סרטון שנותן לך את חווית הצפייה הטובה ביותר באייפון.

נטפליקס מתקשרת לכל הפורמטים השונים לסרטון שלו קידוד פרופיל.

נטפליקס יוצרת גם קבצים המותאמים למהירויות רשת שונות. אם אתה’צופה מחדש ברשת מהירה, אתה’לראות וידאו באיכות גבוהה יותר ממה שהיית עושה אם אתה’צופה מחדש ברשת איטית.

ישנם גם קבצים לפורמטים שונים של שמע. שמע מקודד לרמות שונות של איכות ובשפות שונות.

ישנם גם קבצים הכלולים עבור כתוביות. לסרטון עשוי להיות כתוביות במספר שפות שונות.

יש הרבה אפשרויות צפייה שונות לכל סרטון. מה שאתה רואה תלוי במכשיר שלך, באיכות הרשת שלך, בתוכנית Netflix ובבחירת השפה שלך.

רק על כמה קבצים אנחנו מדברים?

ל הכתר, נטפליקס מאחסנת כ -1,200 קבצים!

דברים זרים יותר בעונה 2 יש עוד קבצים. זה צולם ב- 8K ויש לו תשעה פרקים. קבצי הווידיאו המקור היו רבים, טרה -בייט רבים של נתונים. לקח 190,000 שעות מעבד כדי לקודד עונה אחת בלבד.

התוצאה? 9,570 קבצי וידאו, שמע וטקסט שונים!

לתת’לראות איך נטפליקס מנגנת את כל הסרטון הזה.

שלוש אסטרטגיות שונות לזרמת וידאו

נטפליקס ניסתה שלוש אסטרטגיות הזרמת וידאו שונות CDN קטנות משלה; CDNs של צד שלישי; ופתח את Connect.

לתת’התחל על ידי הגדרת CDN. CDN הוא א רשת הפצת תוכן.

תוֹכֶן עבור נטפליקס – כמובן – קבצי הווידיאו שדיברנו עליהם בסעיף הקודם.

הפצה פירושו שקבצי וידאו מועתקים ממיקום מרכזי, מעל א רֶשֶׁת ומאוחסן במחשבים שנמצאים בכל רחבי העולם.

עבור נטפליקס, המיקום המרכזי בו מאוחסנים סרטונים הוא S3.

למה לבנות CDN?

הרעיון שמאחורי CDN הוא פשוט: הכניסו וידאו קרוב ככל האפשר למשתמשים על ידי הפצת מחשבים ברחבי העולם. כאשר משתמש רוצה לצפות בסרטון וידאו, מצא את המחשב הקרוב עם הסרטון עליו וזרם למכשיר משם.

היתרונות הגדולים ביותר של CDN הם מהירות ואמינות.

דמיין אותך’צפייה בווידיאו בלונדון והסרטון מוזרם מפורטלנד, אורגון. זרם הווידיאו חייב לעבור דרך הרבה רשתות, כולל כבל תת -ימי, כך שהחיבור יהיה איטי ולא אמין.

על ידי העברת תוכן וידאו קרוב ככל האפשר לאנשים שצופים בו, חווית הצפייה תהיה מהירה ואמינה ככל האפשר.

כל מיקום עם מחשב האחסון תוכן וידאו נקרא POP או נקודת נוכחות. כל פופ הוא מיקום פיזי המספק גישה לאינטרנט. הוא מאכלס שרתים, נתבים וציוד טלקומוניקציה אחר. אָנוּ’אדבר יותר על פופ מאוחר יותר.

ה- CDN הראשון היה קטן מדי

בשנת 2007, כאשר נטפליקס יצאה לראשונה בשירות הסטרימינג החדש שלה, היו לה 36 מיליון חברים ב -50 מדינות, וצפתה יותר ממיליארד שעות וידאו בכל חודש, וזרמו מספר תכנים לשנייה.

כדי לתמוך בשירות הסטרימינג, נטפליקס בנה CDN פשוט משלה בחמישה מיקומים שונים בארצות הברית.

קטלוג הווידיאו של נטפליקס היה קטן מספיק באותה עת שכל מיקום הכיל את כל תוכנו.

ה- CDNs השני היה גדול מדי

בשנת 2009, נטפליקס החליטה להשתמש ב- CDNs של מפלגה 3. בערך בתקופה זו, התמחור של CDNs של מפלגה שלישית ירד.

השימוש ב- CDNs של מפלגה שלישית היה הגיוני לחלוטין עבור נטפליקס. מדוע לבלות את כל הזמן והמאמץ לבנות CDN משלך כשאתה יכול להגיע מייד לגלובוס באמצעות שירותי CDN קיימים?

נטפליקס התקשרה עם חברות כמו Akamai, Liminglight ו- Level 3 כדי לספק שירותי CDN. שם’שום דבר לא בסדר בשימוש ב- CDNs של צד שלישי. למעשה, כמעט כל חברה עושה. לדוגמה, ה- NFL השתמש באקמאי כדי להזרים משחקי כדורגל חיים.

בכך שלא לבנות CDN משלה, לנטפליקס היה יותר זמן לעבוד על פרויקטים אחרים בעדיפות גבוהה יותר.

נטפליקס השקיעה הרבה זמן ומאמץ בפיתוח לקוחות חכמים יותר. נטפליקס יצרה אלגוריתמים כדי להסתגל לתנאי רשתות משתנים. אפילו מול שגיאות, רשתות עמוסות יתר ושרתים עמוסים יתר על המידה, נטפליקס רוצה שהחברים תמיד צופים בתמונה הטובה ביותר האפשרית. טכניקה אחת ש- Netflix פיתחה היא מעבר למקור וידאו אחר – אמור CDN אחר, או שרת אחר – כדי לקבל תוצאה טובה יותר.

במקביל, נטפליקס הקדישה גם מאמץ רב בכל שירותי AWS שדיברנו עליהם קודם לכן. נטפליקס מתקשרת לשירותים ב- AWS שלה מטוס בקרה. מטוס בקרה הוא מונח טלקומוניקציה המזהה את החלק של המערכת השולטת בכל דבר אחר. בגופך המוח שלך הוא מישור הבקרה; זה שולט בכל השאר.

ואז נטפליקס חשבה שזה יכול לעשות טוב יותר על ידי פיתוחו’S CDN משלו.

Open Connect היה בדיוק נכון

בשנת 2011, נטפליקס הבינה בסדר גודל שלה היא זקוקה לפיתרון CDN ייעודי כדי למקסם את יעילות הרשת. הפצת וידאו היא יכולת ליבה עבור נטפליקס ויכולה להיות יתרון תחרותי עצום.

אז נטפליקס התחילה לפתח Open Connect, CDN בנוי למטרה משלה. Open Connect הושק בשנת 2012.

ל- Open Connect יש הרבה יתרונות עבור נטפליקס:

  • פחות יקר. CDNs של מפלגה שלישית הם יקרים. לעשות זאת בעצמם יחסוך הרבה כסף.
  • איכות טובה יותר. על ידי שליטה על נתיב הווידיאו כולו – הובלה, CDN, לקוחות במכשירים – נימוק נטפליקס שהוא יכול לספק חווית צפייה בווידיאו מעולה.
  • ניתן להרחבה יותר. לנטפליקס המטרה לספק שירות בכל מקום בעולם. תמיכה במהירות בכל אותם אנשים תוך מתן חווית צפייה בווידיאו איכותית דרשה לבנות מערכת משלה.

על ה- CDNs של המפלגה השלישית לתמוך במשתמשים גישה לכל סוג של תוכן מכל מקום בעולם. לנטפליקס יש עבודה הרבה יותר פשוטה.

נטפליקס יודעת בדיוק מי המשתמשים שלה מכיוון שהם חייבים להירשם לנטפליקס. נטפליקס יודעת בדיוק אילו סרטונים היא צריכה לשרת. רק הידיעה שצריך לשרת רק זרמי וידיאו גדולים מאפשרת ל- Netflix לבצע הרבה אפשרויות אופטימיזציה חכמה CDNs אחרים יכולים’לא לעשות. נטפליקס גם יודעת הרבה על זה. החברה יודעת אילו סרטונים הם אוהבים לצפות ומתי הם אוהבים לצפות בהם.

עם ידע מסוג זה, נטפליקס בנתה CDN ממש בעל ביצועים גבוהים באמת. לתת’S היכנס לפרטים נוספים על אופן הפעולה של Connect Connect.

פתח מכשירי Connect

זכור איך אמרנו ל- CDN מחשבים המופצים בכל העולם?

נטפליקס פיתחה מערכת מחשב משלה לאחסון וידאו. נטפליקס קוראת להם פתוחים למכשירי חיבור או OCA.

כאן’S איך נראה התקנה מוקדמת של OCA באתר:

יש הרבה OCAs בתמונה לעיל. OCAs מקובצים לאשכולות של שרתים מרובים.

כל OCA הוא שרת מהיר, מותאם מאוד למתן קבצים גדולים, עם המון המון דיסקים קשיחים או כונני פלאש לאחסון וידאו.

כאן’S איך נראה אחד משרתי OCA:

ישנם כמה סוגים שונים של OCAs למטרות שונות. יש OCAs גדולים שיכולים לאחסן את נטפליקס’קטלוג הווידיאו כולו. יש OCAs קטנים יותר שיכולים לאחסן רק חלק של נטפליקס’S קטלוג וידאו. OCAs קטנים יותר מלאים בווידיאו בכל יום, בשעות מחוץ לשיא, תוך שימוש בשיחות נטפליקס בתהליך קאצ’ין פרואקטיביז. אָנוּ’ואדבר יותר על איך פועל מטמון יזום אחר כך.

מנקודת מבט של חומרה, שם’אין שום דבר מיוחד ב- OCA. הֵם’בהתבסס על רכיבי מחשב סחורות ומורכבים במקרים מותאמים אישית על ידי ספקים שונים. אתה יכול לקנות את אותם מחשבים אם היית רוצה.

שימו לב כיצד כל נטפליקס’המחשבים הם אדומים? לנטפליקס היו המחשבים שלהם במיוחד כדי להתאים לצבע הלוגו שלהם.

מנקודת מבט של תוכנה, OCAs משתמשים במערכת ההפעלה FreeBSD ו- NGINX עבור שרת האינטרנט. כן, לכל OCA יש שרת אינטרנט. זרמי וידאו באמצעות nginx. אם אף אחד מהשמות האלה לא הגיוני, דון’לא לדאוג, אני’m רק כולל אותם לשלמות.

מספר ה- OCAs באתר תלוי כיצד נטפליקס אמין רוצה שהאתר יהיה, כמות התנועה של נטפליקס (רוחב פס) המועברת מאותו אתר, ואחוז התנועה שאתר מאפשר להזרים אותו.

כשאתה לוחץ על Play, אתה’צפייה בווידיאו זורמת מ- OCA ספציפית, כמו זו שלמעלה, במיקום בקרבתך.

לחוויית צפייה בווידיאו הטובה ביותר, מה שנטפליקס באמת תרצה לעשות זה וידאו מטמון בבית שלך. אבל זה’זה עדיין לא מעשי. הדבר הטוב ביותר הבא הוא לשים מיני-נטפליקס קרוב לבית שלך. איך הם עושים את זה?

היכן נטפליקס מציבה מכשירי Connect Appliances (OCAs)?

נטפליקס מספקת כמויות אדירות של תנועת וידאו מאלפי שרתים בלמעלה מאלף מיקומים ברחבי העולם. עיין במפה זו של מיקומי הגשת וידאו:

שירותי וידאו אחרים, כמו יוטיוב ואמזון, מספקים וידאו ברשת עמוד השדרה שלהם. חברות אלה ממש בנו רשת גלובלית משלהן להעברת וידאו למשתמשים. זֶה’s מאוד מסובך ויקר מאוד לעשות.

נטפליקס נקטה בגישה שונה לחלוטין לבניית ה- CDN שלה.

נטפליקס לא’T להפעיל רשת משלה; זה לא’גם לא מפעילים מרכזי נתונים משלה. במקום זאת, ספקי שירותי אינטרנט (ISP) מסכימים להכניס OCAs למרכזי הנתונים שלהם. OCAs מוצעים בחינם ל- ISPs להטמעה ברשתות שלהם. נטפליקס מכניסה גם OCAs למיקומי חילופי אינטרנט או קרוב לאינטרנט (IXPS).

השימוש באסטרטגיה זו נטפליקס לא’לא צריך להפעיל מרכזי נתונים משלה, ובכל זאת הוא מקבל את כל היתרונות של להיות במרכז נתונים רגיל’זה רק מישהו אחר’S Datacenter. גָאוֹן!

שתי הפסקאות האחרונות היו די צפופות, אז תנו’s שבר את זה.

באמצעות אינטרנט לבניית CDN.

ספק שירותי אינטרנט הוא ספק האינטרנט שלך. זה’S אתה מקבל את שירות האינטרנט שלך. זה יכול להיות Verizon, Comcast או אלפי שירותים אחרים.

הנקודה העיקרית כאן היא שאינטרנט ממוקמים בכל רחבי העולם והם’קרוב ללקוחות. על ידי הצבת OCAs במרכיבי נתונים של ISP, נטפליקס היא גם בכל העולם, וקרוב ללקוחותיה.

באמצעות ixps לבניית CDN.

מיקום Exchange באינטרנט הוא מרכז נתונים בו ISPS ו- CDNs מחליפים תעבורת אינטרנט בין הרשתות שלהם. זה’בדיוק כמו ללכת למסיבה להחליף מתנות לחג המולד עם חבריך. זה’קל יותר להחליף מתנות אם כולם נמצאים במקום אחד. זה’קל יותר להחליף תעבורת רשת אם כולם הם מקום אחד.

IXPs ממוקמים בכל העולם:

מפת חילופי האינטרנט של הטלגוגרפיה

כאן’איך נראה חילופי האינטרנט בלונדון:

חילופי אינטרנט בלונדון (LINX)

לקדח את הכבלים הצהובים של סיבים אופטיים ומה אתה’לראות זה משהו כזה מנקודת חילופי האינטרנט של AMS-IX, באמסטרדם, הולנד:

כל חוט בתמונה לעיל מחבר רשת אחת לרשת אחרת. זֶה’S כיצד רשתות שונות מחליפות תנועה זו עם זו.

IXP הוא כמו מחלף כביש מהיר, רק באמצעות חוטים:

עבור נטפליקס, זהו עוד ניצחון. IXPs הם בכל העולם. אז על ידי הכנסת ה- OCAs שלהם ל- IXPs, נטפליקס לא’לא צריך להריץ מרכזי נתונים משלה.

הווידיאו מטמון באופן יזום ל- OCAs כל יום

בנטפליקס יש את כל הסרטון הזה שיושב ב- S3. יש להם את כל המחשבים המגישים הווידיאו המפזרים ברחבי העולם. שם’רק דבר אחד חסר: וידאו!

נטפליקס משתמשת בתהליך שהוא מתקשר אליו מטמון פרואקטיבי כדי להעתיק ביעילות וידאו ל- OCA.

מה זה מטמון?

מטמון הוא מקום מסתור, במיוחד אחד באדמה, לתחמושת, אוכל ואוצרות.

אתה יודע איך סנאים קוברים אגוזים לחורף?

כל מיקום שהם קוברים אגוזים הוא א מטמון. במהלך החורף, כל סנאי יכול למצוא מטמון אגוז.

חוקרים ארקטיים שלחו צוותים קטנים קדימה למזון, דלק ואספקה ​​אחרת לאורך המסלול שהם נקטו. הצוות הגדול יותר העוקב מאחור ייפסק בכל מיקום מטמון ואספקה ​​מחודשת.

גם הסנאים וגם חוקרים ארקטיים היו יזום; הם עשו משהו לפני הזמן להתכונן למועד מאוחר יותר.

כל OCA הוא מטמון וידאו של מה שאתה’ככל הנראה רוצה לצפות.

נטפליקס מטמון וידאו על ידי חיזוי מה שאתה’אני רוצה לצפות.

בכל מקום בעולם, נטפליקס, יודעת במידה גבוהה של דיוק מה חבריה אוהבים לצפות ומתי הם רוצים לצפות בזה. זכור כיצד אמרנו שנטפליקס הייתה חברה מונעת נתונים?

נטפליקס משתמשת בנתוני הפופולריות שלה לנבא אילו חברי סרטונים כנראה ירצו לצפות מחר בכל מיקום. כאן, מקום פירושו אשכול של OCAs ששוכנו בתוך ספק שירותי אינטרנט או IXP.

נטפליקס מעתיק את הסרטונים החזויים לאחד או יותר OCA בכל מיקום. זה נקרא מיקום מראש. הווידיאו ממוקם על OCAs לפני שמישהו אפילו שואל.

זה נותן שירות נהדר לחברים. הסרטון שהם רוצים לצפות בו כבר קרוב אליהם, מוכן וזמין לסטרימינג.

נטפליקס מפעילה את מה שמכונה א מערכת מטמון שכבתית.

ה- OCAs הקטנים יותר שדיברנו עליהם מוקדמים ממוקמים בספקס ו- IXP. אלה קטנים מכדי להכיל את כל קטלוג הסרטונים של נטפליקס. במיקומים אחרים יש OCAs המכילים את מרבית נטפליקס’S קטלוג וידאו. ובכל זאת, למקומות אחרים יש OCAs גדולים המכילים את כל קטלוג נטפליקס. אלה מקבלים את הסרטונים שלהם מ- S3.

כל לילה, כל OCA מתעורר ומבקש שירות ב- AWS אילו סרטונים צריכים להיות להם. השירות ב- AWS שולח ל- OCA רשימת סרטונים IT’זה אמור להתבסס על התחזיות שדיברנו עליהם קודם לכן.

כל OCA אחראי לוודא שיש לה את כל הסרטונים ברשימה שלה. אם ל- OCA באותו מיקום יש אחד הסרטונים’זה אמור להיות, אז הוא יעתיק את הסרטון מה- OCA המקומי. אחרת, OCA סמוך עם הסרטון יימצא והעתק.

מכיוון שנטפליקס צופה מה יהיה פופולרי מחר, שם’תמיד זמן הובלה של יום אחד לפני שנדרש סרטון להיות על OCA. המשמעות היא שניתן להעתיק סרטונים בשעות שקטות מחוץ לשיא, מה שמפחית משמעותית את השימוש ברוחב הפס עבור ספקי האינטרנט.

שם’זה אף פעם לא א מיס מטמון ב- Open Connect. החמצת מטמון תבקש סרטון ספציפי מ- OCA ו- OCA אומר שהוא לא’לא יהיה את זה. החמצות מטמון מתרחשות כל הזמן ב- CDNs אחרים כי אתה יכול’לא יכול להעתיק תוכן בכל מקום. מכיוון שנטפליקס יודעת את כל הסרטונים שהיא חייבת מטמון, היא יודעת בדיוק היכן כל סרטון נמצא בכל עת. אם OCA קטן יותר לא’לא יש סרטון, אז אחד מ- OCAs גדולים יותר תמיד מובטח שיהיה לו.

למה לא’t נטפליקס פשוט העתק את כל הסרטון שלהם לכל OCA בעולם? קטלוג הווידיאו שלה גדול מכדי לאחסן הכל בכל המיקומים. בשנת 2013, קטלוג הווידיאו של נטפליקס היה מעל 3 פטאביטים; אין לי מושג כמה זה גדול היום, אבל אני יכול רק להניח את זה’s גדול משמעותית.

זֶה’S מדוע נטפליקס פיתחה את השיטה לבחור באילו סרטונים לאחסן בכל OCA באמצעות נתונים לנבא מה חבריהם ירצו לצפות.

לתת’לקחת דוגמא. בית קלפים הוא מופע פופולרי מאוד. לאילו OCA יש להעתיק אותו? כנראה כל מיקום מכיוון שחברים ברחבי העולם ירצו לצפות בבית הקלפים.

מה אם סרטון הוא’לא פופולרי כמו בית הקלפים? נטפליקס מחליטה לאילו מיקומים יש להעתיק את זה כדי לשרת בצורה הטובה ביותר את בקשות החברים הסמוכות.

בתוך מיקום, סרטון פופולרי כמו House of Cards מועתק להרבה OCAs שונים. ככל שסרטון פופולרי יותר, כך יועתק יותר שרתים. למה? אם היה רק ​​עותק אחד של סרטון פופולרי מאוד, הזרמת הסרטון לחברים הייתה מציפה את השרת. כמו שאומרים, ידיים רבות גורמות לעבודה קלה.

סרטון הוא’לא נחשב בשידור חי כשזה’s הועתק רק OCA אחד. נטפליקס רוצה להיות מסוגל לשחק באותו תוכן באותו זמן בכל מקום בעולם. רק כשיש מספר מספיק של OCAs עם מספיק עותקים של הסרטון כדי לשרת אותו כראוי, האם הסרטון ייחשב בשידור חי ומוכן לחברים לצפייה.

נוֹעָז עונה 2 בשנת 2016, למשל, הייתה הפעם הראשונה שנטפליקס הוציאה את כל הפרקים של מופע, בכל המכשירים, בכל המדינות, במקביל.

אירוח OCAS: מה’s בתוכו עבור אינטרנט?

מדוע ספק שירותי אינטרנט יסכים להכניס אשכול OCA לרשת שלהם? בהסמקה ראשונה זה נראה נדיב מדי, אבל אתה’אשמח לדעת את זה’S מושרש בחוזקה באינטרס עצמי.

להבין מדוע, אנחנו’אני צריך לדבר על איך רשתות עובדות. אני יודע לאורך כל הספר הזה אנחנו’אמרו כי שירותי ענן ניגשים לאינטרנט. זֶה’זה לא המקרה של נטפליקס, לפחות כשצופים בסרטון. בעת שימוש באפליקציה של נטפליקס, היא מדברת עם AWS דרך האינטרנט.

האינטרנט הוא חיבור בין רשתות. יש לך ספק שירותי אינטרנט המספק שירות אינטרנט. אני מקבל את שירות האינטרנט שלי מ- Comcast. המשמעות של זה הבית שלי מתחבר לקומקאסט’רשת באמצעות כבל סיב אופטיק. קומקאסט’רשת S היא הרשת שלהם; זה’זה לא האינטרנט, האינטרנט הוא משהו אחר.

לתת’S אומר שאני רוצה לעשות חיפוש בגוגל, ואני מקליד שאילתה בדפדפן שלי ולחץ על Enter.

הבקשה שלי לגוגל זורמת לראשונה על Comcast’רשת S. גוגל isn’t ב- Comcast’רשת S. בשלב מסוים הבקשה שלי צריכה ללכת לגוגל’רשת S. זֶה’למה האינטרנט מיועד.

האינטרנט מתחבר comcast’רשת ל- Google’רשת S. יש את הדברים האלה שנקראים פרוטוקולי ניתוב זה מתנהג כמו שוטר תנועה, מכוון לאן עוברת תנועת הרשת.

כאשר שאילתת Google שלי מנותבת לאינטרנט זה’לא ב- Comcast’הרשת כבר, והיא’זה לא בגוגל’רשת S. זה’s על מה’s נקרא עמוד שדרה באינטרנט.

האינטרנט ארוג יחד מרשתות רבות בבעלות פרטית שבוחרים להשתלב זה עם זה. ה- IXPs שחיפשנו קודם לכן הם דרך אחת שרשתות מתחברות זו לזו.

בארצות הברית, כאן’S מפה של רשת הסיבים הארוכה של הסיבים:

צינורות: מחקר של תשתית סיבים אופטיים ארוכי טווח בארה”ב

מה שנטפליקס עשתה עם Open Connect ממוקם את אשכולות ה- OCA שלה בתוך רשת ISPS. זה אומר שאם אני צופה בסרטון נטפליקס i’אני מדבר עם OCA בקומקאסט’רשת S. כל תנועת הווידיאו שלי נמצאת ב- Comcast’רשת S; זה אף פעם לא מכה באינטרנט.

המפתח להגדלת משלוח הווידיאו הוא להיות קרוב ככל האפשר למשתמשים. כאשר אתה’אתה עושה את זה אתה’לא משתמש בעמוד השדרה באינטרנט. בקשות מתרוצות בחלק מקומי של הרשת.

למה זה דבר טוב? נזכיר שאמרנו כי נטפליקס כבר צורכת יותר מ- 37% מתעבורת האינטרנט בארצות הברית. אם אינטרנט לא עשו זאת’לא משתף פעולה, נטפליקס תשתמש עוד יותר באינטרנט. האינטרנט לא יכול היה’t לטפל בכל תנועת הווידיאו. ספקי האינטרנט יצטרכו להוסיף הרבה יותר קיבולת רשת, וזה’זה יקר לבנות.

כרגע, עד 100% מתוכן נטפליקס מוגש מתוך רשתות האינטרנט. זה מקטין את העלויות על ידי הקלה על גודש באינטרנט עבור ספקי האינטרנט. במקביל, חברי נטפליקס חווים חווית צפייה באיכות גבוהה. וביצועי הרשת משתפרים לכולם.

Connect Open הוא אמין וגמיש

מוקדם יותר דנו כיצד נטפליקס הגדילה את אמינות המערכת שלה על ידי אזל שלושה אזורי AWS שונים. הארכיטקטורה של Open Connect השיגה את אותה מטרה.

מה שאולי לא ברור מייד הוא שה- OCAs אינם תלויים זה בזה. OCAs פועלים כ- Archipelagos המשרתים את עצמם. חברים הזורמים מ- OCA אחד אינם מושפעים כאשר OCAs אחרים נכשלים.

מה קורה כאשר OCA נכשל? לקוח נטפליקס אתה’השימוש מחדש עובר מיד ל- OCA אחר ומחדש את הזרימה.

מה קורה אם יותר מדי אנשים במיקום אחד משתמשים ב- OCA? לקוח Netflix ימצא OCA טעון קל יותר לשימוש.

מה קורה אם הרשת שחברה משתמשת בהן כדי להזרים וידאו הופכת לעומס יתר על המידה? אותו סוג של דברים. לקוח נטפליקס ימצא OCA נוסף ברשת בעלת ביצועים טובים יותר.

Open Connect היא מערכת אמינה וגמישה מאוד.

נטפליקס שולט בלקוח

נטפליקס מטפל בכישלונות בחינניות מכיוון שהוא שולט בלקוח בכל מכשיר שמריץ את נטפליקס.

נטפליקס מפתחת את אפליקציות Android ו- iOS שלה עצמן, כך שתוכל לצפות שהם ישלמו על אלה. אבל אפילו בפלטפורמות כמו טלוויזיות חכמות, בהן נטפליקס לא’לא לבנות את הלקוח, ל- Netflix עדיין יש שליטה מכיוון שהיא שולטת ב ערכת פיתוח תוכנה (SDK).

SDK הוא קבוצה של כלי פיתוח תוכנה המאפשרים יצירת יישומים. כל אפליקציית נטפליקס מבקשת בקשות ל- AWS ומשחקת וידאו באמצעות ה- SDK.

על ידי שליטה ב- SDK, נטפליקס יכולה להסתגל בעקביות ושקוף לרשתות להאט, OCAs כושלים וכל בעיות אחרות שעלולות להתעורר.

סוף סוף: כאן’מה קורה כשאתה לוחץ על Play

זה’היה דרך ארוכה להגיע לכאן. אָנוּ’למד הרבה. כאן’זה מה שאנחנו’למד עד כה:

  • ניתן לחלק את נטפליקס לשלושה חלקים: ה- Backend, הלקוח וה- CDN.
  • כל הבקשות מלקוחות נטפליקס מטופלות ב- AWS.
  • כל הווידיאו מוזרם ממכשיר Open Connect Appliance סמוך (OCA) ב- Open Connect CDN.
  • נטפליקס פועלת משלושה אזורי AWS ובדרך כלל יכולה להתמודד עם כישלון בכל אזור מבלי שחברים אפילו שמו לב.
  • תוכן וידאו חדש הופך על ידי נטפליקס לפורמטים רבים ושונים כך שניתן לבחור את הפורמט הטוב ביותר לצפייה בהתבסס על סוג המכשיר, איכות הרשת, המיקום הגאוגרפי והחבר’תוכנית מנוי.
  • בכל יום, Over Open Connect, נטפליקס מפיצה וידאו ברחבי העולם, על סמך מה שהם מנבאים חברים בכל מיקום ירצו לצפות.

כאן’תמונה של איך נטפליקס מתארת ​​את תהליך ההפעלה:

עכשיו, בואו’השלים את התמונה:

  • אתה בוחר סרטון לצפייה באמצעות לקוח הפועל במכשיר כלשהו. הלקוח שולח א לְשַׂחֵק בקש, מציין איזה סרטון אתה רוצה לנגן, לנטפליקס’ג אפליקציות הפעלה שירות פועל ב- AWS.
  • אָנוּ’לא דיברתי על זה לפני כן, אבל חלק גדול ממה שקורה לאחר שתפגע במשחק קשור לרישוי. לא לכל מיקום בעולם יש רישיון לצפייה בכל סרטון. נטפליקס חייבת לקבוע אם יש לך רישיון תקף לצפייה בסרטון מסוים. ניצחנו’לא לדבר על איך זה עובד – זה’זה ממש משעמם – אבל קח בחשבון את זה’זה תמיד קורה. סיבה אחת לכך שנטפליקס החלה לפתח תוכן משלה היא להימנע מבעיות רישוי. נטפליקס רוצה לשחרר מופע לכולם בעולם בו זמנית. יצירת תוכן משלה היא הדרך הקלה ביותר עבור נטפליקס להימנע מדאגה לבעיות רישוי.
  • אם לוקחים בחשבון את כל המידע הרלוונטי, שירות אפליקציות ההפעלה מחזיר כתובות אתרים של עד עשרה שרתי OCA שונים. אלה זה סוג של כתובות אתרים בהן אתה משתמש כל הזמן בדפדפן האינטרנט שלך. נטפליקס משתמשת בכתובת ה- IP ובמידע שלך מ- ISP.
  • הלקוח בוחר באופן מושכל באיזה OCA להשתמש. זה עושה זאת על ידי בדיקת איכות חיבור הרשת לכל OCA. זה יתחבר ל- OCA המהיר והאמין ביותר. הלקוח ממשיך להפעיל בדיקות אלה לאורך כל תהליך הזרמת הווידיאו.
  • הלקוח בודק כדי להבין את הדרך הטובה ביותר לקבל תוכן מה- OCA.
  • הלקוח מתחבר ל- OCA ומתחיל להזרים וידאו למכשיר שלך.
  • האם שמת לב כשאתה צופה בווידיאו איכות התמונה משתנה? לפעמים זה ייראה פיקסל, ואחרי זמן מה התמונה מצליפה לאיכות HD? זֶה’S מכיוון שהלקוח מסתגל לאיכות הרשת. אם איכות הרשת יורדת, הלקוח מוריד את איכות הווידיאו להתאמה. הלקוח יעבור ל- OCA אחר כאשר האיכות יורדת יותר מדי.

זֶה’s מה קורה כשאתה לוחץ על Play בנטפליקס. מי היה חושב אי פעם דבר כל כך פשוט כמו שצפייה בסרטון היה כל כך מורכב?

מאמרים קשורים

  • על Hackernews וב- Hackernews
  • ב- Reddit וב- Reddit

מקרה מקרה של נטפליקס – כיצד AWS גרמה לנטפליקס לעבוד חלק?

מקרה מקרה של נטפליקס - כיצד AWS גרמה ל- Netflix לעבוד בצורה חלקה?

כל מי שאוהב לצפות בסרטים וסדרות או סרטים תיעודיים באינטרנט מודע ליישום זה בשם “נטפליקס”. זוהי חברת שירותי הבידור הסטרימינג הגדולה בעולם עם כ -193 מיליון משתמשים בתשלום עם זמינות בסביבות 190 מדינות.

אתגרים

בשנת 2000 נטפליקס היו רק 300,000 מנויים אך רק תוך 20 שנה בסיס לקוחות גדל באופן אקספוננציאלי. ל- Netflix יש יותר מ 126 סדרות וסרטים מקוריים שהם יותר מכל ערוץ רשת וערוץ כבלים אחרים.

זה’לא פשוט להזרים יותר מ -250 מיליון שעות סרטונים ביום. בקנה מידה זה המספק איכות, בידור לכל משתמש תוך שניות הוא לא משימה פשוטה. ואז מגיע תנועת הרשת הענקית מאוד.

נטפליקס משתמשת בארכיטקטורת שירותי מיקרו. בארכיטקטורת שירות מיקרו, כל יישום או שירות מיקרו’קוד ומשאבים הם זה’s משל עצמו. זה לא ישתף אף אחד ממנה עם אפליקציה אחרת מטבעו. ההערכה היא כי נטפליקס משתמשת בסביבות 700 שירותי מיקרו כדי לשלוט בכל אחד מהחלקים הרבים בשירות נטפליקס כולו: חנות שירות מיקרו -שירותים מה שכולכם צופים בהם, אחד מנכה את העמלה החודשית מכרטיס האשראי, אחד מסתכל על היסטוריה של הצפייה שלך ומשתמש באלגוריתמים כדי לנחש רשימה של רשימה של סרטים שתאהב, ואחד יספק את השמות שלך ותמונות של סרטים כדי להראות ברשימה של סרטים ברשימה כי.

פִּתָרוֹן

כדי להריץ את כל זה צריך להיות רשת ענקית של שרתים שפעם נטפליקס הייתה בבעלותה. אבל ככל שהלקוחות והתכנים גדלו זה הפך לכאבי גב עבור נטפליקס. אז הם החליטו להריץ את כל זה בשרתים מישהו אחר שיעסוק גם בתחזוקת החומרה. מישהו שהם בחרו אינו אלא AWS (שירותי אינטרנט של אמזון).

נטפליקס משתמשת ב- AWS כמעט לכל צרכי המחשוב והאחסון שלה, כולל מסדי נתונים, ניתוחים, מנועי המלצות, קידוד וידאו ועוד – מאות פונקציות שבסך הכל משתמשים ביותר מ- 100,000 מופעי שרת על AWS.

שירותים נטפליקס שימושים מ- AWS הם כדלקמן:

  • AWS EC2 (מופעי מחשוב מדרגיים)
  • AWS S3 (אחסון מדרג)
  • AWS DynamoDB (מסד נתונים מופץ מדרגי)
  • AWS EMR (עיבוד נתונים גדולים ואנליטיקס)
  • AWS ELB (איזון עומס)
  • אמזון קינזיס

1) AWS EC2:- Amazon Elastic Compute Cloud (Amazon EC2) הוא שירות אינטרנט המספק קיבולת מחשוב מאובטחת וניתנת לשנות בענן. זה נועד להקל על מחשוב ענן בקנה מידה באינטרנט עבור המפתחים.

2) AWS S3 – שירות אחסון פשוט של אמזון הוא אחסון לאינטרנט. זה נועד להקל על המחשוב בקנה מידה אינטרנט למפתחים. ל- Amazon S3 יש ממשק שירותי אינטרנט פשוט שתוכלו להשתמש בו כדי לאחסן ולאחזר כל כמות נתונים, בכל עת, מכל מקום באינטרנט.

3) AWS Dynamodb – DynamoDB היא מערכת מסד נתונים של שירותי אינטרנט של אמזון התומכת במבני נתונים ושירותי ענן מוערכים על מפתח. זה מאפשר למשתמשים את היתרון של קנה מידה אוטומטי, מטמון מזיכרון, גיבוי ומשחזר אפשרויות עבור כל היישומים שלהם בקנה מידה באינטרנט באמצעות DynamodB.

4) AWS EMR – Amazon Elastic MapReduce (EMR) הוא כלי Amazon Web Services (AWS) לעיבוד וניתוח נתונים גדולים. Amazon EMR מציעה את שירות התצורה הנמוך הניתן להרחבה כחלופה קלה יותר להפעלת מחשוב אשכול פנים.

5) AWS ELB – איזון עומס מקבל תנועה נכנסת מלקוחות ומנותק בקשות ליעדים הרשומים שלו (כגון מופעי EC2) באזורי זמינות אחד או יותר. איזון העומס גם עוקב אחר בריאות היעדים הרשומים שלו ומבטיח שהוא מנתח את התעבורה רק ליעדים בריאים. כאשר איזון העומס מגלה יעד לא בריא, הוא מפסיק לנתב תנועה למטרה זו. לאחר מכן הוא מחדד את התנועה לניתוב למטרה זו כאשר הוא מגלה שהמטרה שוב בריאה.

6) Amazon Kinesis: Amazon Kinesis Streams (KDS) הוא שירות הזרמת נתונים בזמן אמת ניתן להרחבה ועמידה בזמן אמת. . הנתונים שנאספו זמינים באלפיות השנייה כדי לאפשר מקרי שימוש בניתוח בזמן אמת כמו לוחות מחוונים בזמן אמת, גילוי אנומליה בזמן אמת, תמחור דינאמי ועוד.

כל השירותים הללו מ- AWS שומרים על נטפליקס מהיר וחלק שירות עבור משתמשים.

האם נטפליקס משתמשת באקמאי האם נטפליקס משתמשת באפצ’י?

Related Posts

how_to_stay_safe_on_onlyfans_5

Νίσα

OnlyFans Free Pages vs Paid: How Access Differs

onlyfans_help_center

Νίσα

Budgeting Tips and PPV Across Free OnlyFans Pages

6a0b117e02549eec1a0db52c_infographic_user_growth_bar_chart-1

Νίσα

Safe Browsing Protocols for Zero-Dollar OnlyFans Pages

banner
banner

PROMO

racavedigger.com
© racavedigger.com 2026