AWS Hadoop-u dəstəkləyirmi?
AWS Hadoop-u dəstəkləyirmi?

Video: AWS Hadoop-u dəstəkləyirmi?

Video: AWS Hadoop-u dəstəkləyirmi?
Video: AWS EMR Big Data Processing with Spark and Hadoop | Python, PySpark, Step by Step Instructions 2024, Noyabr
Anonim

Apache™ Hadoop ® böyük verilənlər toplusunu səmərəli şəkildə emal etmək üçün istifadə edilə bilən açıq mənbə proqram layihəsidir. Amazon EMR tam konfiqurasiya edilmiş, elastik klasterləri yaratmağı və idarə etməyi asanlaşdırır Amazon EC2 instansiyalar işləyir Hadoop və digər proqramlar Hadoop ekosistem.

Buna görə AWS Hadoop istifadə edirmi?

Amazon Veb Xidmətləri istifadə edir açıq mənbəli Apache Hadoop məlumat tələb edən tapşırıqları yerinə yetirmək üçün böyük həcmdə hesablama gücünə çıxışı asanlaşdırmaq üçün paylanmış hesablama texnologiyası. Hadoop , Google-un MapReduce-un açıq mənbə versiyası artıq Yahoo və Facebook kimi şirkətlər tərəfindən istifadə olunur.

İkincisi, AWS EMR nə edir? Amazon Elastik XəritəReduce ( EMR ) edir bir Amazon Veb Xidmətləri ( AWS ) böyük verilənlərin emalı və təhlili üçün alət. Amazon EMR virtual serverlərin Hadoop klasterində böyük məlumatları emal edir Amazon Elastik Hesablama Buludu ( EC2 ) və Amazon Sadə Saxlama Xidməti (S3).

Bu şəkildə Hadoop və AWS arasındakı fərq nədir?

Hadoop çoxsaylı kompüterlər arasında böyük məlumat dəstlərinin emalına kömək edən çərçivədir. Buraya Map/Reduce (paralel emal) və HDFS (paylanmış fayl sistemi) daxildir. AWS əvvəlcə ParAccel tərəfindən hazırlanmış xüsusi texnologiya üzərində qurulmuş məlumat anbarıdır. Apache üçün bəzi ümumi istifadələr hansılardır Hadoop ?

AWS s3 Hadoopdur?

S3 əslində buludda sonsuz bir yaddaşdır, lakin HDFS deyil. HDFS fiziki maşınlarda yerləşdirilir, ona görə də orada istənilən proqramı icra edə bilərsiniz. Heç bir şey icra edə bilməzsiniz S3 FS deyil, sadəcə Obyekt Mağazası kimi.

Tövsiyə: