سطح عمومی

نقشه راه Data Engineer Roadmap

Step by step guide to becoming a Data Engineer in 2025

طراحی و تدوین مسیر

امیر دایی

محتوای مسیر
۱۸۴ گام آموزشی
رضایت یادگیرندگان
۵ از ۵(۱ رأی)
همراهان این مسیر
اولین نفر باشید
نظرتان درباره‌ی این مسیر؟
اولین دیدگاه را بنویسید
Data Engineerپیش‌نیازهانقشه راه Pythonنقشه راه SQLRELATED ROADMAPS› Data Analyst Roadmap› AI & Data Scientist RoadmapIntroductionData Engineering چیست؟مقایسه Data Engineering و DataScienceمهارت‌ها و مسئولیت‌هاچرخه حیات Data Engineeringانتخاب فناوری‌های مناسبیادگیری مبانیمهارت‌های برنامه‌نویسیPythonJavaScalaGoاستفاده از Python توصیهمی‌شودساختمان داده‌ها و الگوریتم‌هاGit و GitHubمبانی لینوکسمبانی شبکهمبانی سیستم‌های توزیع‌شدهData Generationذخیره‌سازی دادهData IngestionData Servingچرخه حیات Data Engineering1234Data Generationدرک مراحل مختلفSources of Dataپایگاه دادهAPIهالاگ‌هااپلیکیشن‌هایموبایلاینترنت اشیاملاحظات جمع‌آوری دادهذخیره‌سازی دادهDatabase Fundamentalsنرمال‌سازی دادهتکنیک‌های مدل‌سازی دادهقضیه CAPOLTP vs OLAPSlowly Changing Dimension - SCDمقایسه مقیاس‌پذیری افقی و عمودیمقایسه Star Schema و SnowflakeSchemaپایگاه‌های داده رابطه‌اییادگیری SQLایندکس‌گذاریتراکنش‌هاپایگاه‌های دادهرابطه‌ایMySQLPostgreSQLMariaDBAurora DBOracleMS SQLپایگاه‌های داده NoSQLDocumentMongoDBElasticSearchCosmosDBCouchDBستونCassandraBigTableHBaseگرافNeo4jNeptuneKey-ValueRedisMemcachedDynamoDBData WarehousingWhat is Data Warehouse?Data Warehousing ArchitecturesData WarehouseGoogle BigQuerySnowflakeAmazon RedshiftData MartData LakeDatabricks Delta LakeSnowflakeOnehouseData Meshسایر معماری‌های دادهData FabricData Hubمعماری Metadata-firstگزینه‌های ServerlessCloud Computingمعماری‌های ابریارائه‌دهندگانخدمات ابریAWSAmazon EC2S3Amazon RDSAmazon RDSAzure Virtual MachinesAzure Blob StorageAzure SQL DatabaseData FactoryAzureCompute EngineGoogle Cloud StorageCloud SQLDataflowGoogle CloudData IngestionTypes of Data IngestionBatchHybridStreamingRealtimeخط لوله‌های دادهفرآیند ETLاستخراج دادهتبدیل دادهبارگذاری دادهابزارهای DataPipelineApache AirflowdbtLuigiPerfectمبانی Cluster ComputingCluster Computing چیستسیستم‌های فایل توزیع‌شدهزمان‌بندی کارهاابزارهای مدیریت کلاسترKubernetesApache Hadoop YARNHDFSBig Data Toolsاکوسیستم HadoopHDFSMapReduceYARNApache SparkContainers & OrchestrationDockerKubernetesGoogle Cloud GKEAWS EKSCI/CDGitLab CICircle CIGitHub ActionsArgoCDMonitoringPrometheusDatadogSentryNew RelicTestingIntegration TestingUnit TestingEnd-to-End TestingFunctional TestingA/B TestingLoad TestingSmoke TestingMessaging Systemsچیستی و دلیل استفادهارتباط Async در برابر Syncمقایسه پیام‌ها و استریم‌هابهترین الگوهاابزارهای رایجApache KafkaRabbitMQAWS SQSAWS SNSInfrastructure as Code - IaCمقایسه Declarative و ImperativeIdempotencyقابلیت استفاده مجددمدیریت محیط‌هاابزارهای رایجTerraformOpenTofuAWS CDKGoogle Deployment Mgr.Data Servingتحلیل دادهبازدید از نقشه راه تحلیلگر دادههوش تجاریابزارهایBIMicrosoft Power BIStreamlitTableauLookerReverse ETLمقایسه ETL و Reverse ETLکاربردهای Reverse ETLابزارهاCensusSegmentHightouchSecurityاحراز هویت و تعیین سطح دسترسیرمزنگاریتوکن‌سازیData MaskingData ObfuscationData Governanceکیفیت دادهData Lineageمدیریت متادیتاتعامل‌پذیری دادهکیفیت دادهPrivacyGDPRECPAقانون هوش مصنوعی اتحادیه اروپانسخه تعاملی این نقشه راه و موارد بیشتر رادر اینجا ببینیدkaar2.irنقشه‌های راه مرتبط را نیز ببینیدPythonمتخصص هوش مصنوعی و دادهSQLمقررات داده و هوشمصنوعیتحلیلگر دادهMLOpsیادگیری ماشینMLOps