متخصص مهندسی داده و بیگ دیتا سون لرن
محتوای این دوره، شامل ویدئوها، فایلهای پیوست، پروژهها و یادداشتها، با هدف یادگیری سریعتر و مؤثرتر طراحی شدهاند. تمامی دوره های رایگان کده بهصورت رایگان و همچنین از طریق خرید اشتراکی در دسترس بوده و سعی شده همواره تمامی دوره ها بدون قفل و دارای آخرین آپدیت باشند. دوره ها فقط از سمت ربات تلگرامی رایگان کده قابل دانلود هستند.
متخصص مهندسی داده و بیگ دیتا سون لرن
محتوای این دوره، شامل ویدئوها، فایلهای پیوست، پروژهها و یادداشتها، با هدف یادگیری سریعتر و مؤثرتر طراحی شدهاند. تمامی دوره های رایگان کده بهصورت رایگان و همچنین از طریق خرید اشتراکی در دسترس بوده و سعی شده همواره تمامی دوره ها بدون قفل و دارای آخرین آپدیت باشند.
این دوره تا آخرین پارت منتشر شده از سوی سازنده ( ساخت سیستم مدیریت مکان رانندگان اوبر/اسنپ/تپسی - مجموعهی فایلها) قرار گرفته است!
این دوره بدون هیچ لایسنس و قفل نرمافزاری با فرمت MP4 قرار گرفته است!
دادهها به عنوان یکی از اصلیترین عناصر در کسب و کارهای مدرن محسوب میشوند. کسب و کارها با استفاده از این دادهها تصمیمگیریهای خود را انجام میدهند و جنگی پنهان برای به دست آوردن هر چه بیشتر دادهها در حال انجام است. هر چه یک کسب و کار دادههای بیشتر و حجیمتری داشته باشد و بتواند این دادهها را با سرعت پردازش کند، میتواند قدرت بیشتری در تشخیص رفتار کاربران، پیشبینی آینده و محاسبات مربوط به کسب و کار داشته باشد.
در این حوزه، چالش اصلی ذخیره و پردازش دادههاست. حجم عظیمی از دادهها برای ذخیره و پردازش نیازمند روشها و تکنیکهای خاصی برای پردازش هستند. و این در حالیست که روشهای سنتی قادر به ذخیره و پردازش این حجم عظیم از دادهها نیستند. برای همین بایستی برای ذخیره و پردازش این حجم از دادهها از روشهای مدرنتر که معمولا در حوزه مهندسی داده و بیگ دیتا مورد بحث و بررسی قرار میگیرد، استفاده کرد.ی.
دوره متخصص مهندسی داده و بیگ دیتا با هدف تدریس تمامی سرفصلها و مباحث لازم برای تسلط دانشجویان جهت ورود به بازار کار ارائه شده است. این دوره به صورت آنلاین برای مخاطبان آماده شده است و دانشجو را از مفاهیم پایه تا مفاهیم پیشرفته برای ورود به بازار کار یاری میرساند.
- کدها و مجموعه دادههای این بخش
- دادههای توزیع شده چیست؟ – قسمت اول
- دادههای توزیع شده چیست؟ – قسمت دوم
- زبانهای برنامهنویسی مناسب برای سیستمهای توزیع شده و بیگدیتا
- ساخت یک نرمافزار تحت وب با پایتون و فلسک – قسمت اول
- ساخت یک نرمافزار تحت وب با پایتون و فلسک – قسمت دوم
- ساخت یک نرمافزار تحت وب با پایتون و فلسک – قسمت سوم
- پیشنیازهای رایگان (آموزش مقدمات پایتون + آموزش مقدمات جاوا)
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت اول
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت دوم
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت سوم
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت چهارم
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت پنجم
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت ششم
- سرور لینوکس و انتشار نرمافزار تحت وب – قسمت هفتم
- برنامهنویسی shell لینوکس – قسمت اول
- برنامهنویسی shell لینوکس – قسمت دوم
- برنامهنویسی shell لینوکس – قسمت سوم
- برنامهنویسی shell لینوکس – قسمت چهارم
- برنامهنویسی shell لینوکس – قسمت پنجم
- اسپینآف (مطالعهی موردی استفاده از سیستمهای توزیع شده در کسب و کارهای ایرانی)
- مثال کاربردی اجرای برنامهی توزیع شده بر روی سرور لینوکس – قسمت اول
- مثال کاربردی اجرای برنامهی توزیع شده بر روی سرور لینوکس – قسمت دوم
- مثال کاربردی اجرای برنامهی توزیع شده بر روی سرور لینوکس – قسمت سوم
- آشنایی با protocol buffer و چهارچوب GRPC – قسمت اول
- آشنایی با protocol buffer و چهارچوب GRPC – قسمت دوم
- آشنایی با protocol buffer و چهارچوب GRPC – قسمت سوم
- آشنایی با protocol buffer و چهارچوب GRPC – قسمت چهارم
- آشنایی با protocol buffer و چهارچوب GRPC – قسمت پنجم
- آشنایی با protocol buffer و چهارچوب GRPC – قسمت ششم
- آشنایی با ویندوز سرور و اجرای نرمافزارها در آن – قسمت اول
- آشنایی با ویندوز سرور و اجرای نرمافزارها در آن – قسمت دوم
- آشنایی با ویندوز سرور و اجرای نرمافزارها در آن – قسمت سوم
- آشنایی با VirtualMachine و نصب لینوکس بر روی ویندوز
- مقدمات پایگاه داده و سیستمهای ذخیره سازی داده ها
- کدها و مجموعه دادههای این بخش
- مسئلهی دو ژنرال و مشکل سیستمهای توزیع شده
- معماری ارباب-برده (master-slave) در سیستمهای توزیع شده (قسمت اول)
- معماری ارباب-برده (master-slave) در سیستمهای توزیع شده (قسمت دوم)
- ساعتهای منطقی در سیستم توزیع شده
- تفاوت SQL و NoSQL و آشنایی با اکوسیستم آنها
- در این بخش چه چیزی یاد میگیریم؟
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت اول
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت دوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهارم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت پنجم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت ششم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت هفتم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت هشتم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت نهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت دهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت یازدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت دوازدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سیزدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهاردهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت پانزدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت شانزدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت هفدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت هجدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت نوزدهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیستم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و یکم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و دوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و سوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و چهارم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و پنجم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و ششم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و هفتم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و هشتم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت بیست و نهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و یک
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و دوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و سوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و چهارم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و پنجم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و ششم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و هفتم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و هشتم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت سی و نهم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهلم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهل و یکم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهل و دوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهل و سوم
- پایگاه دادهی Posgtgres (مثال Netflix، فیلیمو، نماوا) – قسمت چهل و چهارم
- در این بخش چه چیزی یاد میگیریم؟
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت اول
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت دوم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت سوم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت چهارم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت پنجم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت ششم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت هفتم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت هشتم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت نهم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت دهم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت یازدهم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت دوازدهم
- پایگاه داده SQL Server (مثال طراحی سیستم منابع انسانی) – قسمت سیزدهم
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت اول
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت دوم
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت سوم
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت چهارم
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت پنجم
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت ششم
- پایگاه داده MySQL (مثال طراحی سیستم بیپتونز، اسپاتیفای) – قسمت هفتم
- HA Proxy و MySQL برای توزیع بار – قسمت اول
- HA Proxy و MySQL برای توزیع بار – قسمت دوم
- پایگاه داده SQLite (مثال دادههای سرشماری کشور) – قسمت اول
- پایگاه داده SQLite (مثال دادههای سرشماری کشور) – قسمت دوم
- در این بخش چه چیزی یاد میگیریم؟
- تئوری CAP و انتخاب درست پایگاه داده مبتنی بر این تئوری
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت اول
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت دوم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت سوم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت چهارم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت پنجم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت ششم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت هفتم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت هشتم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت نهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت دهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت یازدهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت دوازدهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت سیزدهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت چهاردهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت پانزدهم
- پایگاه داده Redis (مثال طراحی سیستم اسنپ، تپسی، Uber) – قسمت شانزدهم
- جمع بندی(SQL و NoSQL) – قسمت اول
- جمع بندی (SQL و NoSQL) – قسمت دوم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت اول
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت دوم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت سوم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت چهارم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت پنجم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت ششم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت هفتم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت هشتم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت نهم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت دهم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت یازدهم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت دوازدهم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت سیزدهم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت چهاردهم
- پایگاه داده Cassandra (مثال دادههای سیستم کرایه دوچرخه) – قسمت پانزدهم
- جمع بندی (SQL و NoSQL) – قسمت سوم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت اول
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت دوم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت سوم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت چهارم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت پنجم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت ششم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت هفتم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت هشتم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت نهم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت دهم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت یازدهم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت دوازدهم
- پایگاه داده Elasticsearch (مثال دادههای دیوار) – قسمت سیزدهم
- جمع بندی (SQL و NoSQL) – قسمت چهارم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت اول
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت دوم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت سوم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت چهارم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت پنجم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت ششم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت هفتم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت هشتم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت نهم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت دهم
- پایگاه داده Mongodb (مثال دادههای Airbnb) – قسمت یازدهم
- جمع بندی (SQL و NoSQL) – قسمت پنجم
- در این بخش چه چیزی یاد میگیریم؟
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت اول
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت دوم
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت سوم
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت چهارم
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت پنجم
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت ششم
- پایگاه داده Prometheus (مثال سیستم یوتیوب) – قسمت هفتم
- ابزار Grafana و ارتباط آن با Prometheus
- انبار داده ClickHouse (مثال انبار داده آمازون، دیجیکالا) – قسمت اول
- انبار داده ClickHouse (مثال انبار داده آمازون، دیجیکالا) – قسمت دوم
- انبار داده ClickHouse (مثال انبار داده آمازون، دیجیکالا) – قسمت سوم
- انبار داده ClickHouse (مثال انبار داده آمازون، دیجیکالا) – قسمت چهارم
- انبار داده ClickHouse (مثال انبار داده آمازون، دیجیکالا) – قسمت پنجم
- انبار داده ClickHouse (مثال انبار داده آمازون، دیجیکالا) – قسمت ششم
- مقدمات داکر و نصب و اجرای نرم افزارها در داکر – قسمت اول
- مقدمات داکر و نصب و اجرای نرم افزارها در داکر – قسمت دوم
- مقدمات داکر و نصب و اجرای نرم افزارها در داکر – قسمت سوم
- RabbitMQ و نصب و اجرا با استفاده از داکر – قسمت اول
- RabbitMQ و نصب و اجرا با استفاده از داکر – قسمت دوم
- RabbitMQ و نصب و اجرا با استفاده از داکر – قسمت سوم
- RabbitMQ و نصب و اجرا با استفاده از داکر – قسمت چهارم
- Apache Kafka و نصب و اجرا با استفاده از داکر – قسمت اول
- Apache Kafka و نصب و اجرا با استفاده از داکر – قسمت دوم
- Apache Kafka و نصب و اجرا با استفاده از داکر – قسمت سوم
- Apache Kafka و نصب و اجرا با استفاده از داکر – قسمت چهارم
- Apache Kafka و نصب و اجرا با استفاده از داکر – قسمت پنجم
- Apache Kafka و نصب و اجرا با استفاده از داکر – قسمت ششم
- جمع بندی + نقشهی ذهنی
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت اول
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت دوم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت سوم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت چهارم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت پنجم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت ششم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت هفتم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت هشتم
- پایگاه داده مبتنی بر گراف Neo4J (مثال دادههای توییتر) – قسمت نهم
- جمع بندی + نقشه ذهنی
- کدها و مجموعه دادههای این بخش
- در این بخش چه چیزی یاد میگیریم؟
- آشنایی با Apache Hadoop (هدوپ) و معماری آن
- آشنایی با HDFS (فایل سیستم توزیع شده هدوپ) و معماری آن
- آشنایی با Map Reduce و معماری آن
- نصب و استفاده از هدوپ در داکر – قسمت اول
- نصب و استفاده از هدوپ در داکر – قسمت دوم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت اول
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت دوم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت سوم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت چهارم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت پنجم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت ششم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت هفتم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت هشتم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت نهم
- ساخت یک برنامه Map Reduce مبتنی بر جاوا بر بستر هدوپ – قسمت دهم
- ساخت یک برنامه Map Reduce مبتنی بر پایتون و Streaming – قسمت اول
- ساخت یک برنامه Map Reduce مبتنی بر پایتون و Streaming – قسمت دوم
- ساخت یک برنامه Map Reduce مبتنی بر پایتون و Streaming – قسمت سوم
- ساخت یک برنامه Map Reduce مبتنی بر پایتون و Streaming – قسمت چهارم
- در این بخش چه چیزی یاد میگیریم؟
- آپاچی پیگ (Pig) در اکوسیستم هدوپ (مثال دادههای اوبر) – قسمت اول
- آپاچی پیگ (Pig) در اکوسیستم هدوپ (مثال دادههای اوبر) – قسمت دوم
- آپاچی پیگ (Pig) در اکوسیستم هدوپ (مثال دادههای اوبر) – قسمت سوم
- آپاچی پیگ (Pig) در اکوسیستم هدوپ (مثال دادههای اوبر) – قسمت چهارم
- آپاچی پیگ (Pig) در اکوسیستم هدوپ (مثال دادههای اوبر) – قسمت پنجم
- آپاچی هایو (Hive) در اکوسیستم هدوپ (مثال سیستم شبکه شتاب) – قسمت اول
- آپاچی هایو (Hive) در اکوسیستم هدوپ (مثال سیستم شبکه شتاب) – قسمت دوم
- آپاچی هایو (Hive) در اکوسیستم هدوپ (مثال سیستم شبکه شتاب) – قسمت سوم
- آپاچی هایو (Hive) در اکوسیستم هدوپ (مثال سیستم شبکه شتاب) – قسمت چهارم
- آپاچی هایو (Hive) در اکوسیستم هدوپ (مثال سیستم شبکه شتاب) – قسمت پنجم
- پایگاه داده آپاچی HBase مبتنی بر Hadoop – قسمت اول
- پایگاه داده آپاچی HBase مبتنی بر Hadoop – قسمت دوم
- پایگاه داده آپاچی HBase مبتنی بر Hadoop – قسمت سوم
- پایگاه داده آپاچی HBase مبتنی بر Hadoop – قسمت چهارم
- آپاچی Mahout و یادگیری ماشین در هدوپ – قسمت اول
- آپاچی Mahout و یادگیری ماشین در هدوپ – قسمت دوم
- آپاچی Sqoop در اکوسیستم هدوپ – قسمت اول
- آپاچی Sqoop در اکوسیستم هدوپ – قسمت دوم
- آپاچی Sqoop در اکوسیستم هدوپ – قسمت سوم
- جمع بندی + نقشه ذهنی
- تمرین پایانی فصل
- کدها و مجموعه دادههای این بخش
- در این بخش چه چیز یاد میگیریم؟
- آشنایی با آپاچی اسپارک (Spark) و تفاوت آن با هدوپ (Hadoop) – قسمت اول
- آشنایی با آپاچی اسپارک (Spark) و تفاوت آن با هدوپ (Hadoop) – قسمت دوم
- آشنایی با زبان Scala – قسمت اول
- آشنایی با زبان Scala – قسمت دوم
- آشنایی با زبان Scala – قسمت سوم
- مفاهیم مقدماتی اسپارک بر بستر داکر (مثال دادههای AirBNB) – قسمت اول
- مفاهیم مقدماتی اسپارک بر بستر داکر (مثال دادههای AirBNB) – قسمت دوم
- مفاهیم مقدماتی اسپارک بر بستر داکر (مثال دادههای AirBNB) – قسمت سوم
- مفاهیم مقدماتی اسپارک بر بستر داکر (مثال دادههای AirBNB) – قسمت چهارم
- مفاهیم مقدماتی اسپارک بر بستر داکر (مثال دادههای AirBNB) – قسمت پنجم
- پایتون و اسپارک (PySpark) (مثال دادههای MovieLens و بازار سهام) – قسمت اول
- پایتون و اسپارک (PySpark) (مثال دادههای MovieLens و بازار سهام) – قسمت دوم
- پایتون و اسپارک (PySpark) (مثال دادههای MovieLens و بازار سهام) – قسمت سوم
- اسپارک و SQL (مثال دادههای بیماری قلبی) – قسمت اول
- اسپارک و SQL (مثال دادههای بیماری قلبی) – قسمت دوم
- ارتباط اسپارک و HDFS هدوپ
- پروژه مشتریهای هایپرمارکت با پایتون و آپاچی اسپارک – قسمت اول
- پروژه مشتریهای هایپرمارکت با پایتون و آپاچی اسپارک – قسمت دوم
- بررسی نصب آپاچی اسپارک در داکر
- در این بخش چه چیز یاد میگیریم؟
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت اول
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت دوم
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت سوم
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت چهارم
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت پنجم
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت ششم
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت هفتم
- یادگیری ماشین در اسپارک (Spark MLib) (مثال دادههای خط تولید و فروش محصولات) – قسمت هشتم
- پردازش جریان دادهها در اسپارک (Spark Streaming) (مثال لاگ کاربران وبسایت) – قسمت اول
- پردازش جریان دادهها در اسپارک (Spark Streaming) (مثال لاگ کاربران وبسایت) – قسمت دوم
- پردازش جریان دادهها در اسپارک (Spark Streaming) (مثال لاگ کاربران وبسایت) – قسمت سوم
- پردازش جریان دادهها در اسپارک (Spark Streaming) (مثال لاگ کاربران وبسایت) – قسمت چهارم
- ترکیب آپاچی اسپارک و آپاچی کافکا برای پردازش جریان دادهها
- ترکیب آپاچی اسپارک و Mongo برای پردازش دادهها
- آپاچی اسپارک گراف (GraphX)
- آپاچی AirFlow برای مدیریت تسکها
- ساخت سیستم مدیریت مکان رانندگان اوبر/اسنپ/تپسی – قسمت اول
- ساخت سیستم مدیریت مکان رانندگان اوبر/اسنپ/تپسی – قسمت دوم
- ساخت سیستم مدیریت مکان رانندگان اوبر/اسنپ/تپسی – قسمت سوم
- ساخت سیستم مدیریت مکان رانندگان اوبر/اسنپ/تپسی – قسمت چهارم
- ساخت سیستم مدیریت مکان رانندگان اوبر/اسنپ/تپسی – مجموعهی فایلها
- این دوره مناسب چه کسانی است؟
- کسانی که دادهها را تحلیل میکنند و به دنبال الگوها و روندها در دادهها هستند.
- کسانی که سیستمها و ابزارهای مدیریت دادهها را توسعه و نگهداری میکنند.
- اگر پروژههای بزرگ دادهای را مدیریت میکنید و نیاز به درک کامل از فرآیندهای دادهمحور دارید، این دوره مناسب شما است.
- این دوره مناسب چه کسانی نیست؟
- اگر جزو افرادی هستید که علاقهای به کار با دادهها و تجزیه و تحلیل آنها ندارید. این دوره برایتان مناسب نیست.
- اگر علاقه ای به ریاضیات و آمار ندارید، مهندسی داده برایتان مناسب نیست.
- مهندسی داده نیاز به دانش عمیق در برنامهنویسی، پایگاههای داده و ابزارهای تحلیل داده دارد. اگر تمایلی به یادگیری یا کار با این مهارتها ندارید، این دوره برایتان مناسب نیست.
ساخت و نگهداری زیرساختها، ابزارها و سیستمهایی که سازمانها را قادر میسازد تا دادهها را جمعآوری، ذخیره، پردازش و تجزیه و تحلیل کنند. مهندسان داده با مجموعه داده های بزرگ و پیچیدهای کار میکنند که به راهحلهای پردازشی کارآمد و مقیاسپذیر نیاز دارند. آنها مسئول اطمینان از دقیق، کامل بودن و در دسترس بودن دادهها برای دانشمندان داده و سایر ذینفعانی هستند که از آن برای تجزیه و تحلیل و تصمیمگیری استفاده میکنند.
مهندسی داده و علم داده دو زمینه نزدیک اما متمایز هستند. در حالی که مهندسان داده بر زیرساختها و ابزارهایی تمرکز میکنند که پردازش دادهها را ممکن میسازد، دانشمندان داده بر تجزیه و تحلیل و تفسیر دادهها برای استخراج بینش و تصمیمگیری آگاهانه تمرکز میکنند. دانشمندان داده معمولاً در زمینههایی مانند آمار، ریاضیات یا علوم رایانه سوابق دارند و از ابزارهایی مانند یادگیری ماشین و هوش مصنوعی برای تجزیه و تحلیل دادهها و پیشبینی استفاده میکنند. از سوی دیگر مهندسان داده بر طراحی و ساخت زیرساختها و ابزارهایی تمرکز میکنند که پردازش، ذخیرهسازی و بازیابی داده ها را ممکن میسازد.
مهارتهای مورد نیاز مهندس داده، شامل تسلط به یک یا چند زبان برنامه نویسی، دانش سیستم های مدیریت پایگاه داده، درک سیستم های توزیع شده، دانش تکنیکها و ابزارهای مدل سازی داده ها، دانستن مفاهیم انبار داده، درک تکنیکهای پردازش دادهها و دانش پلتفرمهای رایانش ابری است.