This media is not supported in your browser
VIEW IN TELEGRAM
تو یه پست جذاب دیگه می خوام بهتون Presto رو معرفی کنم.
ابزار Presto یه Interactive Dashboard Editor برای Jupyter Notebook محبوب هستش. این افزونه JupyterLab، به شما کمک می کنه بتونید کنار نوت بوک هاتون، داشبوردهای مصورسازی بسازید.
می تونید فیلم کار با این ابزار رو مشاهده بفرمایید.
لینک گیت هاب
👨👧👦 ما را به دوستان و علاقه مندان علوم داده و بیگ دیتا معرفی کنید.
#ژوپیتر #نوت_بوک #آناکوندا #Jupyter #Anaconda
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
ابزار Presto یه Interactive Dashboard Editor برای Jupyter Notebook محبوب هستش. این افزونه JupyterLab، به شما کمک می کنه بتونید کنار نوت بوک هاتون، داشبوردهای مصورسازی بسازید.
می تونید فیلم کار با این ابزار رو مشاهده بفرمایید.
لینک گیت هاب
👨👧👦 ما را به دوستان و علاقه مندان علوم داده و بیگ دیتا معرفی کنید.
#ژوپیتر #نوت_بوک #آناکوندا #Jupyter #Anaconda
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
تاریخچه API های Apache Spark
#اسپارک #Spark
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
#اسپارک #Spark
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
نسخه ۱.۱۱.۰ پلتفرم MLFlow ارائه شد.
این پلتفرم به منظور سهل الوصول سازی فرآیند توسعه برنامه های ماشین لرنینگ از جمله پیگیری تست های فنی، پکیجینگ کدها به منظور تجدیدپذیری قابلیت اجرای آنها، اشتراک مدل ها و استقرار مدل های ماشین لرنینگ مطرح می باشد.
از جمله ویژگی های کلیدی می توان موارد ذیل را بر شمرد:
* قابلیت Auto Logging در Python, Scikit-Learn
* پشتیبانی از XGBoost برای R
* پشتیبانی از یک اینترفیس گرافیکی به منظور تنظیم و حذف، مُدلهای رجیستر شده و آرشیو شده و همچنین تگ های نسخه های گوناگون
نکات تکمیلی ریلیز این نسخه رو در این لینک می تونید مطالعه بفرمایید.
همچنین می تونید وبلاگ دیتابریکس رو به عنوان رفرنس اصلی چک کنید.
#ماشین_لرنینگ #یادگیری_ماشین
#ML #MLFlow #Machine_Learning
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
این پلتفرم به منظور سهل الوصول سازی فرآیند توسعه برنامه های ماشین لرنینگ از جمله پیگیری تست های فنی، پکیجینگ کدها به منظور تجدیدپذیری قابلیت اجرای آنها، اشتراک مدل ها و استقرار مدل های ماشین لرنینگ مطرح می باشد.
از جمله ویژگی های کلیدی می توان موارد ذیل را بر شمرد:
* قابلیت Auto Logging در Python, Scikit-Learn
* پشتیبانی از XGBoost برای R
* پشتیبانی از یک اینترفیس گرافیکی به منظور تنظیم و حذف، مُدلهای رجیستر شده و آرشیو شده و همچنین تگ های نسخه های گوناگون
نکات تکمیلی ریلیز این نسخه رو در این لینک می تونید مطالعه بفرمایید.
همچنین می تونید وبلاگ دیتابریکس رو به عنوان رفرنس اصلی چک کنید.
#ماشین_لرنینگ #یادگیری_ماشین
#ML #MLFlow #Machine_Learning
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
هندلینگ بیگ دیتا با DeltaLake نسخه ۰.۷.۰ و Apache Spark نسخه ۳.۰
حالا ما شاهد امکان پیاده سازی دستورات Spark SQL DDL & DML در Delta Lake بر بستر نسخه جدید Apache Spark هستیم.
در DeltaLake نسخه ۰.۷.۰، امکان پشتیبانی از جداول Metastore و SQL DDL نهادینه شده.
#بیگ_دیتا #دلتالیک #دیتابریکس #اسپارک_اس_کیو_ال #کلان_داده
#BigData #DeltaLake #Databricks #SparkSQL
مطالعه کامل مقاله
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
حالا ما شاهد امکان پیاده سازی دستورات Spark SQL DDL & DML در Delta Lake بر بستر نسخه جدید Apache Spark هستیم.
در DeltaLake نسخه ۰.۷.۰، امکان پشتیبانی از جداول Metastore و SQL DDL نهادینه شده.
#بیگ_دیتا #دلتالیک #دیتابریکس #اسپارک_اس_کیو_ال #کلان_داده
#BigData #DeltaLake #Databricks #SparkSQL
مطالعه کامل مقاله
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
دوستان در مدت یک هفته می تونید به آموزش های سایت DataCamp رو به صورت رایگان دسترسی داشته باشید. بنظرم فرصت خوبی هست بتونیم دانش خودمون رو در حوزه دیتاساینس و دیتا آنالیتیک افزایش بدیم و یه مرور خوبی روی دانسته های کوچیکی که از دنیای دیتا و بیگ دیتا داریم داشته باشیم.
این پیام رو با دوستان تون که به حوزه دیتا و بیگ دیتا علاقه مند هستند به اشتراک بزارید تا اونا هم مطلع باشن.
زنده باشید انشاالله
#آموزش #آموزش_رایگان #دیتاکمپ
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
این پیام رو با دوستان تون که به حوزه دیتا و بیگ دیتا علاقه مند هستند به اشتراک بزارید تا اونا هم مطلع باشن.
زنده باشید انشاالله
#آموزش #آموزش_رایگان #دیتاکمپ
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
پنج شنبه این هفته به امید خدا سومین دوره میان مدت و پروژه محور Data Science و Big Data Analytics بصورت آنلاین برگزار میشه و تا اواسط آبان ماه ادامه داره.
تو این دوره انشالله قرار هست مباحث مهمی رو با هم پیش ببریم که مهمترین سرفصل ها عبارتند از:
Hadoop EcoSystem
Apache Spark Stack
Spark SQL
Spark Streaming
Cloudera Stack
Keras Deep Learning Framework
Machine Learning with Scikit-learn
Graph Analytics with NetworkX
Best NLP Libraries
Visualization Techniques
Data Manipulation Libraries
اطلاع از سرفصل ها و جزئیات دوره
اپیدمی کرونا باعث نشد که امکان برگزاری دوره ها رو از دست بدیم در عوض تجربه های جدیدی برامون حاصل شد.
روز به روز سعی می کنیم از حجم مجهولات بزرگی که داریم کاسته بشه و یه مقدار کوچک به دانسته هامون اضافه بشه.
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
تو این دوره انشالله قرار هست مباحث مهمی رو با هم پیش ببریم که مهمترین سرفصل ها عبارتند از:
Hadoop EcoSystem
Apache Spark Stack
Spark SQL
Spark Streaming
Cloudera Stack
Keras Deep Learning Framework
Machine Learning with Scikit-learn
Graph Analytics with NetworkX
Best NLP Libraries
Visualization Techniques
Data Manipulation Libraries
اطلاع از سرفصل ها و جزئیات دوره
اپیدمی کرونا باعث نشد که امکان برگزاری دوره ها رو از دست بدیم در عوض تجربه های جدیدی برامون حاصل شد.
روز به روز سعی می کنیم از حجم مجهولات بزرگی که داریم کاسته بشه و یه مقدار کوچک به دانسته هامون اضافه بشه.
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
👍1
گراف BPG متعلق به ایران (اتصالات آی پی ورژن ۴)
۶۳۲ اینترکانکشن در میان ۴۵۳ سیستم مستقل
اگه به تئوری گراف علاقه مند باشید می تونید با استفاده از متدهای کلیدی نتورک ساینس، بینش خوبی از از داده هاتون کسب کنید.
#گراف #شبکه #پروتکل #مرکزیت #BPG
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
۶۳۲ اینترکانکشن در میان ۴۵۳ سیستم مستقل
اگه به تئوری گراف علاقه مند باشید می تونید با استفاده از متدهای کلیدی نتورک ساینس، بینش خوبی از از داده هاتون کسب کنید.
#گراف #شبکه #پروتکل #مرکزیت #BPG
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
مهندسی داده ها
گراف BPG متعلق به ایران (اتصالات آی پی ورژن ۴) ۶۳۲ اینترکانکشن در میان ۴۵۳ سیستم مستقل اگه به تئوری گراف علاقه مند باشید می تونید با استفاده از متدهای کلیدی نتورک ساینس، بینش خوبی از از داده هاتون کسب کنید. #گراف #شبکه #پروتکل #مرکزیت #BPG 🎥 مشاهده ویدیوهای…
گره های با مرکزیت های بالا رو براتون بصورت مجزی قرار دادم که می تونید مشخصه هاشون رو ملاحظه بفرمایید.
#گراف #شبکه #پروتکل #مرکزیت #BPG
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
#گراف #شبکه #پروتکل #مرکزیت #BPG
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
سخنرانی آنلاین دکتر مهدیان
دانشمند ارشد بخش تحقیقات در گوگل
موضوع سخنرانی: الگوریتم های بهینه سازی برای خوشه بندی سلسله مراتبی
زمان: ۱۵ شهریور ماه راس ساعت ۱۹:۰۰
لینک رویداد
ارائه مجازی دیگری از گروه الگوریتم دانشکده مهندسی کامپیوتر دانشگاه صنعتی شریف
#سخنرانی
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
دانشمند ارشد بخش تحقیقات در گوگل
موضوع سخنرانی: الگوریتم های بهینه سازی برای خوشه بندی سلسله مراتبی
زمان: ۱۵ شهریور ماه راس ساعت ۱۹:۰۰
لینک رویداد
ارائه مجازی دیگری از گروه الگوریتم دانشکده مهندسی کامپیوتر دانشگاه صنعتی شریف
#سخنرانی
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
رویداد برجسته NLP Summit از ۱۵ مهرماه تا ۲۵ مهرماه بصورت رایگان برگزار میشه.
اگه دوست دارید از آخرین دستاوردهای پردازش زبان طبیعی باخبر بشین این رویداد رو از دست ندین.
لینک رویداد
#رویداد_آنلاین #پردازش_زبان_طبیعی #NLP
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
اگه دوست دارید از آخرین دستاوردهای پردازش زبان طبیعی باخبر بشین این رویداد رو از دست ندین.
لینک رویداد
#رویداد_آنلاین #پردازش_زبان_طبیعی #NLP
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
کوییز شماره ۲۳ از بخش آپاچی اسپارک
کدام از API های ذیل، اینترفیس برنامه نویسی شی گرایی را برای ما فراهم می کند؟
کدام از API های ذیل، اینترفیس برنامه نویسی شی گرایی را برای ما فراهم می کند؟
Anonymous Quiz
27%
RDD
35%
DataFrame
13%
DataSet
26%
هیچ کدام
کوییز شماره ۲۴ از بخش آپاچی اسپارک
اینترفیس RDD، امکان Java serialization را فراهم می کند.
اینترفیس RDD، امکان Java serialization را فراهم می کند.
Anonymous Quiz
67%
درسته
33%
اشتباهه
کوییز شماره ۲۵ از بخش آپاچی اسپارک
کدام از APIهای ذیل، سرعت پایینی در پیاده سازی عملیات های گروه بندی و تجمیع دارند؟
کدام از APIهای ذیل، سرعت پایینی در پیاده سازی عملیات های گروه بندی و تجمیع دارند؟
Anonymous Quiz
26%
RDD
36%
DataFrame
13%
Dataset
26%
گزینه های اول و دوم
کوییز شماره ۲۶ از بخش Stream Processing
کدام تکنولوژی ذیل، بهترین گزینه برای Stream Processing است؟
کدام تکنولوژی ذیل، بهترین گزینه برای Stream Processing است؟
Anonymous Quiz
16%
Hadoop
50%
Spark
19%
Flink
15%
تمام موارد
باتوجه به پیشرفت روزافزون علم داده، جای خالی سلسله وبینارهای هفتگیِ مهندسی داده و تحلیل بیگ دیتا بیش از پیش حس می شود!
آیا شما کاربران گرامی و ارجمندِ کانال مدرسه بیگ دیتا با برگزاری وبینارهای آنلاینِ رایگان و یا لایو بر بستر اینستاگرام موافقید؟
آیا شما کاربران گرامی و ارجمندِ کانال مدرسه بیگ دیتا با برگزاری وبینارهای آنلاینِ رایگان و یا لایو بر بستر اینستاگرام موافقید؟
Anonymous Poll
87%
موافقم. به نظرم وبینار و لایو باعث میشه از موضوعات نوین مهندسی داده و بیگ دیتا بیشتر آگاه باشیم
13%
موافق وبینار و لایو نیستم
This media is not supported in your browser
VIEW IN TELEGRAM
اجرای یک کوئری فوق العاده سنگین به حجم ۱ ترابایت بر بستر تنها ۱ GPU با استفاده از BlazingSQL
نتیجه فقط در ۹ دقیقه
بعدا مفصل راجع به BlazingSQL براتون میگم. همین قدر کوتاه عرض کنم که یه اینترفیس SQL هستش و تو فاز ETL داده های حجیم به صورت مستقیم بر بستر GPU می تونه کمک شایانی داشته باشه. همونطور که در فیلم ملاحظه می کنید، پرفورمنس وحشتناک خوبی داره.
یعنی شما دقیقا با GPU DataFrame طرف هستید.
لینک نوت بوک
#BlazingSQL #SQL #ETL #BigData #GPU
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
نتیجه فقط در ۹ دقیقه
بعدا مفصل راجع به BlazingSQL براتون میگم. همین قدر کوتاه عرض کنم که یه اینترفیس SQL هستش و تو فاز ETL داده های حجیم به صورت مستقیم بر بستر GPU می تونه کمک شایانی داشته باشه. همونطور که در فیلم ملاحظه می کنید، پرفورمنس وحشتناک خوبی داره.
یعنی شما دقیقا با GPU DataFrame طرف هستید.
لینک نوت بوک
#BlazingSQL #SQL #ETL #BigData #GPU
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
مهندسی داده ها
اجرای یک کوئری فوق العاده سنگین به حجم ۱ ترابایت بر بستر تنها ۱ GPU با استفاده از BlazingSQL نتیجه فقط در ۹ دقیقه بعدا مفصل راجع به BlazingSQL براتون میگم. همین قدر کوتاه عرض کنم که یه اینترفیس SQL هستش و تو فاز ETL داده های حجیم به صورت مستقیم بر بستر GPU…
نکته دیگه اینکه اجرای فاز ETL با استفاده از BlazingSQL، دقیقا ۲۰برابر سریع تر از کلاستر اسپارک هستش.
#BlazingSQL #SQL #ETL #BigData #GPU
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
#BlazingSQL #SQL #ETL #BigData #GPU
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
Forwarded from مهندسی داده ها
تخفیف ویژه ۷۱ درصدی بر روی دوره پروژه محور پردازش زبان طبیعی با یادگیری عمیق (Deep NLP) در سایت مدرسه قرار گرفت و تا پایان هفته برقرار است.
پیاده سازی ۹ پروژه عملی و کاربردی NLP
بیش از ۸ ساعت آموزش پروژه محور در طی ۳۴ جلسه
کار با ابزارهای کلیدی حوزه یادگیری نظیر TensorFlow, Keras, Scikit-Learn, FastText
لینک تهیه دوره
#پردازش_زبان_طبیعی #یادگیری_عمیق #دیپ_لرنینگ #تنسورفلو #کراس #سایکیت_لرن
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
پیاده سازی ۹ پروژه عملی و کاربردی NLP
بیش از ۸ ساعت آموزش پروژه محور در طی ۳۴ جلسه
کار با ابزارهای کلیدی حوزه یادگیری نظیر TensorFlow, Keras, Scikit-Learn, FastText
لینک تهیه دوره
#پردازش_زبان_طبیعی #یادگیری_عمیق #دیپ_لرنینگ #تنسورفلو #کراس #سایکیت_لرن
🎥 مشاهده ویدیوهای آموزشی رایگان در صفحه اینستاگرام
🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School