مهندسی داده ها
7.47K subscribers
476 photos
17 videos
90 files
648 links
🔶 لینکدین
🔗 Linkedin.com/in/mohammadheydari/

🔶 اینستاگرام
🔗 Instagram.com/HeydariToday

🔶 ایکس
🔗 X.com/HeydariToday

یوتیوب
🔗 Youtube.com/@MohammadHeydari

🔶 مدرسه علم داده
🔗 https://bigdataworld.ir/

🔶آیدی من در تلگرام
🔗 @BigDataEngineer
Download Telegram
📃 یک رویکرد ترکیبی به منظور شناسایی اخبار جعلی در توییتر با استفاده از User Features و Graph Embedding

لینک مطالعه پژوهش نوین

#پردازش_گراف
#پردازش_متن

🌐BigDataWorld.ir
🖥BigDataSchool
💻BigData_School
به تمام عزیزانی که قصد دارند وارد دنیای بیگ دیتا بشن عمیقا توصیه میکنم کتاب Spark, The Definitive Guide رو حتما مطالعه کنند.

این کتاب دید بسیار خوبی به شما در زمینه پیاده سازی برنامه های مبتنی بر Spark رو بهتون انتقال میده و شما می تونید هرچه بهتر با اکوسیستم بیگ دیتا آشنا بشین.

نویسندگان این کتاب افرادی هستند که زیربنای Apache Spark رو در دانشگاه برکلی توسعه دادن.

با احترام
محمد حیدری

#معرفی_کتاب
#کتاب_بخوانیم
#Spark

🌐BigDataWorld.ir
🖥BigDataSchool
💻BigData_School
Forwarded from مهندسی داده ها (Mohammad)
⚪️ شماتیکی از نحوه ذخیره سازی #داده در #NameNode و #DataNode در یک #HadoopCluster
فرآیند #Replication در #DataNode ها یا #SlaveNode ها قابل مشاهده می باشد.
بلوک های فایل های A,B,C در سراسر #Data_Node ها به منظور رعایت فاز #ClusterRedundancy کاملا #Replicate شده اند.
فرآیند #Replication در محیط #Cluster برای ما #Data #Availability را به ارمغان می آورد.
در محیط فوق #ReplicationFactor به صورت پیش فرض بر روی مقدار 3 تنظیم شده است.
معیار #ReplicationFactor مشخص می کند هر بلاک فایل چند مرتبه در محیط کلاستر در #Datanode ها تکرار شود.
وظیفه #NameNode_Deamon فراهم سازی لیستی از فایل ها و محل قرار گیری آنها در #Cluster است.
زمانی که کلاینت نیاز به دسترسی به یک فایل را دارد #NameNode_Deamon محل قرارگیری فایل در #Cluster را برای کلاینت فراهم می کند اما در ادامه دسترسی وی به فایل بصورت مستقیم از طریق #DataNode_Deamon برقرار می شود.
🌐 BigDataWorld.ir
🌐 @BigDataSchool
🎙سخنرانی دکتر پرهامی

🏛استاد دانشگاه UCSB آمریکا

📃عنوان سخنرانی: روش بازگشتی برای ساخت شبکه های شمارشی

#سخنرانی


🟢 BigDataworld.ir
⚪️ BigDataSchool
🔴 BigData_School
📋 چرخه فرایندی مدل تحلیلی پیش بینانه در علم داده

#علم_داده

#datascience

🟢 BigDataworld.ir
⚪️ BigDataSchool
🔴 BigData_School
pyspark_Cheetsheet_RDD_Main_Section.png
3.1 MB
📘 برگه راهنمای PySpark API در Apache Spark

📑 در این برگه راهنما با متدهای کلیدی RDD به عنوان شاکله Spark آشنا می شویم.

#اسپارک #پای_اسپارک
#Spark #PySpark #RDD

🌐 BigDataworld.ir
🖥 BigDataSchool
💻 BigData_School
🎙آپدیت جدید کتابخانه محبوب و قدرتمند Pandas منتشر شد.

📃 با استفاده از دستور ذیل می تونید آپدیت رو انجام بدین.

pip install --upgrade pandas ==1.1.0

#پانداس #Pandas

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
Forwarded from مهندسی داده ها (Mohammad)
🏅محضر محترم دوستان و عزیزانی که پیگیر موقعیت های شغلی تو حوزه های علم داده، بیگ دیتا و هوش مصنوعی هستند

🎙این گروه با هدف پوشش دهی فرصت های شغلی حوزه های مذکور راه اندازی شده است.

📃در گروه به صورت مستمر آگهی های مرتبط با علم داده، بیگ دیتا و هوش مصنوعی قرار می گیرد.

💎همچنین شما به صورت رایگان برای کسب و کار خود درخواست نیرو می دهید یا با ارسال رزومه ، آمادگی خود را جهت کار اعلام می کنید.

لینک گروه: 👇👇👇

🖥 DataJobs

با احترام
محمد حیدری
Forwarded from AAISS 2026
🔷 دومین دوره مجموعه سخنرانی‌های علم داده و هوش مصنوعی امیرکبیر

🔹برگزاری کارگاه‌ها از تاریخ ۲۲ تا ۲۶ مردادماه و سخنرانی‌ها از تاریخ ۲۷ تا ۳۱ مردادماه خواهد بود.

🔹 ثبت نام و اطلاعات بیشتر:
http://aaiss.ceit.aut.ac.ir

🔻 ظرفیت و مهلت ثبت نام محدود است.

@aaiss_aut
@ceit_ssc
یه سری از دستورات و توابع کلیدی کتابخانه Pandas در این درسنامه ها قرار دارند که دونستن شون برای هر تحلیل گر داده واجبه.

#پانداس #Pandas

🏅BigDataworld.ir
🏅BigDataSchool
🏅BigData_School
Forwarded from Sadra Codes
This media is not supported in your browser
VIEW IN TELEGRAM
Arctic Code Vault

چند وقت پیش گیت هاب خبری رو منتشر کرد که تعداد زیادی از ریپوزیتوری های پابلیک و اکتیو رو به قطب شمال بردن و اونجا نگهداریشون می‌کنن. توی این کلیپ دقیقا نشون داده شده کجا و به چه شکل نگهداری میشن.

خیلی جالبه از دست ندید. 👌