مهندسی داده ها
7.47K subscribers
476 photos
17 videos
90 files
648 links
🔶 لینکدین
🔗 Linkedin.com/in/mohammadheydari/

🔶 اینستاگرام
🔗 Instagram.com/HeydariToday

🔶 ایکس
🔗 X.com/HeydariToday

یوتیوب
🔗 Youtube.com/@MohammadHeydari

🔶 مدرسه علم داده
🔗 https://bigdataworld.ir/

🔶آیدی من در تلگرام
🔗 @BigDataEngineer
Download Telegram
این رویدادش رو توصیه میکنم و بسیار جالب هست، چون ویژگی های نسخه جدید #Spark یعنی نسخه 3.0 رو قراره شرح بده، البته چند وقتی زمان می بره جا بیفته، چون این نسخه تازه Preview هستش. مثلا تو این نسخه دیتابیس گرافی #Neo4j بصورت Built-in حضور داره و نیازی به Spark Connector برای استفاده ازش نیست.

What's New In #Apache #Spark 3.0

💎 BigDataWorld.ir
🖥 @BigDataSchool
💎به جرات می گیم این کامل ترین مقاله در باب آشنایی و کار با ابزار کلیدی آپاچی کافکا به زبان پارسی هست که زحمت زیادی برای نوشتن اون صورت گرفته. یه مقاله خوب و ارزشمند از علی عزیز، از بچه های ارزنده تیم مدرسه بیگ دیتا که چند سالی هست در حوزه بیگ دیتا و تحلیل داده با شرکت های مهمی مثل هوآوی و ایرانسل کار کرده و کارشو خوب بلده.

💎سر فصل های مقاله:
☑️ آشنایی با بخش های اصلی کافکا
☑️ بررسی مهمترین ویژگی‌های کلیدی کافکا
☑️ نصب آپاچی کافکا
☑️ بررسی PUB/SUB در کافکا
☑️ بررسی Kafka Connect
☑️ بررسی Transformationها در Kafka Connect
☑️ استفاده از Apache Connect Rest API
☑️ آشنایی با Kafka Streams
☑️ بررسی KSTREAM یا KTABLE
☑️ استفاده عملی کاربران از Apache Kafka


https://bit.ly/2B3B3jO

#Kafka
#ApacheKafka

💎 BigDataWorld.ir
🖥 @BigDataSchool
👌1
کوییز شماره ۶

کدام مورد جزو عناصر کلیدی مولفه PUB/SUB در Kafka نمی باشد؟
Anonymous Quiz
17%
Topic
27%
Tuple
13%
Partition
20%
Broker
12%
Offset
11%
Record
📖 نظر سنجی شماره ۲

📋 در پیاده سازی پروژه های علم داده و بیگ دیتا با کدام یک از زبان های برنامه نویسی و چارچوب های نرم افزاری، بیشتر کار می کنید؟
Anonymous Poll
73%
Python
29%
Pandas
27%
Numpy
20%
Matplotlib
16%
R
17%
Spark
17%
SQL
8%
NoSQL
20%
Tensorflow/Keras
21%
Scikit-Learn
مهندسی داده ها pinned «📖 نظر سنجی شماره ۲

📋 در پیاده سازی پروژه های علم داده و بیگ دیتا با کدام یک از زبان های برنامه نویسی و چارچوب های نرم افزاری، بیشتر کار می کنید؟
»
مهندسی داده ها
https://www.linkedin.com/posts/iamabhishekchoudhary_spark3sqlglance-activity-6682257426084839425-fnYP 🔷BigDataWorld.ir 🔷@BigDataSchool
تو این مقاله عالی می تونید تغییرات برجسته نسخه ۳ چارچوب Spark رو ملاحظه بفرمائید.
📖 آینده از آن متخصصین بیگ دیتا

🌐BigDataWorld.ir
🌐T.me/BigDataSchool
💎 نظر سنجی شماره 3

📙در حال حاضر موقعیت فعلی شما در دنیای دیتاساینس و بیگ دیتا کدام یک از موارد ذیل می باشد؟
Anonymous Poll
14%
Data Engineer
20%
Data Analyst
14%
Data Scientist
4%
Big Data Solution Architect
8%
Machine Learning Engineer
4%
Deep Learning Engineer
3%
NLP Engineer
7%
Database Expert
26%
Intern
Media is too big
VIEW IN TELEGRAM
💎 آشنایی با پتلفرم Splunk

💎 این محصول یکی از با ارزش‌ترین پلتفرم‌ها در زمینه تحلیل #بیگ_دیتا در جهان می باشد که حاوی لیست فهرست‌بندی تعاملات کاربر، فعالیت مشتری، سنسور خواندن، رفتار ماشین، تهدیدات امنیتی، فعالیت‌های خرابکارانه و غیره می‌باشد.

چند روز پیش با یکی از دوستان عزیزم که از بچه های دانشکده در مقطع لیسانس بود و در حال حاضر در شرکت Splunk در آمریکا مشغول به کار هست صحبت می کردم، تجارب ارزشمندی که از سمتش بهم منتقل شد مشتاق ترم کرد بیشتر روی این پلتفرم وقت بزاریم.

🖥 این ویدیو بخشی از دوره آموزشی پروژه محور بیگ دیتا بر بستر پلتفرم قدرتمند Cloudera می باشد.

📘 لینک دوره

#Splunk #Cloudera #BigData #DataScience #LogAnalysis

🌐 BigDataWorld.ir
🌐 @BigDataSchool
در این مقاله با هم با دیتابیس گرافی #Neo4j بیشتر آشنا می شیم، که در حال حاضر برترین دیتابیس گرافی در دنیاست، محاسن و معایبش رو اشاره می کنیم و با کاربردهای صنعتی اش آشنا می شیم، در پایان هم یک مثال از مدلسازی گرافی یه مساله رو پیش می بریم.

https://bigdataworld.ir/neo4j/

#graph #database #graphdatabase

🌐 BigDataWorld.ir
🌐 @BigDataSchool
کوییز شماره ۷

سطح Abstraction اصلی در Spark Streaming کدام است؟
Anonymous Quiz
38%
RDD
21%
Shared Variables
28%
DStream
13%
هیچ کدام
💎 سیر صعودی فوق العاده دیتابیس گرافی Neo4j از 2013 تا 2020
✔️ در آخرین رتبه بندی برترین دیتابیس های جهان، Neo4j در میان دیتابیس های گرافی در رتبه 1 قرار دارد.

#Neo4j
#Graph
#GraphDatabase

🌐 BigDataWorld.ir
🌐 @BigDataSchool
کوییز شماره 8

زبان اختصاصی کوئری نویسی در دیتابیس گرافی Neo4j کدام است؟ #quiz
Anonymous Quiz
35%
GraphQL
21%
SQL
6%
Gremlin
11%
Contextual Query Language (CQL)
9%
RDF query language (RDQL)
18%
Cypher