دستاوردهای یادگیری عمیق(InTec)
9.54K subscribers
363 photos
40 videos
44 files
674 links
هوش مصنوعی، یادگیری ماشین و یادگیری عمیق
موضوع اصلی کانال

این یک بلاگ شخصی با طرز تفکر شخصی هست.

Core Python : @PyHints

تلاشی هم در یادگیری Rust دارم که درحال داکیومنت شدن هم هست؛ اگر شماهم به این زبان علاقمند هستید join یادتون نره

Rust: @PyRust
Download Telegram
چندروز پیش ی سری به LinkedIn زدم (بعد از مدت‌ها) ی چالش جالب از
Laurence Moroney
دیدن، چون تسک کاری نداشتم و حوصلم سر رفته بود گفتم ی سعی کنم ببینم چی میشه.
این لینک چالش اگر دوست داشتید تمرین جالبی هست

چندتا از دوستان درخواست کد رو دادند، ایشون بعد از خوندن کد نظر هم دادند (من اصلاً فکر نمیکردم مفید باشه) باقی افراد هم تشکر کرده بودند و ...

خلاصه دیدم نتیجه مثبت بود گفتم به اشتراک بذارم شاید اینجاهم بدرد کسی خورد.

نکته : اصلا سعی نکردم کد رو optimize کنم و اصلا هم در حد کارهای product نیست اما ۲ تا نکته رو رعایت کردم :

۱- چندوقته دارم همه‌ی داکیومنت‌‌ها و آموزش‌هایی که چندسال اخیر دادم رو جمع‌آوری می‌کنم که ی منبع جامع و کامل و ۱۰۰٪ کاربردی باشه کد رو جوری زدم که کسایی که تازه شروع می‌کنند راحت متوجه بشن (با هدف استفاده بجای cifar10 - mnist)

۲- فقط می‌خواستم تو سریع ترین زمان کد رو بزنم و خروجی بگیرم
👍13
دستاوردهای یادگیری عمیق(InTec)
چندروز پیش ی سری به LinkedIn زدم (بعد از مدت‌ها) ی چالش جالب از Laurence Moroney دیدن، چون تسک کاری نداشتم و حوصلم سر رفته بود گفتم ی سعی کنم ببینم چی میشه. این لینک چالش اگر دوست داشتید تمرین جالبی هست چندتا از دوستان درخواست کد رو دادند، ایشون بعد از…
اینم از آموزش‌هایی که گفتم (البته هنوز خیلی کار داره و فعلا فقط مقدمات هست) هر ۲ فریمورک رو هم داره
Pytorch - Tensorflow
با کلی تصویر, gif و ...
انگلیسی بودنش ی ذره بخاطر جونیور‌ها و سخنرانی‌های شرکت هست و بیشتر از اون بخاطر اینکه Markdown فارسی رو خوب پشتیبانی نمی‌کنه ؛ مخالف ترجمه کلمات تخصصی هم هستم.

هدف بعدی - deep شدن روی کاربردهای مختلف هست (بصورت سطحی ۲۵ فصل شده بدون pytorch و آخرین مباحث هم RL هست همه‌ی ریاضیات و ... رو هم شامل میشه - تمام کدها جدا هست البته)

امیدوارم چیز خوبی از کار در بیاد که با کدهاش بذارم گیت‌هاب (self-study خوبی خواهد بود قطعاً)

پ.ن : توی کاربردها، pretrain استفاده کردن فقط مثال زده میشه، سعی می‌کنیم خودمون یک شبکه حتی ساده بسازیم (مثلاً Gan - Pose Estimate - Transformer و ...)
👍16👏7🎉3👎1
بعد از سال‌ها :

قدیما، قبل از اینکه خیلی از بچه‌ها از ایران برن
ی سری دورهمی‌های ماهانه ٫ هفتگی و ... داشتیم
Code Party
اصطلاحا، که دورهم کد میزدیم و مزیتش این بود که خیلی از هم یاد می‌گرفتیم.

ممکن بود من از یکی مسأله مهمی در Docker یاد بگیرم اون از من یک نکته Python و ...

چندروز پیش با ادمین‌های
Django Expert , Dlex
همدیگر رو دیدیم، با این فقط ملاقات بود و نه Code Party منو یاد روزای قدیمی انداخت.


گفتم شاید مناسب باشه با کانال این موضوع رو راه بندازم، اگر کسی دوست داشت هم حضوری من باهاش آشنا میشم و هم اگر سوالی بود که بلد باشم کمکش کنم.

نمی‌دونم چطور پیش بره، تو گروه می‌تونیم بحث کنیم و همونجا هم میگم روزها و ساعت‌ها و آدرس پاتوق رو 😊

پ.ن : اکثراً روزهایی که میرم : ۲شنبه - ۵شنبه / ۶-۶:۳۰ هست - تهران
👍39👎1
مشکل دیتاهای گیگابایتی و pandas کاملاً مشهود هست
تا به امروز هم بیش از ۵-۶ تا راه‌حل رو تو کانال بررسی کردیم (که به شخصه فقط از Rapids برای محاسبات سنگین روی دیتاهای خیلی زیاد استفاده می‌کنم و کم پیش میاد ابزار دیگه رو جایگزین pandas برای دستورات عادی کنم)

اما اگر این گزارش درمورد Datatable درست باشه، قطعاً ترجیح میدم دیگه
pandas as pd
رو تو import‌هام نبینم.
👍24👎1🤩1
امروز کلی پیام اختلال اینترنت - فیلترینگ چراغ خاموش و ... دیدم
داشتم به دوستان یاد میدادم چرا نباید نگران باشند (این تکنیک فیلترینگ چین رو هم دور زده و تست شده) گفتم اینجا هم بذارم


bridges@torproject.org

این آدرس رو یکجا ذخیره کنید؛ با هر سرویس ایمیلی که دوست دارید یک ایمیل بهش بزنید :
subject رو خالی بذارید و متن رو :
get transport obfs4

ی لیست از آخرین سرورهای فعال رو بگیرید - معمولا ۳ تا میفرسته فقط ۱ مورد رو انتخاب کنید و tor رو باهاش تنظیم کنید
بعد از اتصال به سرور tor اپلیکیشن‌های vpn ایی که دارید رو فقط باز کنید یا reload کنید تا آدرس‌های سرورها و ... ایی که لازمه رو دریافت کنه بعد می‌تونید tor رو خاموش کنید و از vpn استفاده کنید.
توی لینوکس برای اینکه برنامه vpn از شبکه tor استفاده کنه از دستور :
torsocks vpnappname ‍
استفاده کنید.
👍403👏2👎1
این ورکشاپ خصوصی هست

اما ازونجایی که باید کدها و ... در اختیار شرکت کننده‌ها قرار بگیره تصمیم گرفتم بجای git خصوصی شرکت روی github خودم کدهارو بذارم آدرس :

GitHub

نکته جالب (ترسناک برای من) طیف شرکت‌ کننده‌هاس از graduated تا postdoc و افرادی که چندین سال سابقه کار دارند.

Develop to deploy

راجع به خیلی چیزها بحث میشه
شاید توی یک موقعیت مناسب همین‌ هارو در ایران هم بحث کنیم (قطعاً واجبه).

اگر ازین نوع مباحث خوشتون میاد بگید (گیت‌هاب star) اگر نه موضوعات مورد علاقه‌تون رو باهام به اشتراک بذارید شاید بتونیم چندتا لایو داشته باشیم راجب موضوعات.

پ.ن : جلسه اول همین مباحث با جزئیات machine learning در sklearn بررسی شد و یک deploy ساده هم داشت (توی اولین فرصت بازنویسی می‌کنم و اضافه خواهد شد)
👍263🔥3
دستاوردهای یادگیری عمیق(InTec)
این ورکشاپ خصوصی هست اما ازونجایی که باید کدها و ... در اختیار شرکت کننده‌ها قرار بگیره تصمیم گرفتم بجای git خصوصی شرکت روی github خودم کدهارو بذارم آدرس : GitHub نکته جالب (ترسناک برای من) طیف شرکت‌ کننده‌هاس از graduated تا postdoc و افرادی که چندین…
جلسه سوم :
Optimization
هم آماده هست که بعد از برگذاری push خواهد شد.
دلیل اینکه زودتر از ورکشاپ نمیذارم اینه که؛ احتمال داره ۱-۲ تا تکنیک ساده برای افزایش سرعت روی Desktop - Server و البته CPU اضافه کنم.
(بسته به زمانی که اضافه میاریم در ورکشاپ)

پ.ن : چون پرسیده شد چیزی که از شرکت‌کننده‌ها متوجه شدم هزینه این ورکشاپ‌ها (البته غیر از من هم ۳ مدرس دیگه هستند و ۵ جلسه ۸ ساعته) برای کسی که همرو شرکت کرده با تخفیف 3000 دلار هست.
😱10👍4🤩3
تعدادی از بچه های ایرانی توانایی بالایی توی کد نویسی و … دارند ولی متاسفانه شرایط کاری جوری هست که از آدمای بیسواد (از نظر برنامه نویسی) دستمزد کمتری دارند.

هنوز بسیاری از شرکت ها دستمزد رو به میزان سالی که توی اون شرکت کار میکنید ربط میدن؛ اینکه چیکار میکنید مهم نیست.


برای اونهایی که دنبال تغییر هستند :

https://remotehunt.com/

* اگر لازم شد به یک کشور دیگه (ترکیه - ارمنستان یا …) سفر کنید و کار رو بگیرید. 😉
امیدوارم بدرد شما هم بخوره

پ.ن : رزومه رو جینگول نکنید؛ تمرکزتون رو بذارید رو اینکه ابزارهای OCR بتونند به خوبی اطلاعات مهم و مفید رو ازش استخراج کنند.

رزومه فرستادن رایگان هست ؛ نترسید شاید لازم باشه ۵-۶ نسخه رزومه درست کنید و برای بیش از ۷۰-۸۰ موقعیت شغلی بفرستید؛ هیچکس مانع شما نمیشه جز خودتون.
👍135
متأسفانه توی این کارگاه فرصت نشد راجب
Inference Optimization
برای deploy روی سرور (Cpu - Gpu) صحبت کنم، ولی این از اهمیت ماجرا کم نمی‌کنه در آخر یک تاکید محکم روی این موضوع داشتم که یکی از شرکت‌کنندگان گفت ارزش نداره وقت محقق رو صرف ۱-۲ میلی ثانیه کنیم (هرچند شوخی بود)

برای همین تصمیم گرفتم این کار رو انجام بدم و اهمیتش رو نشون بدم.

شاید ی روز دیگه یک کارگاه دیگه بتونیم راجبش کامل صحبت کنیم.

زمان :
نسخه prune شده (برای ۳۲.۰۰۰ inference) :
27min 2sec

نسخه prediction optimized (برای ۳۲.۰۰۰ inference) :

2 min 14 sec
👍122🤯2
#کار #ریموت #بین‌المللی #رزومه

یک دوستی پیام دادن توی لینکدین و این که خیلی رزومه فرستاده و کار ریموت نگرفته خواستند من رزومه‌اش رو بخونم نظراتم چون کلی بود گفتم اینجا هم بذارم :

۱- اگر کارهای اولی هست که با این شرکت انجام میدید و قرار نیست بهتون پروژه بدند (حتماً چندتا پروژه سورس کد روی گیت‌هاب یا پلتفرم مورد علاقتون بذارید که بتونند بررسی کنند)

۲- توی رزومه کلمات تخصصی که اون شغل مدنظرش هست رو حتماً تکرار کنید (الگوریتم‌هارو اگر توی آگهی بود بذارید وگرنه لازم نیست بگید، از کلمات کلی تر استفاده کنید ۹۰٪ شرکت‌ها رزومه رو اتومات بررسی می‌کنند)

۳- اینکه بگید توی شرکت فلان کار کردید خوبه، اما چیزی که خیلی مهمه اینه که چیکار کردید چی یاد گرفتید و چه دستاورد و ارزشی رو برای شرکت به ارمغان آوردید - البته این کمک می‌کنه رزومه‌تون پر بارتر هم باشه)

۴- شکل رزومه سعی کنید شکیل باشه، شما Designer نیستید پس دنبال رزومه با گرافیک و رنگی خیلی نباشید - توی جدول هم رزومه پر نکنید (این برای ۱۵-۱۶ سال پیش بود)

در نهایت شاید کمی ناامید کننده بنظر برسه ولی واقعیت هست :
پیدا کردن شغل بین‌المللی و ریموت برای فرانت - بکند و البته موبایل خیلی خیلی راحت‌تر از ML - Data science هست.

یک ترس بزرگی برای شرکت‌ها روی استراک گذاری دیتا هست - قوانین اروپا - آمریکا و کشورها هم راجب دیتا سخت‌گیرانه هست؛ و اینکه شما ایرانی هستید موضوع رو سخت‌تر هم می‌کنه

پس اگر رزومه میفرستید و جواب نمی‌گیرید، ناامید نباشید

یادمه یکی از دوستان که تازه مهاجرت کرده بود (دانشجویی)، تمام تلاشش رو برای گرفتن کار Data کرد اما دریغ از یک شغل (حداقل ۳ ماه فکر کنم روزی ۲ مصاحبه رو داشت)
در نهایت برگشت به Frontend - Backend و توی مصاحبه دوم قبول شد‌ (موضوع حساسیت دیتا بود خیلی از HR ها بهش گفته بودند)

پ.ن : اگر با هدف درآمد بین‌المللی دارید ML/DL می‌خونید، بنظرم دست نگه دارید راه مطمئن‌تر

Frontend : React
Backend : Django - Fast API
Database : Postgresql - MongoDB
Other : Docker - Nginx - Linux - Git

با این موارد ۱۰۰٪ کار ریموت پیدا می‌کنید، دوره‌ی آموزش
Backend - Frontend
با تدریس کارکنان Meta (فیسبوک) توی Coursera هست که بنظرم خیلی خوب درس داده (بصورت رایگان هم می‌تونید ببینید)
👍41👎2👏2
#کوتاه

اوضاع
Data structure, Algorithm
خیلی بده توی برنامه‌نویس‌های جدید.

شرکت‌ها - آموزشگاها بجای یاد دادن نحوه تفکر کردن (Ds - algo) فقط دارند ابزار یاد میدن.


خدا بخیر کنه. 🥲
👍27😢5🤩2🤯1
#نکته

اگر شماهم مثه من از .gitignore نوشتن عصبی می‌شید (مخصوصا روی پروژه‌های بزرگ) :
Gitignore.io / toptal.com
تکنولوژی رو انتخاب کنید و یک gitignore آماده و کامل ازش بگیرید.

این خیلی مهم هست که وقتی software می‌نویسید و اون رو opensource می‌کنید حتما License داشته باشه که بعدا به مشکل نخورید (پیشگیری و ...) اما اگر مثل من ویژگی‌های اصلی License ها یادتون نمیمونه بجای اینکه همرو MIT - GPLv3 بزنید (بدون اینکه بدونید داستان چیه) یک سر به سایت :
Choose a License
بزنید و فیچر‌های مهم هر لایسنس رو بصورت لیست و رنگی ببینید تا لایسنس درست رو انتخاب کنید.

برای هر لایسنس template هم قرار داده شده، که راحت باشید.

امیدوارم مفید باشه.
👍13🔥5👎1
دلم خواست second edition این کتاب فوق العاده رو هم توی گروه بذارم

امیدوارم مفید باشه

نکته : هر ۲ کتاب فرمت pdf و نسخه اصلی هست.

@pytens
9
#کوتاه

به لطف ریموت شدن کارها، متوجه شدم شرکتی که قبل‌تر توش کار میکردم موفق شد بزرگترین رقیب و غول صنعتیش رو با ارائه سرویس ۲۰٪ ارزونتر به شرکت‌های دیگه از دور خارج کنه.

ریموت مزیت بزرگی برای شرکت‌هایی هست که تازه وارد صنعت شدند یا توی صنعت اجازه رشد نداشتند.

به شرطی که بخوبی مدیریت بشه.
🎉16👍4
تولید شده توسط هوش مصنوعی

عکس اول (بالا سمت چپ) چیزی هست که با توضیحات من (مهندسی) توسط stable diffusion تولید شده (اصن جذاب نیست)
برای همین از یک دوست طراح خوساتم کهکشان رو با چشم طراحی برام توصیف کنه و چندتا جمله بهم بده (درک اینکه چی میگه و تو ذهنش چی هست برام سخت بود) اما بعد از تولید stable diffusion و انتخاب بین عکسا (برای هر متن ۵ تا عسک تولید شد) قشنگ درک کردم توضیحاتش رو که خودش یک قدم بزرگی هست بنظرم.

خواستم بگم به جزئیات عکس‌ها نگاه کنید و مدل‌های هوش مصنوعیتون رو به طراح‌ها بسپارید.

پ.ن : عکس‌ها رو نذاشتم چون watermark - safety checker رو توی سورس کد خاموش کردم :
بخاطر اینکه بفهمم روی چه دیتایی آموزش دیده (بله امکانش هست)
6👍1👎1🥰1
#Quick

برای اینکه فقط آپدیت‌های امنیتی (پچ) یک پکیج رو با pip بگیرید
لازم نیست اینطوری بنویسید :

django >=3.2.0< 3.3

می‌تونید از
django ~= 3.2.0

استفاده کنید (چون دیدم خیلی از سورس‌کدها بصورت اول نوشته شده).
👍12👎1
کوتاه :

ادعا شده دیتاهای WeChat و TikTok لو رفته (یک هکر دسترسی گرفته) و الان موضوع جدی بحث مثل اینکه،
اینه که چرا TikTok که می‌گفت دولتی نیست دیتاهاش کنار WeChat پیدا شده که در اختیار دولت چین هست.
😁20🤯5👎2