مهندسی و علم داده
4K subscribers
381 photos
174 videos
169 files
114 links
در مورد ادمین کانال :
- محمد عالیشاهی
- دکترای هوش مصنوعی دانشگاه تهران
-نائب رئیس هیات مدیره شرکت فناوران هوش مصنوعی
- مدیر ارشد پروژه های هوش مصنوعی و علم داده
Download Telegram
Media is too big
VIEW IN TELEGRAM
جلسه پنجاه و هفتم آموزش پایتون**فیلم آموزشی پایتون از صفر تا 100 در کانال @BIMining
This media is not supported in your browser
VIEW IN TELEGRAM
جلسه پنجاه و هشتم آموزش پایتون**فیلم آموزشی پایتون از صفر تا 100 در کانال @BIMining
مجازی سازی با OPEN VZ @BIMining
مفهوم OPEN VZ چیست؟
ابزار OpenVZ‌ یک مجازی‌ساز متن‌باز Hypervisor از نوع hosted یا type2 ‌و رایگان است که روی سیستم‌عامل لینوکس نصب می‌شود. توسط OpenVZ تنها می‌توانید سرور مجازی لینوکس ارائه کنید و در این مجازی‌ساز امکان ارائه سرور مجازی ویندوز وجود ندارد. ‌OpenVZ‌ از یک Kernel اختصاصی بهره می برد و تمام سرورهای مجازی ایجاد شده توسط OpenVZ از یک Kernel استفاده می‌کنند که این مورد یکی از معایب این مجازی‌ساز است. معمولاً OpenVZ با امکان نصب سیستم‌عامل خودکار ارائه می‌شود که نیاز به دانش فنی زیادی ندارد.
ابزار OpenVZ توسط شرکت Virtuozzo بصورت free و Open Source ارائه می‌شود و مبتنی بر لایسنس GNU GPL می‌باشد.


در واقع OpenVZ‌ یک مجازی‌ساز در لایه سیستم‌عامل یا OS Level Virtualization است یعنی به نوعی مجازی‌ساز یا Hypervisor type 2 به حساب می‌آید که مجازی‌سازی را بر روی یک سیستم‌عامل دیگر انجام می‌دهد. OpenVZ‌ مجازی‌سازی را در یک لایه بسیار سطحی انجام می‌دهد و این کار را بر روی سیستم‌عاملی انجام می‌دهد که بر روی آن نصب شده است. با توجه به اینکه تمامی سیستم‌عامل‌هایی که بر روی OpenVZ نصب می‌شوند یا در واقع تمامی‌VPS هایی که بر روی OpenVZ نصب می‌شوند از یک Linux Kernel مشترک استفاده می‌کنند و در واقع همه آنها از Kernel اصلی لینوکس استفاده می‌کنند، OpenVZ تنها از سیستم‌عامل‌های خانواده لینوکس پشتیبانی می‌کند و این یک نقطه ضعف برای این مجازی‌ساز است زیرا ویندوز را پشتیبانی نمی‌کند، مشکل دیگر این مجازی‌ساز این است که در صورت بروز هرگونه مشکل برای Kernel لینوکس، تمامی‌VPS ها نیز با توجه به اینکه ParaVirtual نشده‌اند قطعاً به مشکل خواهند خورد. اما با این همه تفاسیر OpenVZ نکات مثبت زیادی هم دارد که از آن جمله می‌توانیم به هزینه بسیار پایین و صرفه اقتصادی زیاد، سادگی درک و مفهوم این مجازی‌ساز، مإثرتر از Xen برای‌VPS های ارزان قیمت و قابلیت استفاده از منابع بیشتر با توجه به اینکه سیستم کاملاً ایزوله‌ای مثل Xen ندارد، اشاره کرد. البته این تنها موارد تفاوت بین این دو پلتفرم مجازی‌سازی نیست اما مهمترین موارد تفاوت این دو مجازی‌ساز مواردی است که اشاره کردیم. بصورت کلی مهمترین قابلیت‌های مجازی‌سازی با OpenVZ را می‌توانیم موارد زیر ذکر کنیم:
 دسترسی کامل root
 مجازی‌سازی در لایه سیستم‌عامل (Hypervisor Type 2)
 امکان استفاده از Burst در زمانیکه‌VPS های دیگر استفاده نمی‌شوند.
 امکان بروزرسانی بدون نیاز به Reboot کردن سیستم‌عامل
 امکان استفاده از منابع بیشتر برای‌VPS ها
 تنظیمات شبکه و دیسک بسیار ساده
 امکان دسترسی به اکثر ماژول‌های فایروال iptables لینوکس
اگر شما با این تفاسیر هنوز مردد هستید که از کدامیک از موارد بالا بایستی برای مجازی‌سازی استفاده کنید و نیاز شما را برآورده می‌کند، به نظر من OpenVZ ساده‌ترین و به صرفه‌ترین راهکار مجازی‌سازی برای شما است، اگر فقط قصد مجازی‌سازی سرورهای لینوکسی را دارید، اگر نیاز به استفاده کردن از ویندوز در بستر Hosting خود دارید حتماً از Xen در وهله اول استفاده کنید. اگر احساس می‌کنید که از ماژول‌های Kernel خاصی از لینوکس هم بایستی در کارهای خود استفاده کنید بنابراین استفاده کردن از OpenVZ را به شما پیشنهاد نمی‌کنیم. @BIMining
openvz_users_guide.pdf
1005.4 KB
راهنمای استفاده OPEN VZ @BIMining
شناسایی تصاویر سوء استفاده از کودکان با هوش مصنوعی

هوش مصنوعی (AI) با اسکن تصاویر بر روی گوشی تلفن همراه و رایانه های مظنونان، به پلیس برای شناسایی سریع متهمان کمک می کند.
برای محکوم کردن مظنونان به سوء استفاده از کودکان، به تصاویر مختلفی نیاز است که شناسایی این تصاویر، کاری بسیار زمان بر و نیازمند نیروهای انسانی است.

تیم جرم یابی دیجیتال (Digital Forensics) متروپولیتن (نیویورک) با استفاده از نرم افزار تشخیص تصویر سفارشی، سال گذشته بیش از 53 هزار گوشی تلفن همراه و رایانه را برای بدست آوردن شواهد کافی بر علیه مظنونان مورد بررسی قرار داد.

از این نرم افزار برای شناسایی موادمخدر، اسلحه و مبادله پول در تصاویر و فیلم ها استفاده می شود؛ اما این ابزار در شناسایی آزار و اذیت جنسی کودکان، از کارآیی کافی برخوردار نیست.

یکی از طرح های بلند پروازانه، انتقال این داده های حساس به ارائه دهندگان خدمات ابری مانند خدمات وب آمازون، گوگل یا مایکروسافت است. با همکاری ارائه دهندگان خدمات در سیلیکون ولی، هوش مصنوعی (artificial intelligence) می تواند به گونه ای آموزش ببیند تا بتواند تصاویر سوء استفاده از کودکان را تشخیص دهد.

این کار به متخصصان اجازه می دهد تا از قدرت محاسباتی عظیم این غول های فناوری، برای تجزیه و تحلیل دقیق فیلم ها و تصاویر استفاده کنند.

البته از یک نکته مهم نباید غافل شد: نیروهای پلیس برای ذخیره و بررسی این تصاویر، از دادگاه مجوز ویژه دریافت می کنند، اما انتقال این داده ها به ارائه دهندگان خدمات ابری از جمله آمازون و مایکروسافت، جرم محسوب می شود. ارائه دهندگان خدمات ابری با ذخیره این اطلاعات، در معرض خطر باورنکردنی قرار می گیرند.

کانال @BIMining
This media is not supported in your browser
VIEW IN TELEGRAM
جدا کردن گوجه فرنگی های کال با استفاده از فن آوری پردازش تصویر

@BIMining
هوش مصنوعی و اشتغال‌زایی در آینده @BIMining
هوش مصنوعی گوگل علت خوب بودن عکس را تشخیص میدهد

 تازه ترین به روزرسانی در سیستم ارزیابی تصاویر گوگل یا نیما که مبتنی بر هوش مصنوعیپیشرفته این شرکت است با اسکن کردن تمامی عکس هایی که هر کاربر با گوشی خود گرفته کیفیت آنها را بررسی کرده و به فرد کمک می کند تا جذاب ترین عکس ها را از میان این مجموعه انتخاب کند.
این سیستم از شبکه عصبی پیشرفته ای بهره می گیرد که مبتنی بر یک شبکه بیولوژیک در مغز انسان است و لذا می تواند هم ویژگی های فنی و هم ویژگی های زیبایی شناسانه عکس های مختلف را کشف کند.
گوگل قصد دارد این دستاورد تازه خود را در قالب یک برنامه موبایلی مورد استفاده قرار دهد تا ویرایش و تصحیح نور و رنگ عکس ها تسهیل شود و قاب بندی آنها نیز برای افزایش زیباییشان بهبود یابد.
کاربران با مشاهده تغییراتی که در این قالب در عکس های گرفته شده با گوشی ایجاد می شود، می توانند توانایی عکاسی خود را بهبود ببخشند. الگوریتم هوش مصنوعی به کار گرفته شده می تواند به عکس ها از یک تا ده نمره دهد و لذا به درک زیبایی شناسانه افراد کمک کند

@ كانال هوش تجاري
@BIMining
هوش مصنوعی ساخت چین قادر به شناسایی چهره از میان دو میلیارد

یک شرکت چینی مستقر در شانگهای به نام Yitu ادعا می کند که هوش مصنوعی (AI) ساخته که قادر است در عرض چند ثانیه چهره یک فرد را از میان 2 میلیارد چهره تشخیص بدهد. برای این دستگاه نام Dragon Eye انتخاب شده است. ژو لنگ، یکی از بنیانگذاران شرکت می گوید: ماشین های ما به راحتی می توانند چهره شما را از میان 2 میلیارد نفر شناسایی کنند. این کار تا 3 سال قبل غیر ممکن به نظر می رسید.

@BIMining
Media is too big
VIEW IN TELEGRAM
جلسه پنجاه و نهم آموزش پایتون**
🔘 وصل شدن به دیتابیس در پایتون فیلم آموزشی پایتون از صفر تا 100 در کانال @BIMining
کاربردهای هوشمندی کسب و کار در صنعت بانکداری شامل مدیریت ریسک، تحلیل رفتار مشتری و بازاریابی، بخش‌بندی مشتریان، جلوگیری از تقلب و بهینه‌سازی فرایندها می‌شود. @BIMining
راهنماي دستورات كليدي در لينوكس @BIMining
🔅 برترین زبان‌های برنامه ‌نویسی برای یادگیری ‌ماشین و داده کاوی در حوزه علم داده

@BIMining
کتاب حاضر یکی از بهترین و جدیدترین کتابها در زمینه یادگیری عمیق با زبان برنامه نویسی R است @BIMining
انواع الگوریتم های متداول یادگیری ماشین @BIMining
شرکت پردازشگران سامان وابسته به بانک سامان,

در راستای تکمیل کادر پرسنلی خود از واجدالشرایط دعوت به همکاری می نماید:

 

-  کارشناس ETL

  

·             حداقل سه سال سابقه کار در حوزه ETL

·             مسلط به ابزارSSIS

·             آشنا به ODI

·             آشنا به مفاهیم BI

 

 کارشناسReport و داشبورد  

 

·         حداقل سه سال سابقه کار در طراحی داشبورد و گزارش

·         مسلط بهSSRS و Power BI

·         آشنا به HTML  و CSS

·         متخصص تولید داشبوردهای مدیریتی

·         آشنا به فریم ورک های داشبورد و گزارش، Jasper، Cristal Report، ...

 

-  کارشناس تحلیل سیستم

  

·             آشنا به کسب و کار بانکی

·             حداقل پنج سال سابقه کار در کسب و کار بانکی

·             حداقل مدرک تحصیلی, کارشناسی کامپیوتر

·             مسلط به ابزار UML

·             آشنا به BPMN

·             آشنا به زبان انگلیسی

 

 UX,usability  کارشناس تحلیل -  

 

·         حداقل پنج سال سابقه کار در طراحی سایت

·         مسلط به Responsive Page-jquery-Css-Html5

 

کارشناس جاوا J2EE

·         حداقل پنج سال سابقه کار در خصوص J2EE

·         مسلط بر Spring  و Hibernate

·         مسلط به وب سرویس و سوکت

·         مسلط به یکی از فریم ورک های وب در جاوا (JSF، Struts و ...)

 

کارشناس IOS

·         حداقل سه سال سابقه کار بر روی IOS

·         مسلط بر Object C و SWIFT

·         مسلط به وب سرویس و سوکت

-
کارشناس SAP
- مشاور Functional
-برنامه نویس ABAP
 

علاقه مندان می توانند رزومه خود را به آدرس job@samanpr.net ارسال نمایند.
لطفا رزومه خود را با عنوان A&D ارسال نمایید.

تاریخ : ۱۳۹۶/۱۰/۲۸
نوبت دوم
@BIMining
مجموعه ای از آدرس سایت های دیتابیس و دیتاست :

انواع DataSet ها

http://archive.ics.uci.edu/ml/datasets.html

دیتاست مربوط به یوتیوب

http://netsg.cs.sfu.ca/youtubedata

دیتاست مربوط به داده های شبکه

http://networkdata.ics.uci.edu/netdata/html/bkHam.html


مجموعه داده های طبقه بندی شده در دیتاپول در موضوعات مختلف
http://www.datapool.ir

دیتاست مربوط به تشخیص چهره

http://www.face-rec.org/databases
دیتاست مربوط به دسته بندی حملات شبکه

http://kdd.ics.uci.edu/databases/kddcup99/kddcup99.html

دیتاست مربوط به وام های داده شده ، دیر کرد و غیره به مشتریان است

https://www.lendingclub.com/info/download-data.action

دیتاست مربوط به تصادفات جاده ای

http://www.nyc.gov/html/nypd/html/traffic_reports/motor_vehicle_collision_data.shtml

دیتاست مربوط به گربه ها

http://137.189.35.203/WebUI/CatDatabase/catData.html

دیتاست مربوط به حراجی آنلاین eBay

http://www.modelingonlineauctions.com/datasets

دیتاست مربوط به موسیقی و صدا

http://labrosa.ee.columbia.edu/millionsong/

دیتاست مربوط به انواع شبکه های موجود و وب سایت ها – دانشگاه استنفورد

http://snap.stanford.edu/data/index.html

دیتاست های مربوط به یادگیری ماشین

http://archive.ics.uci.edu/ml

گروه داده کاوی دانشگاه تگزاس

http://www.cs.utexas.edu/users/dmg/

وب سایت های مجموعه داده:

http://aws.amazon.com/public-data-sets

http://stackoverflow.com/questions/381806/large-public-datasets

https://archive.org/details/stackexchange

https://networkdata.ics.uci.edu/resources.php

https://www.kaggle.com

http://www.data.gov

http://www.kdnuggets.com/datasets/index.html

http://socialcomputing.asu.edu/pages/datasets

http://nodexlgraphgallery.org/Pages/Default.aspx

http://konect.uni-koblenz.de/networks

http://aws.amazon.com/public-data-sets/

http://stackoverflow.com/questions/381806/large-public-datasets

http://archive.ics.uci.edu/ml/datasets.html

https://archive.org/details/stackexchange

http://snap.stanford.edu/data/

https://networkdata.ics.uci.edu/resources.php

https://www.kaggle.com/

http://www.data.gov/

http://www.kdnuggets.com/datasets/index.html

http://socialcomputing.asu.edu/pages/datasets

http://nodexlgraphgallery.org/Pages/Default.aspx

http://konect.uni-koblenz.de/networks/

@BIMining