🔵 عنوان مقاله
Postgres Index Types Explained: B-tree, GIN, BRIN, and Operators (5 minute read)
🟢 خلاصه مقاله:
در جهان پایگاههای داده، انتخاب نوع شاخص مناسب نقش کلیدی در بهبود سرعت جستوجو و کارایی سیستم دارد. در مقالهای کوتاه اما کاربردی، به بررسی انواع شاخصهای مورد استفاده در پایگاه داده پستگرساسکیوال میپردازیم، از جمله B-tree، GIN، BRIN و عملیاتها و الگوهای دسترسی مختلف مانند جستوجوی برابری، دامنهای، آرایهای، JSONB، جستوجوی متنی و دادههای زمانی که تنها افزایشی هستند.
در ابتدا، نوع شاخص B-tree رایجترین و چندمنظورهترین گزینه است که برای عملیات برابری، دامنهای و مرتبسازی بسیار مناسب است. این شاخص به سرعت پاسخگو است و در بسیاری از سناریوهای معمول، عملکرد عالی دارد. پس از آن، شاخصهای GIN برای دادههای پیچیدهتر مانند آرایهها و نوع دادههای JSONB طراحی شدهاند که نیازمند جستوجوهای چندبعدی و ساختارهای منطقی پیچیده هستند. این نوع شاخصها، امکانهای جستوجوی سریع در دادههای ساختاربندی شده و نیمهساختاری را فراهم میکنند.
در کنار اینها، شاخصهای BRIN برای مجموعه دادههای بزرگ و آرایشهای مرتب شده مناسب هستند که صرفهجویی در فضای حافظه و سرعت در سناریوهای خاص را هدف دارند. این شاخصها بیشتر در مواردی کاربرد دارند که دادهها پیوسته و ترتیبپذیر هستند، و نیاز است عملیات بر روی دامنههای بزرگ انجام شود.
در نهایت، نوعهای مختلف شاخص و عملیاتهای مربوطه باید بر اساس نوع دادهها، حجم آنها و نوع جستوجوهای مورد نیاز انتخاب شوند. شناخت هر کدام از این ابزارها بهترین عملکرد را در برنامههای پایگاه داده شما فراهم میکند و بهینهسازی قابل توجهی را در سیستمهای دادهمحور به ارمغان میآورد.
#پستگرس #شاخص_داده #پایگاه_داده #بهینهسازی
🟣لینک مقاله:
https://levelup.gitconnected.com/postgres-index-types-explained-b-tree-gin-brin-and-operators-6d89177af2e2?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Postgres Index Types Explained: B-tree, GIN, BRIN, and Operators (5 minute read)
🟢 خلاصه مقاله:
در جهان پایگاههای داده، انتخاب نوع شاخص مناسب نقش کلیدی در بهبود سرعت جستوجو و کارایی سیستم دارد. در مقالهای کوتاه اما کاربردی، به بررسی انواع شاخصهای مورد استفاده در پایگاه داده پستگرساسکیوال میپردازیم، از جمله B-tree، GIN، BRIN و عملیاتها و الگوهای دسترسی مختلف مانند جستوجوی برابری، دامنهای، آرایهای، JSONB، جستوجوی متنی و دادههای زمانی که تنها افزایشی هستند.
در ابتدا، نوع شاخص B-tree رایجترین و چندمنظورهترین گزینه است که برای عملیات برابری، دامنهای و مرتبسازی بسیار مناسب است. این شاخص به سرعت پاسخگو است و در بسیاری از سناریوهای معمول، عملکرد عالی دارد. پس از آن، شاخصهای GIN برای دادههای پیچیدهتر مانند آرایهها و نوع دادههای JSONB طراحی شدهاند که نیازمند جستوجوهای چندبعدی و ساختارهای منطقی پیچیده هستند. این نوع شاخصها، امکانهای جستوجوی سریع در دادههای ساختاربندی شده و نیمهساختاری را فراهم میکنند.
در کنار اینها، شاخصهای BRIN برای مجموعه دادههای بزرگ و آرایشهای مرتب شده مناسب هستند که صرفهجویی در فضای حافظه و سرعت در سناریوهای خاص را هدف دارند. این شاخصها بیشتر در مواردی کاربرد دارند که دادهها پیوسته و ترتیبپذیر هستند، و نیاز است عملیات بر روی دامنههای بزرگ انجام شود.
در نهایت، نوعهای مختلف شاخص و عملیاتهای مربوطه باید بر اساس نوع دادهها، حجم آنها و نوع جستوجوهای مورد نیاز انتخاب شوند. شناخت هر کدام از این ابزارها بهترین عملکرد را در برنامههای پایگاه داده شما فراهم میکند و بهینهسازی قابل توجهی را در سیستمهای دادهمحور به ارمغان میآورد.
#پستگرس #شاخص_داده #پایگاه_داده #بهینهسازی
🟣لینک مقاله:
https://levelup.gitconnected.com/postgres-index-types-explained-b-tree-gin-brin-and-operators-6d89177af2e2?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Medium
Postgres Index Types Explained: B-tree, GIN, BRIN, and Operators
In my post about JSON and JSONB I told you to create a GIN index with jsonb_path_ops and moved on, because that post was about a column…
یه ابزار ساختم که خیلی وقت بود اذیتم میکرد نبودنش :))
ابزار Schemat میذاریش رو ریپوت، دیاگرام ERت رو زنده نشونت میده.
دیتای Prisma، SQL، Drizzle، TypeORM و چندتای دیگه رو میخونه.
همهچی لوکال، بدون اکانت، بدون کلاود.
اوپنسورسه:
https://github.com/alirezahamid/schemat
ابزار Schemat میذاریش رو ریپوت، دیاگرام ERت رو زنده نشونت میده.
دیتای Prisma، SQL، Drizzle، TypeORM و چندتای دیگه رو میخونه.
همهچی لوکال، بدون اکانت، بدون کلاود.
اوپنسورسه:
https://github.com/alirezahamid/schemat
GitHub
GitHub - alirezahamid/schemat: Git-native database schema documentation — live interactive ER diagrams from your repo.
Git-native database schema documentation — live interactive ER diagrams from your repo. - alirezahamid/schemat
❤2
🔵 عنوان مقاله
Kafka's Broken Promise: There is No Goldilocks Log (7 minute read)
🟢 خلاصه مقاله:
کافکا در سالهای اخیر به عنوان یکی از محبوبترین ابزارهای مدیریت جریان داده شناخته میشود، اما مدل جریانهای شکسته و پارتیشنی آن در برخی موارد محدودیتهایی دارد. یکی از چالشهای اصلی این است که در مواردی مانند سامانههای مسیریابی که میلیونها لاگ مرتب و مستقل بر اساس کلیدهای متفاوت دارند، کارایی و انعطافپذیری کافکا با مشکل مواجه میشود. در این موارد، نیاز است تا سامانههای جایگزین و بهینهتر توسعه یابند که بتوانند حجم بالای دادهها را با هزینه کمتر و کارایی بیشتر مدیریت کنند.
در پاسخ به این نیاز، پروژهای با نام OpenData Log توسعه یافته است. این سامانه بر پایه زبان برنامهنویسی Rust ساخته شده و از ذخیرهسازی شیگرا در فضای ابری و پایگاهداده SlateDB بهره میبرد. OpenData Log از ساختارهای مبتنی بر ذخیرهسازی LSM (Log-Structured Merge-tree) بهره میبرد که امکان انجام عملیاتهای مختلف بر روی دادههای بزرگ به صورت کارآمد را فراهم میکند. فناوریهای کلیدی مانند پیمایش بر اساس کلید، تقسیمبندیهای متادیتا تنها برای بهبود کارایی، و استفاده از رپلیکای خواندن (read replicas) به کاهش هزینهها و افزایش سرعت در مسیریابی لاگها کمک میکنند.
در نتیجه، این سامانه قادر است حجم زیادی لاگهای مرتبط را با کارایی بالا و هزینه کم مدیریت کند، به طوری که فرآیند مسیریابی و آنالیز دادهها در حجمهای کلان بسیار سریعتر و اقتصادیتر انجام میشود. این رویکرد نوآورانه، فرصتهای جدیدی برای توسعه سامانههای مبتنی بر داده و تحلیلهای بزرگ فراهم میکند و مسائل قدیمی مربوط به محدودیتهای ساختاری کافکا را تا حد زیادی برطرف مینماید.
#مدیریت_داده #پایان_چالش_کافکا #سیستمهای_پایدار #تحلیل_دیتا
🟣لینک مقاله:
https://www.opendata.dev/blog/announcing-opendata-log?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Kafka's Broken Promise: There is No Goldilocks Log (7 minute read)
🟢 خلاصه مقاله:
کافکا در سالهای اخیر به عنوان یکی از محبوبترین ابزارهای مدیریت جریان داده شناخته میشود، اما مدل جریانهای شکسته و پارتیشنی آن در برخی موارد محدودیتهایی دارد. یکی از چالشهای اصلی این است که در مواردی مانند سامانههای مسیریابی که میلیونها لاگ مرتب و مستقل بر اساس کلیدهای متفاوت دارند، کارایی و انعطافپذیری کافکا با مشکل مواجه میشود. در این موارد، نیاز است تا سامانههای جایگزین و بهینهتر توسعه یابند که بتوانند حجم بالای دادهها را با هزینه کمتر و کارایی بیشتر مدیریت کنند.
در پاسخ به این نیاز، پروژهای با نام OpenData Log توسعه یافته است. این سامانه بر پایه زبان برنامهنویسی Rust ساخته شده و از ذخیرهسازی شیگرا در فضای ابری و پایگاهداده SlateDB بهره میبرد. OpenData Log از ساختارهای مبتنی بر ذخیرهسازی LSM (Log-Structured Merge-tree) بهره میبرد که امکان انجام عملیاتهای مختلف بر روی دادههای بزرگ به صورت کارآمد را فراهم میکند. فناوریهای کلیدی مانند پیمایش بر اساس کلید، تقسیمبندیهای متادیتا تنها برای بهبود کارایی، و استفاده از رپلیکای خواندن (read replicas) به کاهش هزینهها و افزایش سرعت در مسیریابی لاگها کمک میکنند.
در نتیجه، این سامانه قادر است حجم زیادی لاگهای مرتبط را با کارایی بالا و هزینه کم مدیریت کند، به طوری که فرآیند مسیریابی و آنالیز دادهها در حجمهای کلان بسیار سریعتر و اقتصادیتر انجام میشود. این رویکرد نوآورانه، فرصتهای جدیدی برای توسعه سامانههای مبتنی بر داده و تحلیلهای بزرگ فراهم میکند و مسائل قدیمی مربوط به محدودیتهای ساختاری کافکا را تا حد زیادی برطرف مینماید.
#مدیریت_داده #پایان_چالش_کافکا #سیستمهای_پایدار #تحلیل_دیتا
🟣لینک مقاله:
https://www.opendata.dev/blog/announcing-opendata-log?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
www.opendata.dev
Kafka's Broken Promise: There is No Goldilocks Log | OpenData
Forwarded from Front-End
در مهندسی نرمافزار، API Compatibility یعنی یک نسخهی جدید از API تا چه حد میتواند بدون خراب کردن کدهای قبلی، جایگزین نسخهی قبلی شود.
مثلاً فرض کن API قبلی این endpoint را دارد:
و پاسخ میدهد:
اگر در نسخهی جدید همچنان همین endpoint و فیلدها را حفظ کنی، معمولاً backward compatible هستی.
اما اگر تبدیلش کنی به:
یا
چند نوع مهم Compatibility
1. Backward Compatibility
نسخهی جدید API میتواند کلاینتهای قدیمی را پشتیبانی کند.
مثلاً اضافه کردن یک فیلد جدید:
معمولاً مشکلی برای کلاینت قدیمی ایجاد نمیکند، چون
2. Forward Compatibility
سیستم قدیمی بتواند تا حدی با دادهها یا API جدیدتر کنار بیاید. این معمولاً سختتر از backward compatibility است.
3. Source Compatibility
کدی که با API قبلی نوشته شده، بدون تغییر بتواند compile شود.
مثلاً اگر در Java این را داشته باشیم:
و در نسخهی جدید
4. Binary Compatibility
برنامهای که قبلاً compile شده، بتواند با نسخهی جدید library اجرا شود، بدون اینکه دوباره compile شود.
نکتهی خیلی مهم
وقتی در پروژه میگویند:
معمولاً منظورشان این است:
آیا این تغییر باعث میشود consumerهای فعلی API مجبور به تغییر کدشان شوند یا نه؟
مثلاً فرض کن API قبلی این endpoint را دارد:
GET /users/123
و پاسخ میدهد:
{
"id": 123,
"name": "Ali"
}اگر در نسخهی جدید همچنان همین endpoint و فیلدها را حفظ کنی، معمولاً backward compatible هستی.
اما اگر تبدیلش کنی به:
GET /user/123
یا
name را حذف کنی، کلاینتهایی که با نسخهی قبلی کار میکردند ممکن است بشکنند؛ پس breaking change ایجاد کردهای.چند نوع مهم Compatibility
1. Backward Compatibility
نسخهی جدید API میتواند کلاینتهای قدیمی را پشتیبانی کند.
مثلاً اضافه کردن یک فیلد جدید:
{
"id": 123,
"name": "Ali",
"email": "ali@example.com"
}معمولاً مشکلی برای کلاینت قدیمی ایجاد نمیکند، چون
email را نادیده میگیرد.2. Forward Compatibility
سیستم قدیمی بتواند تا حدی با دادهها یا API جدیدتر کنار بیاید. این معمولاً سختتر از backward compatibility است.
3. Source Compatibility
کدی که با API قبلی نوشته شده، بدون تغییر بتواند compile شود.
مثلاً اگر در Java این را داشته باشیم:
user.getName();
و در نسخهی جدید
getName() را حذف کنیم، source compatibility شکسته میشود.4. Binary Compatibility
برنامهای که قبلاً compile شده، بتواند با نسخهی جدید library اجرا شود، بدون اینکه دوباره compile شود.
نکتهی خیلی مهم
وقتی در پروژه میگویند:
"Is this API change compatible?"
معمولاً منظورشان این است:
آیا این تغییر باعث میشود consumerهای فعلی API مجبور به تغییر کدشان شوند یا نه؟
🔵 عنوان مقاله
Data Ownership in Practice: Defining Decision Rights in Enterprise Data Governance (5 minute read)
🟢 خلاصه مقاله:
در حوزه مدیریت دادههای سازمانی، مالکیت دادهها نقش کلیدی ایفا میکند. هنگامی که فرد یا واحدی مسئولیت مشخصی در قبال دادهها بر عهده میگیرد، اما حقوق تصمیمگیری مرتبط با آن را ندارد، این وضعیت دچار مشکل میشود. در چنین شرایطی، مالک داده قادر نیست معیارهای کیفیت داده را تایید کند، ریسکهای احتمالی را بپذیرد یا مجوزهای لازم را صادر کند. بنابراین، برای اینکه مدیریت دادهها تاثیرگذار باشد، نیاز است تا مسئولیتها با حقوق تصمیمگیری همراه باشد.
مدیریت مؤثر دادهها نیازمند داشتن قدرت و مسیرهای روشن برای ارتقاء و حل مشکلات است. در این روند، صاحبان داده باید حق تصمیمگیری درباره نحوه استفاده و کیفیت آن را داشته باشند، در حالی که ناظران یا وظیفهداران داده وظیفه اجرای تصمیمات را بر عهده دارند. تصمیمگیریهای مرتبط باید توسط مالکانی که پاسخگو هستند، انجام شده و پذیرش ریسکها نیز باید قابل ردیابی باشد؛ تا در صورت نیاز، مسئولیت هر گزینهای مشخص باشد و فرآیندها شفاف و قابل پیگیری باشد.
در نتیجه، تفکیک وظایف میان تصمیمگیری و اجرا اهمیت زیادی دارد و هر کدام نیازمند مسئولیتپذیری و شفافیت است تا سازمان بتواند از دادههای خود به صورت مؤثر و مطمئن استفاده کند. این رویکرد به ایجاد چارچوبی قوی برای حاکمیت دادهها کمک میکند و تضمین میکند که تصمیمات استراتژیک با دانش و مسئولیتپذیری اتخاذ میشوند، در حالی که فرآیندهای اجرا هم به طور پیوسته و قابل نظارت انجام میشوند.
#مدیریت_داده #حاکمیت_داده #مالکیت_داده #تصمیم_گیری
🟣لینک مقاله:
https://medium.com/@community_md101/data-ownership-in-practice-defining-decision-rights-in-enterprise-data-governance-c125e0635873?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Data Ownership in Practice: Defining Decision Rights in Enterprise Data Governance (5 minute read)
🟢 خلاصه مقاله:
در حوزه مدیریت دادههای سازمانی، مالکیت دادهها نقش کلیدی ایفا میکند. هنگامی که فرد یا واحدی مسئولیت مشخصی در قبال دادهها بر عهده میگیرد، اما حقوق تصمیمگیری مرتبط با آن را ندارد، این وضعیت دچار مشکل میشود. در چنین شرایطی، مالک داده قادر نیست معیارهای کیفیت داده را تایید کند، ریسکهای احتمالی را بپذیرد یا مجوزهای لازم را صادر کند. بنابراین، برای اینکه مدیریت دادهها تاثیرگذار باشد، نیاز است تا مسئولیتها با حقوق تصمیمگیری همراه باشد.
مدیریت مؤثر دادهها نیازمند داشتن قدرت و مسیرهای روشن برای ارتقاء و حل مشکلات است. در این روند، صاحبان داده باید حق تصمیمگیری درباره نحوه استفاده و کیفیت آن را داشته باشند، در حالی که ناظران یا وظیفهداران داده وظیفه اجرای تصمیمات را بر عهده دارند. تصمیمگیریهای مرتبط باید توسط مالکانی که پاسخگو هستند، انجام شده و پذیرش ریسکها نیز باید قابل ردیابی باشد؛ تا در صورت نیاز، مسئولیت هر گزینهای مشخص باشد و فرآیندها شفاف و قابل پیگیری باشد.
در نتیجه، تفکیک وظایف میان تصمیمگیری و اجرا اهمیت زیادی دارد و هر کدام نیازمند مسئولیتپذیری و شفافیت است تا سازمان بتواند از دادههای خود به صورت مؤثر و مطمئن استفاده کند. این رویکرد به ایجاد چارچوبی قوی برای حاکمیت دادهها کمک میکند و تضمین میکند که تصمیمات استراتژیک با دانش و مسئولیتپذیری اتخاذ میشوند، در حالی که فرآیندهای اجرا هم به طور پیوسته و قابل نظارت انجام میشوند.
#مدیریت_داده #حاکمیت_داده #مالکیت_داده #تصمیم_گیری
🟣لینک مقاله:
https://medium.com/@community_md101/data-ownership-in-practice-defining-decision-rights-in-enterprise-data-governance-c125e0635873?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Medium
Data Ownership in Practice: Defining Decision Rights in Enterprise Data Governance
Why Effective Governance Depends on Explicit Authority, Risk Acceptance, and Designed Decision Rights
🔵 عنوان مقاله
Kestra 2.0 release candidates land with a new execution engine and UI overhaul (3 minute read)
🟢 خلاصه مقاله:
نسخههای آزمایشی Kestra 2.0 با عرضهی یک موتور اجرایی جدید، تغییرات گسترده در رابط کاربری و برخی اصلاحات قابل توجه، وارد بازار شدند. این نسخههای آزمایشی به عنوان بزرگترین بهروزرسانی در تاریخ این ابزار معرفی میشوند و هدف آنها ارائه ویژگیهای پیشرفتهتر و بهبود عملکرد کلی است. توسعهدهندگان و کاربرانی که زودتر نسبت به عموم به این نسخه دسترسی پیدا کردهاند، تشویق میشوند تا روندهای کاری و مسیرهای مهاجرت از نسخههای قبلی را آزمایش و بررسی کنند، تا با مشکلات احتمالی آشنا شده و آمادگی لازم را برای نسخه نهایی کسب کنند.
نسخهی جدید Kestra، تغییرات عمدهای در عملکرد و رابط کاربری خود ایجاد کرده است که میتواند تجربه استفاده را به شکل چشمگیری ارتقاء دهد. این تغییرات، به منظور فراهم کردن ابزارهای قدرتمندتر و فرآیندهای سادهتر برای مدیریت و اورکستراسیون_TASKهای پیچیده طراحی شده است. در نتیجه، کاربران حالا امکانات بیشتری برای کنترل و نظارت بر گردش کارهای خود دارند.
در مجموع، این نسخههای آزمایشی فرصت خوبی برای کاربران فراهم کرده است تا با فناوریهای جدید آشنا شوند و بازخورد خود را ارائه دهند، در حالی که تیم توسعه بتواند به سرعت مشکلات و نواقص احتمالی را برطرف کند. با ورود رسمی نسخهی نهایی، انتظار میرود Kestra تحولی بزرگ در حوزهی اورکستراسیون فرآیندها ایجاد کند و پاسخگوی نیازهای مدرن کسبوکار باشد.
#Kestra #نرمافزار #توسعهدهندگان #مدیریت_جریان_کار
🟣لینک مقاله:
https://kestra.io/blogs/kestra-2-0-almost-here/?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Kestra 2.0 release candidates land with a new execution engine and UI overhaul (3 minute read)
🟢 خلاصه مقاله:
نسخههای آزمایشی Kestra 2.0 با عرضهی یک موتور اجرایی جدید، تغییرات گسترده در رابط کاربری و برخی اصلاحات قابل توجه، وارد بازار شدند. این نسخههای آزمایشی به عنوان بزرگترین بهروزرسانی در تاریخ این ابزار معرفی میشوند و هدف آنها ارائه ویژگیهای پیشرفتهتر و بهبود عملکرد کلی است. توسعهدهندگان و کاربرانی که زودتر نسبت به عموم به این نسخه دسترسی پیدا کردهاند، تشویق میشوند تا روندهای کاری و مسیرهای مهاجرت از نسخههای قبلی را آزمایش و بررسی کنند، تا با مشکلات احتمالی آشنا شده و آمادگی لازم را برای نسخه نهایی کسب کنند.
نسخهی جدید Kestra، تغییرات عمدهای در عملکرد و رابط کاربری خود ایجاد کرده است که میتواند تجربه استفاده را به شکل چشمگیری ارتقاء دهد. این تغییرات، به منظور فراهم کردن ابزارهای قدرتمندتر و فرآیندهای سادهتر برای مدیریت و اورکستراسیون_TASKهای پیچیده طراحی شده است. در نتیجه، کاربران حالا امکانات بیشتری برای کنترل و نظارت بر گردش کارهای خود دارند.
در مجموع، این نسخههای آزمایشی فرصت خوبی برای کاربران فراهم کرده است تا با فناوریهای جدید آشنا شوند و بازخورد خود را ارائه دهند، در حالی که تیم توسعه بتواند به سرعت مشکلات و نواقص احتمالی را برطرف کند. با ورود رسمی نسخهی نهایی، انتظار میرود Kestra تحولی بزرگ در حوزهی اورکستراسیون فرآیندها ایجاد کند و پاسخگوی نیازهای مدرن کسبوکار باشد.
#Kestra #نرمافزار #توسعهدهندگان #مدیریت_جریان_کار
🟣لینک مقاله:
https://kestra.io/blogs/kestra-2-0-almost-here/?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
kestra.io
Kestra 2.0 is almost here: help shape the future of orchestration | Kestra
Kestra 2.0 rebuilds the execution engine, redesigns the UI, and stays Apache 2.0. Run the release candidates on your own workloads and tell us what breaks.
🔵 عنوان مقاله
Introducing sqlfmt: An SQL gofmt-Style Formatter
🟢 خلاصه مقاله:
در طول زمان، دییمتری، یکی از مشارکتکنندگان پروژه پستگرس، روشی خاص برای فرمتدهی SQL توسعه داده است. این سبک که در کتاب او با عنوان «هنر PostgreSQL» نیز از آن بهرهبرده شده است، روشی منسجم و قابل تنظیم برای سازماندهی و زیباسازی استعلامهای SQL است. برای تسهیل فرآیند استفاده، او ابزاری به زبان Go ساخته است که میتواند کدهای SQL شما را به طور خودکار و مطابق با این سبک خاص قالببندی کند.
این ابزار نه تنها به صورت یک برنامه محلی قابل اجرا است، بلکه نسخهای وبسایت هم دارد که به شما اجازه میدهد مستقیماً در مرورگر خود استعلامهای SQL خود را قالببندی کنید. اگر در حال آمادهسازی یک ارائه، مقاله یا پست وبلاگ هستید و میخواهید کدهای SQL شما حرفهایتر و خواناتر باشند، استفاده از این ابزار میتواند کمک شایانی به شما کند. در واقع، این ابزار به عنوان نسخهای مدرن و کاربردی از استانداردهای قالببندی، راهی سریع و آسان برای بهبود ظاهر استعلامهای شما فراهم میکند.
در نتیجه، اگر میخواهید کدهای SQL خود را به شکل زیباتر، مرتبتر و استانداردتر درآورید، توصیه میکنیم این ابزار جدید را امتحان کنید و از امکانات آن بهرهمند شوید. با این کار، نه تنها خوانایی کدهای شما افزایش مییابد، بلکه پروسه نوشتن و ارائه استعلامها نیز به مراتب سادهتر خواهد شد.
#SQL #ابزارهای_برنامهنویسی #پستگرس #قالببندی
🟣لینک مقاله:
https://tapoueh.org/blog/2026/08/introducing-sqlfmt-an-sql-gofmt-style-formatter/
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Introducing sqlfmt: An SQL gofmt-Style Formatter
🟢 خلاصه مقاله:
در طول زمان، دییمتری، یکی از مشارکتکنندگان پروژه پستگرس، روشی خاص برای فرمتدهی SQL توسعه داده است. این سبک که در کتاب او با عنوان «هنر PostgreSQL» نیز از آن بهرهبرده شده است، روشی منسجم و قابل تنظیم برای سازماندهی و زیباسازی استعلامهای SQL است. برای تسهیل فرآیند استفاده، او ابزاری به زبان Go ساخته است که میتواند کدهای SQL شما را به طور خودکار و مطابق با این سبک خاص قالببندی کند.
این ابزار نه تنها به صورت یک برنامه محلی قابل اجرا است، بلکه نسخهای وبسایت هم دارد که به شما اجازه میدهد مستقیماً در مرورگر خود استعلامهای SQL خود را قالببندی کنید. اگر در حال آمادهسازی یک ارائه، مقاله یا پست وبلاگ هستید و میخواهید کدهای SQL شما حرفهایتر و خواناتر باشند، استفاده از این ابزار میتواند کمک شایانی به شما کند. در واقع، این ابزار به عنوان نسخهای مدرن و کاربردی از استانداردهای قالببندی، راهی سریع و آسان برای بهبود ظاهر استعلامهای شما فراهم میکند.
در نتیجه، اگر میخواهید کدهای SQL خود را به شکل زیباتر، مرتبتر و استانداردتر درآورید، توصیه میکنیم این ابزار جدید را امتحان کنید و از امکانات آن بهرهمند شوید. با این کار، نه تنها خوانایی کدهای شما افزایش مییابد، بلکه پروسه نوشتن و ارائه استعلامها نیز به مراتب سادهتر خواهد شد.
#SQL #ابزارهای_برنامهنویسی #پستگرس #قالببندی
🟣لینک مقاله:
https://tapoueh.org/blog/2026/08/introducing-sqlfmt-an-sql-gofmt-style-formatter/
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Dimitri Fontaine
Introducing sqlfmt: an SQL gofmt-style formatter
Formatting SQL tends to bring some of the same questions again and again: should we uppercase clause keywords? should we put the separating comma at the start …
🔵 عنوان مقاله
The Database at 550 Kilometers: What Orbital Computing Means for Distributed Databases (16 minute read)
🟢 خلاصه مقاله:
در سالهای اخیر، فناوریهای مبتنی بر فضانوردی و رایانش در مدار، توجه زیادی را جلب کردهاند. یکی از موضوعات جذاب در این زمینه، مفهوم رایانش در فضا است؛ یک ایده نوآورانه و البته چالشبرانگیز که میتواند سرنوشت سیستمهای پایگاه داده توزیعشده را تغییر دهد. در این مقاله، به بررسی معنای واقعی رایانش در مدار و تاثیر آن بر پایگاههای داده توزیعشده میپردازیم.
فضاهای مبتنی بر هوش مصنوعی و زیرساختهای رایانهای در مدار، به جای اینکه محدودیتهای مربوط به پردازش، تقاضای زیادی برای ذخیرهسازی ایجاد کنند. در واقع، در حالی که مدار بهعنوان محلی امن و پرقدرت برای پردازشهای سنگین GPU بسیار مناسب است، اما در زمینه ذخیرهسازی، چندان کارآمد نیست. دلیل این موضوع، هزینههای بالای پرتاب و نگهداری ماهوارهها است؛ به طوری که هزینههای راهاندازی و حفظ این فناوری در فضای مداری، نسبت به ذخیرهسازیهای زمینی بسیار گرانتر تمام میشود. بنابراین، اجرای سیستمهای پایگاه داده در مدار نیازمند راهکارهای خاص است که بتوانند این محدودیتها را مدیریت کنند.
در این زمینه، پایگاه دادههای SQL توزیعشده میتواند در فضا فعالیت کند، اما نیازمند توسعه فناوریهای خاص است. برای موفقیت در این حوزه، باید مکانیابی مناسب اجارهها، فرآیندهای بازنشستگی ماهوارهها و همچنین سیاستهای مربوط به تکرار دادهها بر اساس چهارچوبهای قضاوتکننده فضایی و قوانین مربوط به هر حوزه مورد توجه قرار گیرد. به این ترتیب، اطمینان حاصل میشود که سیستمهای داده در مدار نه تنها کارایی و امنیت لازم را دارند، بلکه با مقررات حوزههای مختلف نیز سازگار هستند.
در نهایت، رایانش در مدار آیندهای نویدبخش است، اما نیازمند طراحی دقیق و در نظر گرفتن چالشهای فنی و حقوقی است. این فناوری میتواند در آینده، راهحلی نوین برای پاسخگویی به نیازهای روزافزون داده و پردازش در جهان باشد، به شرطی که در توسعه و پیادهسازی آن، نگرانیهای هزینه، امنیت و قوانین به خوبی مدیریت شوند.
#رایانش_در_مدار #پایگاه_داده_توزیعشده #هوش_مصنوعی_فضایی #توسعه_فناوری
🟣لینک مقاله:
https://cockroachlabs.com/blog/orbital-computing-distributed-databases?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
The Database at 550 Kilometers: What Orbital Computing Means for Distributed Databases (16 minute read)
🟢 خلاصه مقاله:
در سالهای اخیر، فناوریهای مبتنی بر فضانوردی و رایانش در مدار، توجه زیادی را جلب کردهاند. یکی از موضوعات جذاب در این زمینه، مفهوم رایانش در فضا است؛ یک ایده نوآورانه و البته چالشبرانگیز که میتواند سرنوشت سیستمهای پایگاه داده توزیعشده را تغییر دهد. در این مقاله، به بررسی معنای واقعی رایانش در مدار و تاثیر آن بر پایگاههای داده توزیعشده میپردازیم.
فضاهای مبتنی بر هوش مصنوعی و زیرساختهای رایانهای در مدار، به جای اینکه محدودیتهای مربوط به پردازش، تقاضای زیادی برای ذخیرهسازی ایجاد کنند. در واقع، در حالی که مدار بهعنوان محلی امن و پرقدرت برای پردازشهای سنگین GPU بسیار مناسب است، اما در زمینه ذخیرهسازی، چندان کارآمد نیست. دلیل این موضوع، هزینههای بالای پرتاب و نگهداری ماهوارهها است؛ به طوری که هزینههای راهاندازی و حفظ این فناوری در فضای مداری، نسبت به ذخیرهسازیهای زمینی بسیار گرانتر تمام میشود. بنابراین، اجرای سیستمهای پایگاه داده در مدار نیازمند راهکارهای خاص است که بتوانند این محدودیتها را مدیریت کنند.
در این زمینه، پایگاه دادههای SQL توزیعشده میتواند در فضا فعالیت کند، اما نیازمند توسعه فناوریهای خاص است. برای موفقیت در این حوزه، باید مکانیابی مناسب اجارهها، فرآیندهای بازنشستگی ماهوارهها و همچنین سیاستهای مربوط به تکرار دادهها بر اساس چهارچوبهای قضاوتکننده فضایی و قوانین مربوط به هر حوزه مورد توجه قرار گیرد. به این ترتیب، اطمینان حاصل میشود که سیستمهای داده در مدار نه تنها کارایی و امنیت لازم را دارند، بلکه با مقررات حوزههای مختلف نیز سازگار هستند.
در نهایت، رایانش در مدار آیندهای نویدبخش است، اما نیازمند طراحی دقیق و در نظر گرفتن چالشهای فنی و حقوقی است. این فناوری میتواند در آینده، راهحلی نوین برای پاسخگویی به نیازهای روزافزون داده و پردازش در جهان باشد، به شرطی که در توسعه و پیادهسازی آن، نگرانیهای هزینه، امنیت و قوانین به خوبی مدیریت شوند.
#رایانش_در_مدار #پایگاه_داده_توزیعشده #هوش_مصنوعی_فضایی #توسعه_فناوری
🟣لینک مقاله:
https://cockroachlabs.com/blog/orbital-computing-distributed-databases?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Cockroachlabs
Orbital Computing and Distributed Databases | CockroachDB
Learn how orbital computing changes distributed database design across latency, consistency, resilience, and data sovereignty at global scale.
🔵 عنوان مقاله
'Turning Claude into Postgres So I Can Raise a Series A'
🟢 خلاصه مقاله:
وقتی که یک مدل زبانی بزرگ (LLM) را در کنار پروتکل ارتباطی پایگاه داده پستگرس قرار میدهید و هرطور که مایل باشد، به پاسخگویی به سوالات و درخواستها میپردازد، چه اتفاقی میافتد؟ این همان چیزی است که در این پروژه رخ داده است. در واقع، هدف از این آزمایش صرفاً یک بازی سرگرمکننده نبود، بلکه فرد توسعهدهنده در مسیر پیادهسازی APIهای ذخیرهسازی برای استفاده عملی هم قدم گذاشته است. او با این روش نشان داد که میتوان مدلهای زبانی بزرگ را به شکلی نوین و انعطافپذیر به کار گرفت و حتی آنها را در سیستمهای پایگاه داده ادغام کرد. این پروژه نه تنها جذاب است، بلکه نوآوریهایی را در زمینه مدیریت داده و تعامل با پایگاههای اطلاعاتی نشان میدهد.
با این کار، او در مسیر جمعآوری سرمایه سری A قرار گرفته است و نشان میدهد که تکنولوژیهای نوین چگونه میتوانند آینده مدیریت دادهها را تغییر دهند. این تلاش، نمونهای است از خلاقیت و پیشگامی در دنیای فنی، که امید است در آینده مرزهای کاربردهای AI و دیتابیسها را گسترش دهد.
#هوش_مصنوعی #پایگاه_داده #نوآوری #سرمایه_گذاری
🟣لینک مقاله:
https://byteofdev.com/posts/turning-claude-postgres/
➖➖➖➖➖➖➖➖
👑 @Database_Academy
'Turning Claude into Postgres So I Can Raise a Series A'
🟢 خلاصه مقاله:
وقتی که یک مدل زبانی بزرگ (LLM) را در کنار پروتکل ارتباطی پایگاه داده پستگرس قرار میدهید و هرطور که مایل باشد، به پاسخگویی به سوالات و درخواستها میپردازد، چه اتفاقی میافتد؟ این همان چیزی است که در این پروژه رخ داده است. در واقع، هدف از این آزمایش صرفاً یک بازی سرگرمکننده نبود، بلکه فرد توسعهدهنده در مسیر پیادهسازی APIهای ذخیرهسازی برای استفاده عملی هم قدم گذاشته است. او با این روش نشان داد که میتوان مدلهای زبانی بزرگ را به شکلی نوین و انعطافپذیر به کار گرفت و حتی آنها را در سیستمهای پایگاه داده ادغام کرد. این پروژه نه تنها جذاب است، بلکه نوآوریهایی را در زمینه مدیریت داده و تعامل با پایگاههای اطلاعاتی نشان میدهد.
با این کار، او در مسیر جمعآوری سرمایه سری A قرار گرفته است و نشان میدهد که تکنولوژیهای نوین چگونه میتوانند آینده مدیریت دادهها را تغییر دهند. این تلاش، نمونهای است از خلاقیت و پیشگامی در دنیای فنی، که امید است در آینده مرزهای کاربردهای AI و دیتابیسها را گسترش دهد.
#هوش_مصنوعی #پایگاه_داده #نوآوری #سرمایه_گذاری
🟣لینک مقاله:
https://byteofdev.com/posts/turning-claude-postgres/
➖➖➖➖➖➖➖➖
👑 @Database_Academy
ByteofDev
Turning Claude into Postgres so I can raise a Series A
Watch out, Databricks
❤1
🔵 عنوان مقاله
How Physical Intelligence unified its robotics data stack with Postgres managed by ClickHouse (20 minute read)
🟢 خلاصه مقاله:
شرکت فیزیکال اینتلِجنس پس از محدودیتهای گستردهای که در مقیاسپذیری پایگاهداده RDS خود داشت، تصمیم گرفت ساختار دادههای رباتیک خود را به گونهای نوین بازطراحی کند. در نتیجه، این شرکت بخش زیادی از دادههای مربوط به رباتها را به دو بخش جداگانه تقسیم کرد: یکی برای وظایف تراکنشی و دیگری برای تحلیلهای با حجم بالا. برای بخش تراکنشی، از پایگاهداده PostgreSQL بهره میبردند که به خوبی نیازهای روزمره را تامین میکرد، اما در مقابل، نیاز به یک سیستم قویتر برای تحلیلهای پیچیده و با حجم بالای داده احساس میشد. بنابراین، شرکت از ClickHouse برای انجام تحلیلهای کارآمد و با کارایی بالا بر روی دادههای با کارتینالیته بالا استفاده کرد. این تغییر اساسی، به آنها اجازه داد تا میلیونها رکورد متادیتا را به سرعت مدیریت کرده و جستوجوی سریع و کاوشهای مبتنی بر عامل را فراهم سازند، جایگزین حوالی روزها و هفتهها برای پاسخگویی به پرس و جوهای پیچیده شد.
در نتیجه، این استراتژی نوین، نه تنها مقیاسپذیری سیستم را به طور قابل توجهی افزایش داد، بلکه فرآیندهای تحلیلی و جستوجوی اطلاعات در سیستمهای رباتیک را بسیار سریع و کارآمدتر ساخت. این تحول، توانست نیازهای فضایی و تحلیلهای بیدرنگ را برطرف کند و دیگر محدودیتی در حجم دادهها و سرعت پاسخگویی وجود نداشت. استقرار همزمان Postgres و ClickHouse به عنوان یک استک داده هماهنگ، توانست هر دو بخش تراکنشی و تحلیلی را به صورت همزمان مدیریت کند و انعطافپذیری فوقالعادهای در عملیات روزمره و تصمیمگیریهای استراتژیک ایجاد کند. این تغییرات نشان میدهد که چگونه فناوریهای نوین قادرند بدون توقف، به پایدارتر شدن و توسعه سیستمهای پیچیده کمک کنند.
#پایگاهداده #تحلیل داده #رباتیک #هوشمصنوعی
🟣لینک مقاله:
https://clickhouse.com/blog/physical-intelligence-rds-to-clickhouse-managed-postgres?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
How Physical Intelligence unified its robotics data stack with Postgres managed by ClickHouse (20 minute read)
🟢 خلاصه مقاله:
شرکت فیزیکال اینتلِجنس پس از محدودیتهای گستردهای که در مقیاسپذیری پایگاهداده RDS خود داشت، تصمیم گرفت ساختار دادههای رباتیک خود را به گونهای نوین بازطراحی کند. در نتیجه، این شرکت بخش زیادی از دادههای مربوط به رباتها را به دو بخش جداگانه تقسیم کرد: یکی برای وظایف تراکنشی و دیگری برای تحلیلهای با حجم بالا. برای بخش تراکنشی، از پایگاهداده PostgreSQL بهره میبردند که به خوبی نیازهای روزمره را تامین میکرد، اما در مقابل، نیاز به یک سیستم قویتر برای تحلیلهای پیچیده و با حجم بالای داده احساس میشد. بنابراین، شرکت از ClickHouse برای انجام تحلیلهای کارآمد و با کارایی بالا بر روی دادههای با کارتینالیته بالا استفاده کرد. این تغییر اساسی، به آنها اجازه داد تا میلیونها رکورد متادیتا را به سرعت مدیریت کرده و جستوجوی سریع و کاوشهای مبتنی بر عامل را فراهم سازند، جایگزین حوالی روزها و هفتهها برای پاسخگویی به پرس و جوهای پیچیده شد.
در نتیجه، این استراتژی نوین، نه تنها مقیاسپذیری سیستم را به طور قابل توجهی افزایش داد، بلکه فرآیندهای تحلیلی و جستوجوی اطلاعات در سیستمهای رباتیک را بسیار سریع و کارآمدتر ساخت. این تحول، توانست نیازهای فضایی و تحلیلهای بیدرنگ را برطرف کند و دیگر محدودیتی در حجم دادهها و سرعت پاسخگویی وجود نداشت. استقرار همزمان Postgres و ClickHouse به عنوان یک استک داده هماهنگ، توانست هر دو بخش تراکنشی و تحلیلی را به صورت همزمان مدیریت کند و انعطافپذیری فوقالعادهای در عملیات روزمره و تصمیمگیریهای استراتژیک ایجاد کند. این تغییرات نشان میدهد که چگونه فناوریهای نوین قادرند بدون توقف، به پایدارتر شدن و توسعه سیستمهای پیچیده کمک کنند.
#پایگاهداده #تحلیل داده #رباتیک #هوشمصنوعی
🟣لینک مقاله:
https://clickhouse.com/blog/physical-intelligence-rds-to-clickhouse-managed-postgres?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
ClickHouse
How Physical Intelligence unified its robotics data stack with Postgres managed by ClickHouse | ClickHouse
Physical Intelligence runs both its OLAP and OLTP workloads on ClickHouse managed Postgres and ClickHouse Cloud
Forwarded from Software Engineer
Medium یکی از بزرگترین منابع مقالات درباره تکنولوژی، هوش مصنوعی، برنامه نویسی، کسب و کار و رشد فردی هست. اما بخشی از بهترین مطالب اون به صورت ویژه منتشر میشوند.
مدیومفا کمک میکنه این مقالهها رو راحتتر به زبان فارسی بخونید و به مجموعهای از مطالب منتخب Medium دسترسی داشته باشید.
شروع مطالعه:
https://mediumfa.ir/feed
مدیومفا کمک میکنه این مقالهها رو راحتتر به زبان فارسی بخونید و به مجموعهای از مطالب منتخب Medium دسترسی داشته باشید.
شروع مطالعه:
https://mediumfa.ir/feed
مدیومفا (MediumFa)
فید مقالات | مدیومفا
مرور و مطالعه جدیدترین مقالات تخصصی ترجمهشده در مدیومفا.
Forwarded from VIP
📢 لیست کانالهای تخصصی ما
ما بهصورت روزانه جدیدترین اخبار، مقالات، آموزشها و منابع تخصصی را در حوزههای مختلف فناوری منتشر میکنیم:
🔹 Software
🔻Software Engineering
🔻 Security
🔻Quality Assurance
🔹 UI/UX
🔻Design
🔻User Experience
🔻 User Interface
🔹 Golang
🔻Go Articles
🔻Best Practices
🔻Architecture
🔹 DevOps
🔻Docker
🔻 Kubernetes
🔻AWS
🔻GCP
🔻 Azure
🔹 AI
🔻ChatGPT
🔻Gemini
🔻Grok
🔻 Claude
🔻 AI News
🔹 Front-End
🔻JavaScript
🔻TypeScript
🔻React
🔻Vue
🔻 Angular
🔹 Linux
🔻Linux News
🔻 Tools
🔻 Administration
🔻Tutorials
🔹 Database
🔻PostgreSQL
🔻 MySQL
🔻 Redis
🔻MongoDB
🔹 Job & Career
🚀 اگر میخواهید به تمام کانالهای تخصصی ما بهصورت یکجا دسترسی داشته باشید، از طریق لینک زیر عضو شوید:
https://xn--r1a.website/addlist/nHHKekbfknUzMjA0
ما بهصورت روزانه جدیدترین اخبار، مقالات، آموزشها و منابع تخصصی را در حوزههای مختلف فناوری منتشر میکنیم:
🔹 Software
🔻Software Engineering
🔻 Security
🔻Quality Assurance
🔹 UI/UX
🔻Design
🔻User Experience
🔻 User Interface
🔹 Golang
🔻Go Articles
🔻Best Practices
🔻Architecture
🔹 DevOps
🔻Docker
🔻 Kubernetes
🔻AWS
🔻GCP
🔻 Azure
🔹 AI
🔻ChatGPT
🔻Gemini
🔻Grok
🔻 Claude
🔻 AI News
🔹 Front-End
🔻JavaScript
🔻TypeScript
🔻React
🔻Vue
🔻 Angular
🔹 Linux
🔻Linux News
🔻 Tools
🔻 Administration
🔻Tutorials
🔹 Database
🔻PostgreSQL
🔻 MySQL
🔻 Redis
🔻MongoDB
🔹 Job & Career
🚀 اگر میخواهید به تمام کانالهای تخصصی ما بهصورت یکجا دسترسی داشته باشید، از طریق لینک زیر عضو شوید:
https://xn--r1a.website/addlist/nHHKekbfknUzMjA0
🔵 عنوان مقاله
Video Needs a Knowledge Base (6 minute read)
🟢 خلاصه مقاله:
در دنیای امروز، استفاده از ویدیوها با چالشهایی همراه است که بسیاری از کسبوکارها و کاربران را دچار مشکل میکند. هرچند فیلمها و کلیپها میتوانند به راحتی ذخیره و تماشا شوند، اما دشواری اصلی در جستجو و بهرهبرداری از محتوای آنها است. به دلیل عدم وجود قابلیت جستجوی داخلی در فایلهای ویدئویی، کاربران باید یا زمان زیادی را صرف مرور دستی محتوا کنند یا از فناوریهای هوش مصنوعی مکرر بهرهمند شوند تا اطلاعات مورد نیاز را استخراج کنند. این فرآیندها معمولاً وقتگیر و ناخوشایند هستند و بهرهوری را کاهش میدهد.
در پاسخ به این نیاز، پلتفرم شرکت CreativAI راهکاری نوآورانه ارائه داده است. این سیستم پس از ضبط ویدیو، آن را به صورت ساختاریافته و قابل جستجو تبدیل میکند. این فرآیند شامل سازماندهی و دستهبندی محتوای ویدیویی است به نحوی که حالا میتوان به راحتی و در کوتاهترین زمان ممکن، با جستجو در پایگاه دانش، اطلاعات مورد نیاز را پیدا کرد. این سیستم مخصوصاً در حوزههایی مانند رباتیک، لجستیک، ایمنی و انطباق قوانین، و کاربردهای فیزیکی هوش مصنوعی بسیار مفید واقع میشود.
این رویکرد باعث میشود که استفاده از ویدیوها نه تنها آسانتر بلکه بسیار کارآمدتر شود، زیرا میتوان به دادههای عظیم و پیچیده در مدت زمان کوتاهی دست یافت و تصمیمگیریهای بهتر و سریعتری انجام داد. بنابراین، تبدیل ویدیو به پایگاه دانش، گامی مهم در جهت بهرهوری حداکثری از محتواهای تصویری است که آینده هوش مصنوعی و فناوریهای مرتبط را شکل میدهد.
#هوش_مصنوعی #پایگاه_دانش #تکنولوژی #راندمان
🟣لینک مقاله:
https://creativ-ai.com/blogs/video-needs-a-knowledge-base?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Video Needs a Knowledge Base (6 minute read)
🟢 خلاصه مقاله:
در دنیای امروز، استفاده از ویدیوها با چالشهایی همراه است که بسیاری از کسبوکارها و کاربران را دچار مشکل میکند. هرچند فیلمها و کلیپها میتوانند به راحتی ذخیره و تماشا شوند، اما دشواری اصلی در جستجو و بهرهبرداری از محتوای آنها است. به دلیل عدم وجود قابلیت جستجوی داخلی در فایلهای ویدئویی، کاربران باید یا زمان زیادی را صرف مرور دستی محتوا کنند یا از فناوریهای هوش مصنوعی مکرر بهرهمند شوند تا اطلاعات مورد نیاز را استخراج کنند. این فرآیندها معمولاً وقتگیر و ناخوشایند هستند و بهرهوری را کاهش میدهد.
در پاسخ به این نیاز، پلتفرم شرکت CreativAI راهکاری نوآورانه ارائه داده است. این سیستم پس از ضبط ویدیو، آن را به صورت ساختاریافته و قابل جستجو تبدیل میکند. این فرآیند شامل سازماندهی و دستهبندی محتوای ویدیویی است به نحوی که حالا میتوان به راحتی و در کوتاهترین زمان ممکن، با جستجو در پایگاه دانش، اطلاعات مورد نیاز را پیدا کرد. این سیستم مخصوصاً در حوزههایی مانند رباتیک، لجستیک، ایمنی و انطباق قوانین، و کاربردهای فیزیکی هوش مصنوعی بسیار مفید واقع میشود.
این رویکرد باعث میشود که استفاده از ویدیوها نه تنها آسانتر بلکه بسیار کارآمدتر شود، زیرا میتوان به دادههای عظیم و پیچیده در مدت زمان کوتاهی دست یافت و تصمیمگیریهای بهتر و سریعتری انجام داد. بنابراین، تبدیل ویدیو به پایگاه دانش، گامی مهم در جهت بهرهوری حداکثری از محتواهای تصویری است که آینده هوش مصنوعی و فناوریهای مرتبط را شکل میدهد.
#هوش_مصنوعی #پایگاه_دانش #تکنولوژی #راندمان
🟣لینک مقاله:
https://creativ-ai.com/blogs/video-needs-a-knowledge-base?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Creativ-Ai
Video Needs a Knowledge Base — CreativAI Blog
Video is the world's largest dataset. It is also the least usable one. We built the SQL layer for Physical and Visual AI.
درود دوستان 👋
اگر انتقاد یا پیشنهادی دارید که میتواند به بهبود چنلها کمک کند، خوشحال میشوم از نظرات شما استفاده کنم. میتوانید از طریق آیدی زیر با من در ارتباط باشید:
@mrbardia72
منتظر نظرات سازندهتان هستم! 📝
🚀 اگر میخواهید به تمام کانالهای تخصصی ما بهصورت یکجا دسترسی داشته باشید، از طریق لینک زیر عضو شوید:
https://xn--r1a.website/addlist/nHHKekbfknUzMjA0
اگر انتقاد یا پیشنهادی دارید که میتواند به بهبود چنلها کمک کند، خوشحال میشوم از نظرات شما استفاده کنم. میتوانید از طریق آیدی زیر با من در ارتباط باشید:
@mrbardia72
منتظر نظرات سازندهتان هستم! 📝
🚀 اگر میخواهید به تمام کانالهای تخصصی ما بهصورت یکجا دسترسی داشته باشید، از طریق لینک زیر عضو شوید:
https://xn--r1a.website/addlist/nHHKekbfknUzMjA0
🔵 عنوان مقاله
A Preview of DuckDB v2.0 (16 minute read)
🟢 خلاصه مقاله:
نسخه آینده DuckDB، یعنی نسخه ۲.۰، تحولی بزرگ در پلتفرم این پایگاه داده ایجاد میکند. در این نسخه، امکانات متنوعی افزوده شده است که امکانات اولیه و پایهای آن را به سطحی جدید میرساند. یکی از مهمترین بهروزرسانیها، امکان عملیات کلاینتسروری است که به کاربران اجازه میدهد تا از راه دور و در محیطهای توزیعشده به پایگاه داده متصل شوند و از امکانات آن بهرهمند گردند. علاوه بر این، ابزارهای جدیدی چون تریگرها به این نسخه اضافه شده است که کنترل دقیقتر و خودکارتر عملیاتهای داخل پایگاه داده را ممکن میسازد و سطح هوشمندی سیستم را افزایش میدهد.
یکی دیگر از ویژگیهای برجسته، پشتیبانی کامل از دادههای نیمهساختاری مانند نوع "VARIANT" است که امکان کار با دادههای متنوع و غیرساختاری را به شکل بهتر و مؤثرتری فراهم میکند. این قابلیت، کار با دادههای پیچیدهتر و غنیتر را در دنیای واقعی آسانتر میسازد. علاوه بر آن، در بخش ورودی و خروجی، از I/O ناهمزمان بهرهگیری شده است تا عملیاتها سریعتر و کارآمدتر انجام شوند و پاسخدهی سیستم به درخواستها بهبود یابد.
نسخه جدید همچنین یک پارسر SQL کاملاً جدید دارد که به بهبود عملکرد تفسیر و اجرای دستورات SQL کمک میکند، و در نتیجه، سرعت و کارایی کلی سیستم ارتقا یافته است. بهبودهای عمده در بخش ذخیرهسازی و اجرای کوئریها، باعث شده تا DuckDB توانایی پردازش حجم زیادی از دادهها را سریعتر و موثرتر داشته باشد، مخصوصاً در محیطهای حجیم و پیچیده. این تغییرات، DuckDB را برای کارهای تراکنشی بلندمدت و طولانیتر نیز بسیار مقاومتر و مطمئنتر میکند.
علاوه بر این، توسعه و نگهداری افزونهها در این نسخه آسانتر شده است؛ به طوری که توسعهدهندگان میتوانند افزونههای جدید را با سهولت بیشتری ساخته، توزیع و سازگاری با نسخههای مختلف سیستم را حفظ کنند. این تحولات کلی نشان میدهد که DuckDB در مسیر تبدیل شدن به یک پلتفرم جامع و بروزرسانی شده قرار دارد، که تمامی نیازهای امروزی کاربران و توسعهدهندگان را در زمینه بانکهای اطلاعاتی برآورده میکند.
#پایگاه_داده #DuckDB #برنامه_نویسی #توسعه
🟣لینک مقاله:
https://duckdb.org/2026/08/17/duckdb-20-highlights?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
A Preview of DuckDB v2.0 (16 minute read)
🟢 خلاصه مقاله:
نسخه آینده DuckDB، یعنی نسخه ۲.۰، تحولی بزرگ در پلتفرم این پایگاه داده ایجاد میکند. در این نسخه، امکانات متنوعی افزوده شده است که امکانات اولیه و پایهای آن را به سطحی جدید میرساند. یکی از مهمترین بهروزرسانیها، امکان عملیات کلاینتسروری است که به کاربران اجازه میدهد تا از راه دور و در محیطهای توزیعشده به پایگاه داده متصل شوند و از امکانات آن بهرهمند گردند. علاوه بر این، ابزارهای جدیدی چون تریگرها به این نسخه اضافه شده است که کنترل دقیقتر و خودکارتر عملیاتهای داخل پایگاه داده را ممکن میسازد و سطح هوشمندی سیستم را افزایش میدهد.
یکی دیگر از ویژگیهای برجسته، پشتیبانی کامل از دادههای نیمهساختاری مانند نوع "VARIANT" است که امکان کار با دادههای متنوع و غیرساختاری را به شکل بهتر و مؤثرتری فراهم میکند. این قابلیت، کار با دادههای پیچیدهتر و غنیتر را در دنیای واقعی آسانتر میسازد. علاوه بر آن، در بخش ورودی و خروجی، از I/O ناهمزمان بهرهگیری شده است تا عملیاتها سریعتر و کارآمدتر انجام شوند و پاسخدهی سیستم به درخواستها بهبود یابد.
نسخه جدید همچنین یک پارسر SQL کاملاً جدید دارد که به بهبود عملکرد تفسیر و اجرای دستورات SQL کمک میکند، و در نتیجه، سرعت و کارایی کلی سیستم ارتقا یافته است. بهبودهای عمده در بخش ذخیرهسازی و اجرای کوئریها، باعث شده تا DuckDB توانایی پردازش حجم زیادی از دادهها را سریعتر و موثرتر داشته باشد، مخصوصاً در محیطهای حجیم و پیچیده. این تغییرات، DuckDB را برای کارهای تراکنشی بلندمدت و طولانیتر نیز بسیار مقاومتر و مطمئنتر میکند.
علاوه بر این، توسعه و نگهداری افزونهها در این نسخه آسانتر شده است؛ به طوری که توسعهدهندگان میتوانند افزونههای جدید را با سهولت بیشتری ساخته، توزیع و سازگاری با نسخههای مختلف سیستم را حفظ کنند. این تحولات کلی نشان میدهد که DuckDB در مسیر تبدیل شدن به یک پلتفرم جامع و بروزرسانی شده قرار دارد، که تمامی نیازهای امروزی کاربران و توسعهدهندگان را در زمینه بانکهای اطلاعاتی برآورده میکند.
#پایگاه_داده #DuckDB #برنامه_نویسی #توسعه
🟣لینک مقاله:
https://duckdb.org/2026/08/17/duckdb-20-highlights?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
DuckDB
A Preview of DuckDB v2.0
DuckDB v2.0 is coming this fall. In this post, we preview its headline features: DuckDB as a server, triggers, the VARIANT type, asynchronous I/O, a new SQL parser, a new storage format, and much more.
🔵 عنوان مقاله
Agentic Transaction: Towards ACID-Compliant Agent Systems (22 minute read)
🟢 خلاصه مقاله:
در مطالعهای جدید، محققان مفهومی نوآورانه را معرفی کردهاند که دنیای هوش مصنوعی و سیستمهای عاملی را به سمت اطمینان و پردازشهای قابل اعتماد هدایت میکند. در این رویکرد، مفهوم «معاملهگرایانه فعال» یا «Agentic Transaction» پذیرفته شده است؛ روشی که ویژگیهای تراکنشهای بانکها و سیستمهای مدیریت دادههای سنتی را به عاملهای هوشمند تعمیم میدهد. هدف اصلی این رویکرد این است که عملیاتهای چندمرحلهای در سیستمهای هوشمند، مانند اتخاذ تصمیمات پیچیده و پردازشهای چندمرحلهای، به صورت تراکنشهایی شبیهسازی شوند که قبل از تثبیت نتایج، یک فرآیند اعتبارسنجی کامل را طی میکنند.
در این مدل، همه فعالیتهای عاملهای هوشمند به گونهای طراحی شدهاند که در صورت وقوع خطا یا شکست، بتوان آنها را به حالت قبل از شروع برگرداند، دقیقا مانند تراکنشهای بانکها که در صورت مشکل، تمامی تغییرات ناپایدار لغو میشوند. علاوه بر این، این سیستمها قادرند تغییرات موثر و مهم را حفظ کرده و در صورت نیاز، آنها را دائمی و مقاوم نگه دارند، تا هرگونه نقص یا مشکل در حین عملیات، اثری بر عملکرد کلی نداشته باشد. به عبارتی دیگر، این رویکرد، هدایت و کنترل دقیق بر روند فعالیتهای عاملها را تضمین میکند و نظم و امنیت عملیات را در سیستمهای هوشمند بالا میبرد.
در آزمایشهای مقایسهای اخیر، پیادهسازی این معماری مبتنی بر ویژگیهای ACID که در مدیریت پایگاه دادهها مورد استفاده قرار میگیرند، نشان داد که عاملهای هوشمند با رعایت این استانداردها، نسبت به نمونههای معمول، تا ۱۰.۶ درصد در اجرای وظایف نسبتاً پیچیده، بهبود عملکرد داشتند. این نتایج نشان میدهد که معماریهایی متمرکز بر قابلیت اطمینان و صحت، همانند مقیاس و قدرت مدل، میتواند نقش حیاتی در توسعه عاملهای هوشمند ایفا کند؛ طوری که اعتمادپذیری و کارایی در پروژههای هوشمند، اهمیت هر چه بیشتری پیدا کند و توسعه سیستمهای عامل، بیش از پیش بر اصول استوار و مقاوم بنا شود.
در نتیجه، به نظر میرسد آینده سیستمهای عامل هوشمند، بیش از صرفاً قدرت محاسباتی و ظرفیتهای مدل، نیازمند ساختارهایی باشد که تمرکز آنها بر حفاظت، اطمینان و قابلیت اطمینان باشد. این رویکرد نوآورانه، میتواند راهگشای ساخت سیستمهایی باشد که نه تنها هوشمندانه عمل میکنند، بلکه در عین حال، در مواجهه با خطاها و ناپایدارهای احتمالی، مقاومت و پایداری لازم را دارند و اعتماد کاربران به فناوریهای هوشمند را تقویت میکنند.
#عامل_هوشمند #تراکنش_پذیری #امنیت_سیستم #هوش_مصنوعی
🟣لینک مقاله:
https://arxiv.org/html/2608.13900v1?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Agentic Transaction: Towards ACID-Compliant Agent Systems (22 minute read)
🟢 خلاصه مقاله:
در مطالعهای جدید، محققان مفهومی نوآورانه را معرفی کردهاند که دنیای هوش مصنوعی و سیستمهای عاملی را به سمت اطمینان و پردازشهای قابل اعتماد هدایت میکند. در این رویکرد، مفهوم «معاملهگرایانه فعال» یا «Agentic Transaction» پذیرفته شده است؛ روشی که ویژگیهای تراکنشهای بانکها و سیستمهای مدیریت دادههای سنتی را به عاملهای هوشمند تعمیم میدهد. هدف اصلی این رویکرد این است که عملیاتهای چندمرحلهای در سیستمهای هوشمند، مانند اتخاذ تصمیمات پیچیده و پردازشهای چندمرحلهای، به صورت تراکنشهایی شبیهسازی شوند که قبل از تثبیت نتایج، یک فرآیند اعتبارسنجی کامل را طی میکنند.
در این مدل، همه فعالیتهای عاملهای هوشمند به گونهای طراحی شدهاند که در صورت وقوع خطا یا شکست، بتوان آنها را به حالت قبل از شروع برگرداند، دقیقا مانند تراکنشهای بانکها که در صورت مشکل، تمامی تغییرات ناپایدار لغو میشوند. علاوه بر این، این سیستمها قادرند تغییرات موثر و مهم را حفظ کرده و در صورت نیاز، آنها را دائمی و مقاوم نگه دارند، تا هرگونه نقص یا مشکل در حین عملیات، اثری بر عملکرد کلی نداشته باشد. به عبارتی دیگر، این رویکرد، هدایت و کنترل دقیق بر روند فعالیتهای عاملها را تضمین میکند و نظم و امنیت عملیات را در سیستمهای هوشمند بالا میبرد.
در آزمایشهای مقایسهای اخیر، پیادهسازی این معماری مبتنی بر ویژگیهای ACID که در مدیریت پایگاه دادهها مورد استفاده قرار میگیرند، نشان داد که عاملهای هوشمند با رعایت این استانداردها، نسبت به نمونههای معمول، تا ۱۰.۶ درصد در اجرای وظایف نسبتاً پیچیده، بهبود عملکرد داشتند. این نتایج نشان میدهد که معماریهایی متمرکز بر قابلیت اطمینان و صحت، همانند مقیاس و قدرت مدل، میتواند نقش حیاتی در توسعه عاملهای هوشمند ایفا کند؛ طوری که اعتمادپذیری و کارایی در پروژههای هوشمند، اهمیت هر چه بیشتری پیدا کند و توسعه سیستمهای عامل، بیش از پیش بر اصول استوار و مقاوم بنا شود.
در نتیجه، به نظر میرسد آینده سیستمهای عامل هوشمند، بیش از صرفاً قدرت محاسباتی و ظرفیتهای مدل، نیازمند ساختارهایی باشد که تمرکز آنها بر حفاظت، اطمینان و قابلیت اطمینان باشد. این رویکرد نوآورانه، میتواند راهگشای ساخت سیستمهایی باشد که نه تنها هوشمندانه عمل میکنند، بلکه در عین حال، در مواجهه با خطاها و ناپایدارهای احتمالی، مقاومت و پایداری لازم را دارند و اعتماد کاربران به فناوریهای هوشمند را تقویت میکنند.
#عامل_هوشمند #تراکنش_پذیری #امنیت_سیستم #هوش_مصنوعی
🟣لینک مقاله:
https://arxiv.org/html/2608.13900v1?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
🔵 عنوان مقاله
Behind the Scenes: Evolving Netflix's Ads Event Pipeline for Live (11 minute read)
🟢 خلاصه مقاله:
در پشت صحنه، نتفلیکس اقدام به بازطراحی خط لوله رویدادهای تبلیغاتی زنده خود کرده است. این تغییرات به منظور بهبود عملکرد و کارایی در مدیریت تبلیغات در حالت پویای زنده صورت گرفته است. در نسخه جدید، نتفلیکس از بستر Apache Flink بهرهمند شده که این پلتفرم امکان پردازش رویدادهای با حجم بالا و زمان حساس را فراهم میکند و توانمندیهای پیشرفتهای در این حوزه ارائه میدهد.
یکی از نکات برجسته در این بازطراحی این است که فرآیند غنیسازی متادیتا، که پیشتر جزو مسیر بحرانی عرضه تبلیغات محسوب میشد، از زنجیره اصلی و بحرانی سرویس تبلیغات خارج شده و به بخش پیوستنهای استریم حالتمند منتقل شده است. این تغییر باعث شده تا سرعت و استحکام سیستم در مقابل رویدادهای ناگهانی و دیررس افزایش پیدا کند و فرآیندهای پردازش بهتر و با دقت بیشتری انجام شوند.
در نتیجه، طراحی جدید قابلیت مسیریابی بر اساس منطقه جغرافیایی، مدیریت رویدادهای دیررس، بازیابی در فواصل ساعتی با بهرهگیری از Spark، حذف تکراریهای بدون تلاش کامل و تایید صحت عملیات با استفاده از دو مرحله اعتبارسنجی را دارد. این ویژگیها سبب شده است که توافق نهایی در حدود ۹۹.۹۹٪ قبل از کنار گذاشتن سیستم قدیمی، حاصل شود و اطمینان از عملیات بینقص، حفظ گردد.
این تحول نشاندهنده تمرکز نتفلیکس بر بهبود مستمر در زیرساختهای تبلیغاتی و استفاده از فناوریهای نوین جهت ارائه تجربه بهتر به کاربران و تبلیغدهندگان است. پیادهسازی این سیستم، نمونهای از تطابق فناوری با نیازهای روزافزون در عرصه استریم و تبلیغات زنده است که میتواند راهگشای مسیرهای نوین در صنعت باشد.
#نتفلیکس #تبلیغات_زنده #فناوری_پایدار #ApacheFlink
🟣لینک مقاله:
https://netflixtechblog.medium.com/behind-the-scenes-evolving-netflixs-ads-event-pipeline-for-live-part-ii-826ebf9ad9fb?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Behind the Scenes: Evolving Netflix's Ads Event Pipeline for Live (11 minute read)
🟢 خلاصه مقاله:
در پشت صحنه، نتفلیکس اقدام به بازطراحی خط لوله رویدادهای تبلیغاتی زنده خود کرده است. این تغییرات به منظور بهبود عملکرد و کارایی در مدیریت تبلیغات در حالت پویای زنده صورت گرفته است. در نسخه جدید، نتفلیکس از بستر Apache Flink بهرهمند شده که این پلتفرم امکان پردازش رویدادهای با حجم بالا و زمان حساس را فراهم میکند و توانمندیهای پیشرفتهای در این حوزه ارائه میدهد.
یکی از نکات برجسته در این بازطراحی این است که فرآیند غنیسازی متادیتا، که پیشتر جزو مسیر بحرانی عرضه تبلیغات محسوب میشد، از زنجیره اصلی و بحرانی سرویس تبلیغات خارج شده و به بخش پیوستنهای استریم حالتمند منتقل شده است. این تغییر باعث شده تا سرعت و استحکام سیستم در مقابل رویدادهای ناگهانی و دیررس افزایش پیدا کند و فرآیندهای پردازش بهتر و با دقت بیشتری انجام شوند.
در نتیجه، طراحی جدید قابلیت مسیریابی بر اساس منطقه جغرافیایی، مدیریت رویدادهای دیررس، بازیابی در فواصل ساعتی با بهرهگیری از Spark، حذف تکراریهای بدون تلاش کامل و تایید صحت عملیات با استفاده از دو مرحله اعتبارسنجی را دارد. این ویژگیها سبب شده است که توافق نهایی در حدود ۹۹.۹۹٪ قبل از کنار گذاشتن سیستم قدیمی، حاصل شود و اطمینان از عملیات بینقص، حفظ گردد.
این تحول نشاندهنده تمرکز نتفلیکس بر بهبود مستمر در زیرساختهای تبلیغاتی و استفاده از فناوریهای نوین جهت ارائه تجربه بهتر به کاربران و تبلیغدهندگان است. پیادهسازی این سیستم، نمونهای از تطابق فناوری با نیازهای روزافزون در عرصه استریم و تبلیغات زنده است که میتواند راهگشای مسیرهای نوین در صنعت باشد.
#نتفلیکس #تبلیغات_زنده #فناوری_پایدار #ApacheFlink
🟣لینک مقاله:
https://netflixtechblog.medium.com/behind-the-scenes-evolving-netflixs-ads-event-pipeline-for-live-part-ii-826ebf9ad9fb?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Medium
Behind the Scenes: Evolving Netflix’s Ads Event Pipeline for Live — Part II
By Yogesh Nagarur
🔵 عنوان مقاله
DFlash 2: Keep Drafting Parallel (10 minute read)
🟢 خلاصه مقاله:
در دفلش ۲، فرآیند رمزگشایی تئوری بسیار بهبود یافته است. این فناوری اجازه میدهد که فرآیند پیشبینی و رمزگشایی مدلهای زبانی بزرگ (LLM) بسیار سریعتر انجام شود، به طوری که تخمین زده میشود سرعت استنتاج آن حدود سه برابر افزایش یافته است. یکی از اصلیترین ویژگیهای این فناوری، توانایی پذیرش تعداد بیشتری توکن در هر بار پردازش است، در حالی که نتیجه نهایی و خروجی مدل دستنخورده باقی میماند. این یعنی زمان مورد نیاز برای تولید متن کاهش یافته است، بدون این که کیفیت یا دقت نتایج کاهش یابد یا تفاوتی در خروجی نهایی ایجاد شود.
این پیشرفت، به ویژه در کاربردهای عملی و اجرایی، کارایی و سرعت سیستمهای مبتنی بر هوش مصنوعی را به شدت ارتقاء میدهد. میتوان تصور کرد که در آینده، این فناوری امکان پاسخدهی سریعتر در چتباتها، ترجمههای فوری و دیگر برنامههای زبانی را فراهم کند و دقت و کارایی این سیستمها را به طور چشمگیری افزایش دهد. بنابراین، دفلش ۲ نه تنها یک بهبود فنی است، بلکه در راستای تسهیل و بهبود تجربه کاربری نهایی نقش مهمی ایفا میکند.
در نتیجه، توسعه این فناوری گامی مهم در مسیر بهبود سرعت و بهرهوری مدلهای زبانی بزرگ است و میتواند تاثیر زیادی بر توسعه کاربردهای هوشمند و افزایش بهرهوری در صنعت فناوری داشته باشد.
#هوش_مصنوعی #یادگیری_ماشین #تکنولوژی_پیشرفته #مدل_زبانی
🟣لینک مقاله:
https://inco.ai/blog/dflash2/?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
DFlash 2: Keep Drafting Parallel (10 minute read)
🟢 خلاصه مقاله:
در دفلش ۲، فرآیند رمزگشایی تئوری بسیار بهبود یافته است. این فناوری اجازه میدهد که فرآیند پیشبینی و رمزگشایی مدلهای زبانی بزرگ (LLM) بسیار سریعتر انجام شود، به طوری که تخمین زده میشود سرعت استنتاج آن حدود سه برابر افزایش یافته است. یکی از اصلیترین ویژگیهای این فناوری، توانایی پذیرش تعداد بیشتری توکن در هر بار پردازش است، در حالی که نتیجه نهایی و خروجی مدل دستنخورده باقی میماند. این یعنی زمان مورد نیاز برای تولید متن کاهش یافته است، بدون این که کیفیت یا دقت نتایج کاهش یابد یا تفاوتی در خروجی نهایی ایجاد شود.
این پیشرفت، به ویژه در کاربردهای عملی و اجرایی، کارایی و سرعت سیستمهای مبتنی بر هوش مصنوعی را به شدت ارتقاء میدهد. میتوان تصور کرد که در آینده، این فناوری امکان پاسخدهی سریعتر در چتباتها، ترجمههای فوری و دیگر برنامههای زبانی را فراهم کند و دقت و کارایی این سیستمها را به طور چشمگیری افزایش دهد. بنابراین، دفلش ۲ نه تنها یک بهبود فنی است، بلکه در راستای تسهیل و بهبود تجربه کاربری نهایی نقش مهمی ایفا میکند.
در نتیجه، توسعه این فناوری گامی مهم در مسیر بهبود سرعت و بهرهوری مدلهای زبانی بزرگ است و میتواند تاثیر زیادی بر توسعه کاربردهای هوشمند و افزایش بهرهوری در صنعت فناوری داشته باشد.
#هوش_مصنوعی #یادگیری_ماشین #تکنولوژی_پیشرفته #مدل_زبانی
🟣لینک مقاله:
https://inco.ai/blog/dflash2/?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
inco.ai
DFlash 2: Keep Drafting Parallel
DFlash 2 is the successor to our widely deployed parallel drafter: close to 3× the speed of autoregressive decoding, with the same output. Drafters for Qwen3.8-27B and Meta's Muse Glimmer are out today.
🔵 عنوان مقاله
Software engineering at a proprietary trading company: Optiver (17 minute read)
🟢 خلاصه مقاله:
شرکت نهادهای تجاری اختصاصی، مانند اوتیور، نمونهای بارز از نحوه تأثیر مستقیم فناوری بر سود و زیان در صنعت مالی است. سیستم این شرکت، نشاندهنده ارتباط مستقیم میان کاهش تأخیر، افزایش قابلیت اطمینان و کیفیت یادگیری ماشین با موفقیتهای مالی است. تیمهای فنی این شرکت، که حدود ۹۵۰ مهندس را شامل میشوند، روزانه بیش از ۱۰ میلیون معامله در بازارهای مختلف انجام میدهند. این عملیات گسترده روی زیرساختی متنوع صورت میگیرد که شامل زبانهای برنامهنویسی قدرتمندی مانند C++، Python، Rust، سیستمهای پیامرسان Kafka، پایگاه دادههای Postgres، پلتفرمهای پردازش داده مانند Databricks، هستههای لینوکس سفارشی و سختافزارهای مستقر در مکانهای مختلف است.
در این فضای فناوری، رویکرد اصلی بر مالکیت عمیق و کامل زیرساختها استوار است، نه تنها تمرکز بر سرعتگذاری سطحی. این فرهنگ باعث شده است که هر بخش، به صورت تخصصی و جامع در توسعه و نگهداری زیرساختهای مورد نیاز خود نقش داشته باشد. نتیجهاش سیستمهایی کارآمد و مقاوم است که توانایی پاسخگویی به نیازهای پیچیده معاملات مالی را دارند. در نتیجه، حافظههای فنی و فناوری این شرکت نشاندهنده تعهد به ساختارهای مستحکم و بهبود مستمر است که در نهایت سودآوری و پایداری کسبوکار را تضمین میکند.
#فناوری #هوش_مصنوعی #تجارت_رایانهای #زیرساخت
🟣لینک مقاله:
https://newsletter.pragmaticengineer.com/p/optiver?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Software engineering at a proprietary trading company: Optiver (17 minute read)
🟢 خلاصه مقاله:
شرکت نهادهای تجاری اختصاصی، مانند اوتیور، نمونهای بارز از نحوه تأثیر مستقیم فناوری بر سود و زیان در صنعت مالی است. سیستم این شرکت، نشاندهنده ارتباط مستقیم میان کاهش تأخیر، افزایش قابلیت اطمینان و کیفیت یادگیری ماشین با موفقیتهای مالی است. تیمهای فنی این شرکت، که حدود ۹۵۰ مهندس را شامل میشوند، روزانه بیش از ۱۰ میلیون معامله در بازارهای مختلف انجام میدهند. این عملیات گسترده روی زیرساختی متنوع صورت میگیرد که شامل زبانهای برنامهنویسی قدرتمندی مانند C++، Python، Rust، سیستمهای پیامرسان Kafka، پایگاه دادههای Postgres، پلتفرمهای پردازش داده مانند Databricks، هستههای لینوکس سفارشی و سختافزارهای مستقر در مکانهای مختلف است.
در این فضای فناوری، رویکرد اصلی بر مالکیت عمیق و کامل زیرساختها استوار است، نه تنها تمرکز بر سرعتگذاری سطحی. این فرهنگ باعث شده است که هر بخش، به صورت تخصصی و جامع در توسعه و نگهداری زیرساختهای مورد نیاز خود نقش داشته باشد. نتیجهاش سیستمهایی کارآمد و مقاوم است که توانایی پاسخگویی به نیازهای پیچیده معاملات مالی را دارند. در نتیجه، حافظههای فنی و فناوری این شرکت نشاندهنده تعهد به ساختارهای مستحکم و بهبود مستمر است که در نهایت سودآوری و پایداری کسبوکار را تضمین میکند.
#فناوری #هوش_مصنوعی #تجارت_رایانهای #زیرساخت
🟣لینک مقاله:
https://newsletter.pragmaticengineer.com/p/optiver?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Pragmaticengineer
Software engineering at a proprietary trading company: Optiver
A shift from a focus on latency to building better AI models, owning the full stack from applications to building custom hardware, very different incentives to most tech companies in play, and more
🔵 عنوان مقاله
Massively parallel Postgres backups (7 minute read)
🟢 خلاصه مقاله:
در دنیای مدیریت پایگاههای داده، بکاپگیری سریع و مطمئن همواره یکی از چالشهای مهم محسوب میشود. اخیراً، طراحی جدید PlanetScale برای بکاپگیری از پایگاه دادههای پستگرس به صورت همزمان و موازی تحولی بزرگ در این حوزه ایجاد کرده است. این سیستم، هر بخش (شارد) از پایگاه داده را به عنوان یک عامل مستقل در نظر میگیرد که وظیفه دارد نسخهی پشتیبان سالم، کامل و سریع را بازیابی کند. در واقع، هر شارد به عنوان یک نیروی مجزا عمل میکند که میتواند عملیات بازسازی، بازیابی از S3، تکرار WAL و تثبیت یک نقطهی زمانی معین را به صورت همزمان انجام دهد. این رویکرد باعث شده فرآیند بکاپگیری چندین برابر سریعتر و کارآمدتر باشد، تا جایی که زمان لازم برای تهیه یک نسخه کامل در عرض چند دقیقه کاهش یافته است.
این طراحی نوآورانه با بهرهگیری از مفهوم تقسیم وظایف، امکان انجام عملیاتهای همزمان را فراهم میآورد. هر شارد به صورت همزمان میتواند عملیات بازیابی، تکرار لاگ تراکنشهای WAL و تثبیت دادهها را انجام دهد، بدون اینکه تأثیر منفی بر روی سایر بخشها داشته باشد. نتیجه این است که تهیه نسخه پشتیبان کامل و سازگار، در کوتاهترین زمان ممکن انجام میشود، که این موضوع برای کسبوکارهای حساس به زمان و نیازمند بازیابی سریع بسیار حیاتی است. این رویکرد انقلابی در طراحیهای مرسوم، پتانسیل تغییر شیوهی مدیریت و نگهداری نسخههای پشتیبان را دارد و به مدیران دادهها امکان میدهد انعطافپذیری و ضریب اطمینان بیشتری در عملیاتهای بکاپگیری داشته باشند.
در کل، این فناوری، که به صورت موازی و همزمان عملیات بازیابی را انجام میدهد، نه تنها زمان مورد نیاز برای بکاپگیری را به شدت کاهش میدهد، بلکه سطح اطمینان و صحت دادهها را نیز افزایش میدهد. پیادهسازی چنین سیستمی به نقل قول، نشاندهندهی پیشرفتهای قابل توجه در حوزه فناوریهای مدیریت پایگاه داده است که میتواند تاثیرات بلندمدتی در بهرهوری و امنیت دادهها داشته باشد.
#پایگاه_داده #پستگرس #بکاپ_پیشنهاد_موازی #مدیریت_پایگاه
🟣لینک مقاله:
https://planetscale.com/blog/massively-parallel-postgres-backups?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Massively parallel Postgres backups (7 minute read)
🟢 خلاصه مقاله:
در دنیای مدیریت پایگاههای داده، بکاپگیری سریع و مطمئن همواره یکی از چالشهای مهم محسوب میشود. اخیراً، طراحی جدید PlanetScale برای بکاپگیری از پایگاه دادههای پستگرس به صورت همزمان و موازی تحولی بزرگ در این حوزه ایجاد کرده است. این سیستم، هر بخش (شارد) از پایگاه داده را به عنوان یک عامل مستقل در نظر میگیرد که وظیفه دارد نسخهی پشتیبان سالم، کامل و سریع را بازیابی کند. در واقع، هر شارد به عنوان یک نیروی مجزا عمل میکند که میتواند عملیات بازسازی، بازیابی از S3، تکرار WAL و تثبیت یک نقطهی زمانی معین را به صورت همزمان انجام دهد. این رویکرد باعث شده فرآیند بکاپگیری چندین برابر سریعتر و کارآمدتر باشد، تا جایی که زمان لازم برای تهیه یک نسخه کامل در عرض چند دقیقه کاهش یافته است.
این طراحی نوآورانه با بهرهگیری از مفهوم تقسیم وظایف، امکان انجام عملیاتهای همزمان را فراهم میآورد. هر شارد به صورت همزمان میتواند عملیات بازیابی، تکرار لاگ تراکنشهای WAL و تثبیت دادهها را انجام دهد، بدون اینکه تأثیر منفی بر روی سایر بخشها داشته باشد. نتیجه این است که تهیه نسخه پشتیبان کامل و سازگار، در کوتاهترین زمان ممکن انجام میشود، که این موضوع برای کسبوکارهای حساس به زمان و نیازمند بازیابی سریع بسیار حیاتی است. این رویکرد انقلابی در طراحیهای مرسوم، پتانسیل تغییر شیوهی مدیریت و نگهداری نسخههای پشتیبان را دارد و به مدیران دادهها امکان میدهد انعطافپذیری و ضریب اطمینان بیشتری در عملیاتهای بکاپگیری داشته باشند.
در کل، این فناوری، که به صورت موازی و همزمان عملیات بازیابی را انجام میدهد، نه تنها زمان مورد نیاز برای بکاپگیری را به شدت کاهش میدهد، بلکه سطح اطمینان و صحت دادهها را نیز افزایش میدهد. پیادهسازی چنین سیستمی به نقل قول، نشاندهندهی پیشرفتهای قابل توجه در حوزه فناوریهای مدیریت پایگاه داده است که میتواند تاثیرات بلندمدتی در بهرهوری و امنیت دادهها داشته باشد.
#پایگاه_داده #پستگرس #بکاپ_پیشنهاد_موازی #مدیریت_پایگاه
🟣لینک مقاله:
https://planetscale.com/blog/massively-parallel-postgres-backups?utm_source=tldrdata
➖➖➖➖➖➖➖➖
👑 @Database_Academy
Planetscale
Massively parallel Postgres backups — PlanetScale
PlanetScale backs up petabyte-scale sharded Postgres databases in hours using parallel infrastructure, object storage, and WAL replay.