💻 Scrapling — парсим весь интернет в один клик

Не просто ещё одна Python-библиотека для парсинга страниц. Это — адаптивная экосистема, которая не ломается от первого же апдейта сайта и умеет самостоятельно находить ваши данные, даже если структура DOM поменялась.

🚫 Забудьте про бесконечный ребейз селекторов, бессмысленные переписывания парсеров и костыли на продакшене.

Scrapling — это:
✔️ Python-фреймворк от одного запроса до масштабного краулера.
✔️ Адаптивный парсер, который «понимает» изменения DOM.
✔️ Мощный набор инструментов для обхода анти-бота и динамического контента.
✔️ Библиотека, которую можно запустить в пару строк кода и она работает.

⚙️ Простая установка:

pip install scrapling

😰 Минимальный пример на Python

from scrapling.fetchers import StealthyFetcher

page = StealthyFetcher.fetch("https://example.com", headless=True)
titles = page.css(".post-title", adaptive=True).getall()
print(titles)

🪄 Адаптивные селекторы

Scrapling может обучить ваш парсер тому, как выглядят нужные элементы, и повторно находить их, даже если сайт их перемещает или перестраивает.

🕸 Обход анти-ботов и динамики

Умеет обходить защиту сайтов (например, Cloudflare Turnstile) из коробки, а также загружать страницы через полноценный браузер (Playwright).

⚡️ Spider-фреймворк с паузами/возобновлением

Может работать как полноценный краулер с:
* параллельными сессиями
* автоматической ротацией прокси
* возможностью паузы и продолжения
* статистикой в реальном времени — и всё это без тонны кода.

♎️ GitHub/Инструкция

#python #soft #github

💻 Antidetect Tools — полный арсенал для анонимного серфинга.

Если ты хоть раз сталкивался с антибот-системами или жёсткими проверками сайтов, то знаешь: обычных прокси или квн* будет маловато.

Здесь нужны настоящие инструменты антидетекта, которые маскируют твои действия под человека.

В этом репозитории собраны лучшие ресурсы:

🖥 Anti-detect браузеры — меняй отпечатки как перчатки.
📚 Библиотеки для антидетекта — интеграция прямо в код.
👊 Humanizing — эмуляция реального поведения.
🔐 Капча-решатели — обходи самые надоедливые проверки.
📲 SMS-сервисы для подтверждений.
🌍 Прокси для смены IP.
⚡️ Практические советы по антидетекту.

🔗 Репозиторий

Must-have подборка для ресёрча, тестирования и повышения приватности.

Сохраняй, чтобы не потерять 💾

#soft #github #pentest

📦 PDF-Extract-Kit — инструмент, который превращает хаотичные PDF в аккуратные структурированные данные.

🧾 Вытаскивает таблицы в нормальный табличный формат.
🔢 Отдельно извлекает цифры, поля, блоки.
📝 Парсит текст с сохранением структуры.
📊 Работает даже с «кривыми» сканами и сложной вёрсткой.
🧠 Понимает layout документа, а не просто OCR-ит его.

По сути — превращает PDF в чистые JSON / структурированные данные для дальнейшей обработки.

Где пригодится:

🟢Студенты
Быстро вытаскивают таблицы, цитаты и списки литературы из научных статей.
🟢Офис/фриланс
Счета, договоры, акты, анкеты — вместо ручного копирования получаешь структурированные данные.
🟢Аналитика
Можно автоматически забирать цифры из отчётов и загружать в свои системы.

💬 Прогнал через модель и получил чистую структуру.

⬇️ Сохраняем и пробуем

#python #soft #github

🔥 Сотни БЕСПЛАТНЫХ API с доступом к топовым нейросетям — без танцев с бубном и подписок

modelscope — площадка, где можно получить доступ к различным моделям от текста до видео — через API.

Причём ко многим бесплатно.

🚀 Внутри:

* DeepSeek — текст и код;
* Qwen-Image — генерация изображений;
* MiniMax — мультимодальные модели;
* и ещё сотни других.

Всего — около 400 моделей с API-доступом.

🟢Генерация текста.
🟢Создание изображений.
🟢Видео-модели.
🟢Синтез речи и звука.
🟢Мультимодальные пайплайны.

По сути — готовый полигон для экспериментов, стартапов и pet-проектов.

📝 У каждой модели есть описание, документация, удобная фильтрация. Можно сразу тестировать.

Чтобы найти модели с API:

1. Заходишь на сайт
2. Открываешь раздел Models
3. Включаешь фильтр API-Inference

И получаешь список моделей, которые можно дергать через API.

🤖 Если ты работаешь с ИИ, пишешь ботов или делаешь контент — это буквально бесплатный трамплин в продакшн.

👍 Сохраняем и пробуем ТУТ

#soft #нейросеть #nn

✈️ Автоматизируем почтовую рассылку с Python

💬 Отправка писем.
💬 Вложения (PDF, сертификаты, отчёты).
💬 Для массовой рассылки.
💬 Отправка по расписанию.

😰 Один скрипт — и ты превращаешься в машину массовой отправки.

Особенно полезно, если:
🟢рассылаешь коммерческие предложения;
🟢отправляешь отчёты клиентам;
🟢делаешь уведомления;
🟢запускаешь email-маркетинг;
🟢автоматизируешь внутренние процессы.

1. Создай recipients.txt:

a@site.com
b@site.com
c@site.com

2. Запусти скрипт — он будет ждать времени и отправлять.

Готовый код 👇

#python #soft #code

✈️ Автоматизируем почтовую рассылку с Python

#python #soft #code

⚡️ Fara-7B — компактную агентная модель от Microsoft, которая не просто «болтает», а управляет браузером как человек.

Это не чат-бот.
Это Computer Use Agent.

🖱 Что умеет:

➡️ Видит веб-страницу визуально.
➡️ Скроллит.
➡️ Кликает по координатам.
➡️ Вводит текст.
➡️ Выполняет многошаговые задачи.

Без accessibility tree, без костылей, без отдельного парсинга DOM — модель работает через визуальное восприятие интерфейса!


💻 Можно автоматизировать:

💬 Поиск и резюмирование информации.
💬 Заполнение форм.
💬 Покупки и сравнение цен.
💬 Бронирование билетов и ресторанов.
💬 Поиск вакансий и недвижимости.

По сути — это автономный браузерный ассистент.

🟢Установка:

git clone https://github.com/microsoft/fara.git
cd fara

🟢Создаёшь окружение:

python3 -m venv .venv
source .venv/bin/activate
pip install -e .[vllm]
playwright install

🟢Запускаешь модель:

vllm serve "microsoft/Fara-7B" --port 5000 --dtype auto

🟢И тестируешь:

fara-cli --task "whats the weather in new york now"

Можно подключить к Magentic-UI и управлять через графический интерфейс.

⚠️ На Windows лучше использовать WSL2.
⚠️ Если не хватает памяти — добавь --tensor-parallel-size 2.

♎️ GitHub/Инструкция

#python #soft #github

👊 Появился почти идеальный суммаризатор для русского языка

Чувак обучил модель специально под русский язык, коротко пересказывать длинные тексты без потери смысла.

Алгоритм выжимает из документа самую суть и превращает десятки страниц в несколько абзацев — без воды и искажений.

📄 статьи
📚 большие тексты
📦 отчёты
🧾 документы

Модель спокойно прогоняет всё это через себя и выдаёт аккуратное резюме.

😰 Пример использования:

# Установим библиотеку трансформеров
!pip install transformers

# Импортируем библиотеки
from transformers import AutoModelForSeq2SeqLM, T5TokenizerFast

# Зададим название выбронной модели из хаба
MODEL_NAME = 'UrukHan/t5-russian-summarization'
MAX_INPUT = 256

# Загрузка модели и токенизатора
tokenizer = T5TokenizerFast.from_pretrained(MODEL_NAME)
model = AutoModelForSeq2SeqLM.from_pretrained(MODEL_NAME)

# Входные данные (можно массив фраз или текст)
input_sequences = ['Тут твой текст']   # или можно использовать одиночные фразы:  input_sequences = 'сегодня хороший день'

task_prefix = "Spell correct: "                 # Токенизирование данных
if type(input_sequences) != list: input_sequences = [input_sequences]
encoded = tokenizer(
  [task_prefix + sequence for sequence in input_sequences],
  padding="longest",
  max_length=MAX_INPUT,
  truncation=True,
  return_tensors="pt",
)

predicts = model.generate(encoded)    # # Прогнозирование

tokenizer.batch_decode(predicts, skip_special_tokens=True)  # Декодируем данные

⬇️ Модель на huggingface и примеры использования

#нейросеть #python #soft

📞 pytgcalls — библиотека для работы с голосовыми чатами Telegram через Python

Позволяет управлять звонками и голосовыми чатами от имени бота или юзербота и легко встраивать эти функции в свои проекты.

Работает с популярными MTProto-клиентами:
Pyrogram, Telethon и Hydrogram, поэтому можно использовать любую удобную основу.

Что умеет:
🟢подключаться к голосовым чатам в группах и каналах,
🟢заходить в чат от имени пользователя или канала,
🟢управлять звуком — включать/выключать микрофон,
🟢ставить воспроизведение на паузу и возобновлять,
🟢запускать и останавливать аудио,
🟢регулировать громкость.

😰 Простой пример использования

from pytgcalls import PyTgCalls
from pytgcalls import idle
...
chat_id = -1001185324811
app = PyTgCalls(client)
app.start()
app.play(
    chat_id,
    'http://docs.evostream.com/sample_content/assets/sintel1m720p.mp4',
)
idle()

Также есть готовые сборки для:
🍏 macOS,
🐧Linux,
🪟 Windows,

что упрощает установку и запуск на разных платформах.

♎️ GitHub/Инструкция

#python #soft #github

💀 Инструмент для OSINT-разведки, который собирает данные из десятков открытых источников

Проект Master OSINT Toolkit — Python-набор инструментов для проведения расследований по открытым данным. Создан как удобный инструмент для исследований и помогает автоматизировать поиск информации в интернете.

Инструмент объединяет несколько направлений разведки в одном интерфейсе.

🔎 Анализ изображений и геолокации
💬 извлечение GPS-координат из EXIF-метаданных фотографий,
💬 поиск локаций через карты и спутниковые сервисы,
💬 обратный поиск изображений через поисковые системы.

📱 Поиск по социальным сетям
💬 проверка никнейма на десятках платформ,
💬 поиск информации о телефонных номерах (оператор, тип связи и другие данные).

🗳 Анализ электронной почты
💬 проверка адресов на утечки через сервис HaveIBeenPwned,
💬 верификация почты через сервисы вроде Hunter и Epieos.

🌐 Исследование доменов и IP
💬 получение WHOIS-информации,
💬 просмотр DNS-записей,
💬 поиск поддоменов,
💬 определение геолокации IP-адреса и проверка по чёрным спискам.

🖥 Архивы сайтов
💬 доступ к сохранённым версиям страниц через Wayback Machine.

🧩 Анализ сайтов
💬 сбор метаданных веб-страниц,
💬 извлечение различных объектов из сайтов.

Установка:

python3 -m venv venv
source venv/bin/activate

pip install requests beautifulsoup4 waybackpy spacy phonenumbers exifread tldextract python-whois dnspython
python -m spacy download en_core_web_sm

Запуск:

python master_osint.py

👨‍💻 По сути это универсальный набор инструментов, который объединяет несколько популярных методов разведки — от анализа изображений до проверки утечек данных — в одном месте.

♎️ GitHub/Инструкция

⚠️ Информация предоставлена исключительно с целью ознакомления. И побуждает обратить внимание на проблемы в безопасности.

😁 Админ | 📲 Max

#python #soft #github

⚡️ Энтузиасты собрали гигантский список БЕСПЛАТНЫХ API, который может прокачать почти любой проект — от стартапа до пет-проекта.

Это настоящий инструментальный арсенал, который реально экономит недели разработки и открывает кучу возможностей для автоматизации.

👨‍💻 Разработчики, стартаперы и просто автоматизаторы — забирайте в закладки.

В каталоге собраны API почти для всего:
🟢генерация текста,
🟢изображений и видео,
🟢создание презентаций,
🟢написание докладов и исследований,
🟢маркетинг,
🟢программирование,
🟢аналитика данных, работа с таблицами,
🟢голосовые сервисы, транскрибация, субтитры,
🟢майнд-карты и многое другое.

➡️Причём это не ноунейм-инструменты: в списке топовые решения от OpenRouter, Google AI Studio, NVIDIA NIM, Mistral, Groq и других крупных игроков.

➡️У каждой API сразу указаны лимиты — сколько генераций и запросов можно делать бесплатно в месяц, чтобы можно было заранее прикинуть нагрузку и масштаб проекта.

➡️Все сервисы легко встраиваются в любые проекты: чат-боты, собственные нейросети, личные ассистенты, автоматизированные контент-фабрики и другие системы.

Вся эта подборка доступна бесплатно.

👍 Сохраняем и пробуем ТУТ

😁 Админ | 📲 Max

#soft #nn #нейросеть

📸 restorePhotos — ИИ-сервис, который умеет восстанавливать старые и повреждённые фотографии с лицами.

Работает на базе модели GFPGAN, которая специально обучена реконструировать человеческие лица на снимках.

Что делает нейросеть:
🟢дорисовывает недостающие детали лица,
🟢убирает шум и артефакты,
🟢повышает резкость,
🟢восстанавливает размытые или повреждённые портреты.

В результате старые снимки буквально получают вторую жизнь.

⚙️ Пользоваться очень просто:
1. Загружаете старую фотографию.
2. Нейросеть анализирует лицо на изображении.
3. Через несколько секунд получаете восстановленную версию.

Проект полностью открытый. При желании можно развернуть локально на своём компьютере.

Инструмент отлично подходит для:
💬 восстановления семейных архивов,
💬 улучшения старых портретов,
💬 обработки размытых или повреждённых фото.

👉 Сохраняем и пробуем бесплатно ТУТ

😁 Лайв | 📲 Max

#soft #nn #нейросеть #github

💻 Wi-Fi превратили в радар: на GitHub выложили систему, которая «видит» людей через стены и даже считывает пульс

RuView — необычный open-source проект. Система, которая использует обычные Wi-Fi-сигналы как сенсор для отслеживания людей в помещении.

Алгоритм анализирует отражения Wi-Fi-сигналов от человеческого тела и по изменению этих волн восстанавливает то, что происходит в комнате — даже если человека не видно напрямую.

Что умеет система:
💬 отслеживает 17 ключевых точек позы тел;
💬 фиксирует дыхание (примерно 6–30 вдохов в минуту);
💬 измеряет пульс на расстоянии (около 40–120 BPM);
💬 может обнаруживать людей через стены, мебель и завалы на дистанции до ~5 метров;
💬 поддерживает отслеживание нескольких человек одновременно.

⚙️ Работает это так: Wi-Fi-сигналы отражаются от тела человека и немного меняются из-за:
🟢микродвижений,
🟢дыхания
🟢или сердцебиения.
Алгоритм анализирует эти изменения и восстанавливает модель происходящего в пространстве.

Кроме экспериментов, у технологии есть и практическое применение: например, поиск людей под завалами после катастроф, когда нужно определить, есть ли признаки жизни и где именно находится человек.

Проект полностью open-source, код доступен на GitHub.

♎️ GitHub/Инструкция

#soft #github

🎙 Создаём собственный голосовой рекордер на Python в несколько строк

Python + пара библиотек — и ты уже можешь записывать звук с микрофона прямо в .wav файл. Всё просто:

➡️ Вводишь количество секунд;
➡️ Нажимаешь Enter — и идёт запись;
➡️ На выходе — готовый аудиофайл, который можно использовать в проектах, видео или подкастах.

📦 Используем библиотеки:

🟢sounddevice — захват аудио
🟢scipy — для сохранения .wav файлов

⌨️ Готовый код:

python
import sounddevice as sd
from scipy.io.wavfile import write


def record_voice(duration: int, filename: str = "recording.wav", sample_rate: int = 44100) -> None:
    """
    Записывает звук с микрофона и сохраняет его в .wav файл.

    :param duration: Время записи в секундах
    :param filename: Название выходного файла
    :param sample_rate: Частота дискретизации (по умолчанию 44100 Гц)
    """
    print(f"🎙 Запись началась на {duration} секунд...")
    audio_data = sd.rec(int(duration * sample_rate), samplerate=sample_rate, channels=2)
    sd.wait()
    write(filename, sample_rate, audio_data)
    print(f"✅ Запись завершена. Файл сохранён как: {filename}")


if __name__ == "__main__":
    try:
        seconds = int(input("⏱️ Введите длительность записи в секундах: "))
        record_voice(seconds)
    except Exception as e:
        print(f"❌ Ошибка: {e}")

Такой скрипт отлично подойдёт для проектов по обработке аудио, голосовым ассистентам или даже создания простого диктофона.

🔥 Сохрани себе — пригодится!

#python #code #soft

⚡️ Жирная подборка: десятки готовых Python-скриптов, бери и используй.

Что внутри:
💬 парсеры сайтов — вытаскивай любые данные;
💬 загрузчики с соцсетей — сохраняй контент в пару строк;
💬 утилиты для анализа железа — копайся в системе как профи;
💬 сетевые инструменты и ещё куча полезного кода.

💻 Для новичка идеальный старт — учиться на живом коде, а не на скучных примерах.
💻 Для опытного разработчика — экономить часы (и нервы), не изобретая заново.

⚙️ GitHub/Инструкция

👍 Сохраняем

😁 Лайв | 📲 Max

#python #soft #github

⚔️ Огромная база готовых промтов для Nano Banana — бери и пользуйся бесплатно

Реалистичные фото, сцены, стили(много 18+) и локации уровня «воу».

Внутри:
🖱 сотни готовых подсказок,
🖱 разные стили — от реализма до креатива,
🖱 продуманные сцены и локации,
🖱 всё можно просто скопировать и сразу использовать.

Не надо больше сидеть и придумывать промты с нуля — просто берёшь и запускаешь, работает прямо в AI Studio.

Всё аккуратно разложено:

📂 категории под любые задачи,
🔎 удобный поиск,
🚀 база постоянно пополняется новыми идеями.

🔗 Забираем бесплатно ТУТ

😁 Лайв | 📲 Max

#нейросеть #nn #soft

😎 Берем на заметку

💻 EyeOfWeb — Python инструмент, который «пробивает» человека по одному фото, без регистрации и слежки.

Локальный движок с нейронкой, который вытаскивает максимум информации по лицу.

Что умеет:

💬 внутри InsightFace — мощная нейросеть, которая разбирает лицо и ищет совпадения;
💬 сканирует тысячи изображений в сети и находит похожие лица;
💬 сам задаёшь источники — форумы, сайты, соцсети, любые базы;
💬 подключаешь поиск по метаданным — точность растёт в разы;
💬 умеет мультипоиск — находит сразу нескольких людей с одного фото.

💻 Работает даже на слабом ПК (от 8 ГБ ОЗУ).
🔐 Всё локально — никто не видит, что ты ищешь.

🔗 Документация на русском

♎️ Сохраняем и пробуем

😁 Лайв | 📲 Max

#python #soft #github

⚡️ Нейронки бесплатно? Легко. Вышел полноценный аналог хайпового агента OpenCode, который не уступает оригиналу. Репозиторий уже просто разорвало — более 127 000 звёзд от пользователей.

➡️Этот агент может закрывать задачи, на которые раньше нужна была целая команда разработчиков: от простых лендингов до сервисов со сложной бизнес-логикой.
➡️Поддерживает все топовые нейросети и работает сразу с 75 провайдерами: OpenAI, Google, Mistral, локальные модели и другими мощными решениями.
➡️Запускается прямо в терминале — без лишних установок, лаунчеров и надстроек.
➡️Управлять ИИ-агентом можно даже с телефона — буквально раздавать задачи своей “кодинг-команде”, не вставая с дивана.
➡️Работает без VPN и без ограничений.

Лютая имба!

🔗 Забираем и пробуем ТУТ

😁 Лайв | 📲 Max

#soft #github

🔥 Полезные библиотеки Python

😳 EyeGestures — управление глазами уже реальность!

Крутой open-source проект, который позволяет управлять устройствами с помощью движений глаз. Больше не нужно тянуться к клавиатуре – теперь всё решает взгляд!

Что умеет:
💬 Распознаёт моргание, фиксацию взгляда, движения глаз
💬 Позволяет задавать жесты для управления интерфейсом
💬 Подходит для людей с ограниченными возможностями
💬 Работает через обычную веб-камеру — без сложного оборудования

Где можно применить?
👨‍💻 Управление компьютером без рук;
🎮 Интерактив в играх;
🦾 Ассистивные технологии для людей с ОВЗ;
🔬 Эксперименты с интерфейсами будущего.

💻 Установка:

$ git clone https://github.com/NativeSensors/EyeGestures.git
$ cd EyeGestures
$ pip install -r requirements.txt

или

python3 -m pip install eyeGestures

Открытый код, документация и примеры использования.
Будущее уже здесь — открываем мир взглядом!

⚙️ GitHub/Инструкция

👇 Готовый проект в архиве

😁 Жизнь админа | 📲 Max

#soft #python #code