Useful Tools | Linux | GitOps | DevOps
6.14K subscribers
231 photos
3 videos
8 files
803 links
Полезные бесплатные opensource инструменты на все случаи жизни, а иногда и советы.

Понравился проект из поста - поддержи автора звездой!

Web: https://gitgate.d3.ru

Сотрудничество: @maxgrue
Download Telegram
flog - генератор поддельных журналов (логов) для распространенных форматов журналов, таких как apache-common, apache error и системный журнал RFC3164.

Это полезно для тестирования некоторых задач, требующих данных журнала, например теста потока событий в elastic search или rsyslog

Поддерживаемые форматы:

- Apache common
- Apache combined
- Apache error
- RFC3164
- RFC5424
- Common log fomat
- JSON

Поддерживаемые способы вывода:

- Stdout
- File
- Gzip

https://github.com/mingrammer/flog

опубликовано в @gitgate

#log #rfc3164 #rfc5424 #json
1👍15🔥5
grpcurl - инструмент командной строки CLI, который позволяет взаимодействовать с серверами gRPC. По сути, это curl для серверов gRPC.

Основная цель этого инструмента - вызывать методы RPC на сервере gRPC из командной строки. Серверы gRPC используют двоичную кодировку в сети (буферы протокола или для краткости «protobufs»). Таким образом, с ними практически невозможно взаимодействовать, используя обычный curl (и более старые версии curl, не поддерживающие HTTP/2, конечно, не подходят). Эта программа принимает сообщения с использованием кодировки JSON, которая гораздо более удобна как для людей, так и для скриптов.

Возможности:

grpcurl поддерживает все виды методов RPC, включая методы потоковой передачи. Вы даже можете использовать методы двунаправленной потоковой передачи в интерактивном режиме, запустив grpcurl из интерактивного терминала и используя стандартный ввод в качестве тела запроса!

grpcurl поддерживает как защищенные/TLS-серверы, так и текстовые серверы (т. е. без TLS) и имеет множество опций для настройки TLS. Он также поддерживает взаимный TLS, когда клиенту необходимо предоставить сертификат клиента.

Как упоминалось выше, grpcurl работает без проблем, если сервер поддерживает службу отражения. Если нет, вы можете предоставить исходные файлы .proto или файлы protoset (содержащие скомпилированные дескрипторы, созданные protoc) для grpcurl.

https://github.com/fullstorydev/grpcurl

опубликовано в @gitgate

#grpc #curl #cli #json #util
👍11🔥7
Himalaya - CLI клиент для управления электронной почтой на основе email-lib

Возможности:
- конфигурация мультиаккаунта: интерактивно с помощью мастера (требуется функция мастера) и вручную через файл конфигурации на основе TOML
- редактирование сообщения на основе $EDITOR
- IMAP
- Maildir
-SMTP
- Sendmail
- глобальный системный keyring для управления секретами
- OAuth 2.0
- JSON через --output json
- PGP-шифрование:

Himalaya CLI написан на Rust и использует функции Cargo для включения или отключения функций.

https://github.com/pimalaya/himalaya

опубликовано в @gitgate

#tmail #mua #imap #maildir #smtp #sendmail #oauth #json #pgp
👍8🔥7
GrafanaJsonDatasource - любой JSON API в роли Grafana DataSource

Выполняет запросы произвольных бэкэндов и анализирует ответ JSON в Grafana DataFrames.

Красивый и незатратный метод получить и визуализировать метрики вообще откуда угодно, главное чтобы у приложения или сервиса был Rest API.

https://github.com/simPod/GrafanaJsonDatasource

опубликовано в @gitgate

#moni #grafana #json #api
👍11🔥6
Redis Insight - это интуитивно понятный и эффективный графический интерфейс для Redis, позволяющий вам взаимодействовать с базами данных и управлять данными благодаря встроенной поддержке модулей Redis.

Основные моменты Redis Insight:
- просматривайте, фильтруйте, визуализируйте структуры данных Redis «ключ-значение» и просматривайте значения ключей в различных форматах (включая JSON, Hex, ASCII и т. д.)
- поддержка CRUD для списков, хэшей, строк, наборов, отсортированных наборов и потоков
- поддержка CRUD для структуры данных JSON
- интерактивные руководства, позволяющие легко научиться, помимо прочего, использовать собственную структуру данных JSON, поддерживающую структурированные запросы и полнотекстовый поиск, включая поиск по векторному сходству для ваших вариантов использования ИИ.
- контекстные рекомендации по оптимизации производительности и использования памяти. Список рекомендаций обновляется по мере вашего взаимодействия с базой данных
- профилировщик который анализирует каждую команду, отправленную в Redis, в режиме реального времени.
SlowLog анализ медленных операций в экземплярах Redis на основе команды Slowlog
- поддержка Redis pub/sub, позволяющая подписываться на каналы и публиковать сообщения на каналах.
- массовое удаление ключей на основе фильтров, установленных в браузере или в древовидной структуре.
- Workbench расширенный интерфейс командной строки с интеллектуальным автозаполнением команд, сложной визуализацией данных и поддержкой необработанного режима
- поддержка автозаполнения команд для поиска и запросов, структур данных JSON и временных рядов
- визуализация индексов и результатов поиска и запросов.
- возможность создания собственных плагинов визуализации данных
- официально поддерживается для Redis OSS, Redis Cloud. Работает с Microsoft Azure Cache для Redis

https://github.com/RedisInsight/RedisInsight

Подсказал: Костя Ли - @kostayli

опубликовано в @gitgate

#redis #webui #json
👍16🔥6
dog - клиент DNS командной строки, как dig. Он имеет красочный вывод, понимает обычный синтаксис аргументов командной строки, поддерживает протоколы DNS-over-TLS и DNS-over-HTTPS и может выдавать JSON.

https://github.com/ogham/dog/

опубликовано в @gitgate

#dns #cli #rust #json
🔥18👍10
OpenDJ - совместимая с LDAPv3 служба каталогов, разработанная для платформы Java, которая обеспечивает высокопроизводительное, высокодоступное и безопасное хранилище для идентификаторов, управляемых вашей организацией.

Его простой процесс установки в сочетании с мощью платформы Java делает OpenDJ самым простым и быстрым каталогом для развертывания и управления, а также позволяет хранить базу данных LDAPv3 в базе данных SQL JDBC или кластере NoSQL Cassandra/Scylla.

Возможности:
- огромный масштаб данных и высокая доступность предоставляют разработчикам сверхлегкие способы доступа к идентификационным данным.
- высокая производительность - время отклика еденицы милисекунд и десятки тысяч операций в секунду
- репликация Multi Master для высокой доступности

Помимо ожидаемого доступа LDAP, OpenDJ позволяет получать доступ к данным каталога как к ресурсам JSON по протоколу HTTP, что делает его очень удобным для веб-приложений и приложений для телефонов.


https://github.com/OpenIdentityPlatform/OpenDJ

Подсказал: @Celentano_21_veka

опубликовано в @gitgate

#ldap #json #http #nosql #java
🔥6👍4
Redis Insight - интуитивно понятный и эффективный графический интерфейс для Redis, позволяющий взаимодействовать с базами данных и управлять данными благодаря встроенной поддержке модулей Redis.

Основные моменты Redis Insight:
- просматривайте, фильтруйте, визуализируйте структуры данных Redis «ключ-значение» и просматривайте ключевые значения в различных форматах (включая JSON, Hex, ASCII и т. д.)
- поддержка CRUD для списков, хешей, строк, наборов, отсортированных наборов и потоков
- поддержка CRUD для структуры данных JSON
- интерактивные учебные пособия, позволяющие легко научиться, помимо прочего, использовать собственную структуру данных JSON, поддерживающую структурированные запросы и полнотекстовый поиск, включая поиск по векторному сходству для ваших вариантов использования ИИ.
- контекстные рекомендации по оптимизации производительности и использования памяти. Список рекомендаций обновляется по мере вашего взаимодействия с базой данных.
- профилировщик - анализирует каждую команду, отправленную в Redis, в режиме реального времени.
- SlowLog - анализ медленных операций в экземплярах Redis на основе команды Slowlog
- Pub/Sub - поддержка Redis Pub/Sub, позволяющая подписываться на каналы и публиковать сообщения в каналах.
- массовые действия — массовое удаление ключей на основе фильтров, установленных в браузере или в древовидной структуре.
- Workbench - расширенный интерфейс командной строки с интеллектуальным автодополнением команд, сложной визуализацией данных и поддержкой необработанного режима
- поддержка автодополнения команд для поиска и запросов, структур данных JSON и временных рядов
- визуализация индексов и результатов поиска и запросов.
- возможность создания собственных плагинов визуализации данных
- официально поддерживается Redis OSS и Redis Cloud. - работает с Microsoft Azure Cache для Redis.

https://github.com/redis/RedisInsight

опубликовано в @gitgate

#redis #gui #json #crud
👍16🔥7
This media is not supported in your browser
VIEW IN TELEGRAM
ktea - терминальный клиент, предназначенный для упрощения и ускорения взаимодействия с кластерами Kafka.

Возможности:
- поддержка нескольких кластеров: легко подключайтесь к нескольким кластерам Kafka и переключайтесь между ними.
- управление темами: список, создание, удаление и изменение тем, включая сведения о разделах и смещениях.
- использование записей: использование записей в текстовых форматах, JSON и Avro с мощными возможностями поиска.
- аналитика групп потребителей: мониторинг групп потребителей, просмотр их участников и отслеживание смещений.
- интеграция с реестром схем: простой поиск, просмотр и регистрация схем.

https://github.com/jonas-grgt/ktea

опубликовано в @gitgate

#kafka #gui #json
👍15🔥3
This media is not supported in your browser
VIEW IN TELEGRAM
Kafbat UI - простой инструмент kafka, который делает потоки данных более заметными, помогает быстрее находить и устранять неполадки, обеспечивая оптимальную производительность. Его лёгкая панель управления позволяет легко отслеживать ключевые показатели кластеров Kafka: брокеров, топики, разделы, производство и потребление. Логическое продолжение и наследник проекта UI Apache Kafka.

Возможности:
- управление несколькими кластерами: мониторинг и управление всеми кластерами в одном месте
- мониторинг производительности с помощью панели показателей: отслеживайте ключевые показатели Kafka с помощью простой панели.
- просмотр брокеров Kafka: просмотр назначений тем и разделов, статуса контроллера
- просмотр тем Kafka: просмотр количества разделов, состояния репликации и пользовательских настроек.
- просмотр групп потребителей: просмотр припаркованных смещений по разделам, комбинированных и по разделам задержек
- просмотр сообщений: просмотр сообщений с кодировкой JSON, обычного текста и Avro.
- динамическая конфигурация тем: создание и настройка новых тем с помощью динамической конфигурации
- настраиваемая аутентификация: защитите свою установку с помощью опционального Github/Gitlab/Google OAuth 2.0
- пользовательские плагины сериализации/десериализации: используйте готовые плагины для своих данных, такие как AWS Glue или Smile, или создайте свой собственный!
- управление доступом на основе ролей: управление разрешениями на доступ к пользовательскому интерфейсу с высокой точностью.
- маскировка данных: сокрытие конфиденциальных данных в сообщениях тем

https://github.com/kafbat/kafka-ui

подсказал: Иван Онушкин - @ivanon

опубликовано в @gitgate

#kafka #webui #json
3👍20🔥4
JSONata - лёгкий язык запросов и преобразования данных JSON.

Вдохновлённый семантикой «пути местоположения» XPath 3.1, он позволяет выражать сложные запросы в компактной и интуитивно понятной форме. Для обработки и комбинирования извлечённых данных предоставляется богатый набор встроенных операторов и функций, а результаты запросов можно форматировать в любую выходную структуру JSON, используя привычный синтаксис JSON-объектов и массивов. В сочетании с возможностью создания пользовательских функций, можно создавать сложные выражения для решения любых задач JSON-запросов и преобразования.

https://github.com/jsonata-js/jsonata

Опубликовано в @gitgate

#json #jq
👍10🔥2
jqjq - реализация jq в jq.

Всё началось с исследования того, как писать декодеры форматов на jq для fq, что в итоге привело к некоторым манипуляциям с AST, а затем из шутки переросло в увлекательный и познавательный проект. Но это также отличный способ показать jq как очень выразительный, мощный и изящный язык!

https://github.com/wader/jqjq

Подсказал: @yolkis

Опубликовано в @gitgate

#json #jq
👍9🔥6