👩‍💻знакомство и 🧭 навигация

🌎🤍
Я Белла – @belkamir, очень люблю карты, данные и города
- закончила международную магистратуру по картографии (TUM, TUW, TUD, UT)
- преподаю в НИУ ВШЭ 💙
- занимаюсь ГИС-аналитикой и ГИС-веб-разработкой 🌐

Этот канал обо всем, что знаю, что продолжаю узнавать☄️
- пространственный анализ в урбанистике
- данные для городской аналитики
- автоматизация анализа геоданных на Python и R
- ГИС-веб-разработка
- геовизуализация

📍
#geo_data – все о данных
#geo_analytics - инструменты анализа
#geo_qgis – скрытые (и не очень) возможности QGIS
#geo_py – python и геоданные
#geo_rrr – R и геоданные
#geo_web – гис-веб-разработка
#geo_vis – гео-визуализация
#geo_love – о любви к картам
#geo_theory – гео-теория
#geo_edu – гео- гис- урбан- образование
#geo_books – гео-книги
#geo_retro – старые карты
#geo_cities – о городах

GitHub | LinkedIn | Instagram

GIS_AND_PEACE🌎🕊️

QGIS не QGIS, когда ты не используешь плагины 🍫

QGIS - самый популярный инструмент для анализа пространственных данных в городском планировании и урбанистике (и не только :)

Одно из важных преимуществ программы - поддержка языка Python 🐍. Любой желающий может создать инструмент под свои задачи: написать сценарий или дополнительный модуль - плагин, которые можно опубликовать для общего использования.
Плагины значительно расширяют возможности QGIS: помогают упрощать рутинные задачи, автоматизировать сложные алгоритмы, и просто добавляют новые функции ⚙

🦶Топ 5 плагинов :

3. DataPlotly 📊
(нет, мы не ошиблись, начинаем с номера 3 )
DataPlotly позволяет создавать интерактивные графики на основе пространственных данных. Больше не нужно выгружать атрибутивную таблицу, чтобы построить диаграммы для анализа данных. Можно настроить все в программе, добавить график на итоговую карту или выгрузить как отдельное изображение.

4. ORS Tools 🚥
В городской аналитике мы часто сталкиваемся с построением зон доступности, в частности, изохрон.
Сделать точные расчеты на основе открытых данных довольно трудозатратно, поэтому существуют различные сервисы, которые значительно упрощают эту задачу. ORS Tools предоставляет доступ к одному из них - OpenRouteService.
ORS Tools помогает построить кратчайшие маршруты между заданными объектами, матрицу расстояний, и, конечно, зоны доступности. Для вычислений можно также определить характер перемещения (на автомобиле, велосипеде, пешком и др.).
*Перед использованием нужно зарегистрироваться на сайте сервиса, получить ключ API и добавить его в настройки плагина.

5. AutoSave 🆘
Если у вас не вылетал QGIS в самый неподходящий момент, то скорее всего, вы им никогда не пользовались))
Плагин AutoSave автоматически сохраняет изменения в проекте. Можно настроить интервал и директорию для автосохранения. C этим плагином можно избежать потери данных и рабочего времени :)

👀 А вот и потерявшиеся первые два, но с ними вы скорее всего знакомы)

1. QuickMapServices 🕸
предоставляет доступ к различным слоям веб-картографических сервисов (например, OpenStreetMap, Google Maps)

2. QuickOSM 🗺
позволяет быстро и удобно получать данные OpenStreetMap (OSM) прямо в QGIS

#geo_qgis

GIS_AND_PEACE🌎🕊️

Данные - не данность 🌐

Анализ пространственных данных играет ключевую роль в городском планировании📍
⚠️осторожно - субъективное мнение геоаналитика⚠️

Они могут нам рассказать о распределении населения и рабочих мест по городу, о доступности социальной и коммерческой инфраструктуры, степени озелененности территории, транспортных потоках и о многом-многом другом

Где же их искать? 🔎

1. Open Street Map 🗺️
Основным источником открытых геоданных для работы с городами является платформа OpenStreetMap (OSM). Практически для любого города мира из OSM можно выгрузить пространственные данные о застройке, характере землепользования, транспортной инфраструктуре, точках интереса (POI), гидрографи и др.
Cкачать данные из OSM можно разными способами, вот несколько из них: непосредственно через портал OSM, Geofabrik, Overpass Turbo, расширение QuickOSM в QGIS.

2. Free GIS Data 🌍
Официальные геопорталы открытых данных – это самый надежный источник пространственных данных, где можно найти большой набор информации по различным категориям. Все доступные порталы открытых данных перечислить невозможно, но есть ресурс Free GIS Data, который содержит широкий перечень сайтов с доступными пространственными данными с для разных стран мира.

3. Портал открытых данных Москвы (и не только) 🏙
В России порталы открытых данных формируются на уровне субъектов и имеют разную степень проработанности.
Так, Портал открытых данных Правительства Москвы (или его старая версия) - содержит более 100 различных тематических наборов данных, большая часть из них имеет географическую привязку.
В других регионах ситуация с открытыми данными чуть сложнее, но при необходимости стоит проверить их наличие (вот, например, для Санкт-Петербурга 🤍).

4. Открытые данные Фонда развития территорий (реформа ЖКХ)🏘️
Здесь можно найти реестр всeх зарегистрированных многоквартирных домов (МКД) России, аварийного жилого фонда, управляющих организаций и многое другое.
Для каждого МКД есть подробная информация, которая включает данные об адресе дома, жилой и нежилой площадях, этажности, годе постройки, наличии лифта и пр.

5. USGS (United States Geological Survey) 🛰️
Сайт американской геологической службы - это один из основных открытых источников спутниковых снимков поверхности Земли. Спутниковые снимки могут помочь построить цифровую модель рельефа, определить соотношение застроенных и озелененных территорий в городе, изучить динамику во времени и др.

P.S
это короткй список, который можно расширять до бесконечности, и это можете делать вы ⬇️

#geo_data

GIS_AND_PEACE🌎🕊️

Для вдохновения и новых идей при создании карт 🔮

Esri Map Book 📖
Компания Esri ежегодно выпускает издание сборника Esri Map Book, в котором публикует карты, созданные с помощью продуктов компании.
Это очень крутой ресурс, где можно посмотреть, как ГИС технологии помогают решать задачи в разных сферах. Все карты сопровождаются описанием задачи, используемых данных и инструментов ⚙

Virtual Map Gallery 🖼
Виртуальная галерея карт, которые также созданы с помощью продуктов Esri

Something About Maps 🖌
Блог Даниэля Хаффмана - крутейшего картографа, автора книги "How to Lie with Maps" (Как лгать с помощью карт), в которой он рассказывает о том как карты могут быть использованы для манипуляции искажением информации

Pablo Robels🗺
Блог Пабло Робельса. Он создает прекрасные карты и инфографику, в том числе для The New York Times.

Adventures In Mapping 🗾
Блог Джона Нельсона - главного графического дизайнера в компании Esri, автора книги "The Art and Science of Map Design”

#geo_vis

GIS_AND_PEACE🌎🕊️

Гео-Rrrrr🐕

Если много работать с пространственными данными, то станет понятно, что иногда для их анализа не обойтись без знания какого-нибудь языка программирования. Например, объем информации слишком большой или хочется автоматизировать рутинную обработку данных 🐢

R - язык программирования и среда разработки, предназначенные для статистического анализа и визуализации данных, в том числе один из наиболее популярных языков для анализа геоданных 🌐

Ресурсы, которые помогут разобраться, как использовать R в работе с пространственными данными 🤓:

* Анализ данных в R - отличный бесплатный базовый курс в нескольких частях на платформе Stepik, хорошо подойдет для освоения R c нуля.

* Визуализация и анализ географических данных на языке R и Пространственная статистика на языке R - cупер тьюториалы от Тимофея Самсонова, доцента кафедры картографии географического факультета МГУ

* R в географии - мой мини плейлист на YouTube канале Программирование для географов

#geo_rrr

GIS_AND_PEACE🌎🕊️

Изучаем города по ночам 🌙

Можно часами рассматривать ночные спутниковые снимки, исследовать закономерности рассселения, вспоминать, где какие города находятся 🌎

Вид ночной Земли - не только картинки. Снимки могут помочь оценить уровень урбанизации, получить информацию об экономической активности и ее динамике, зафиксировать эффект крупных инфраструктурных проектов, оценить уровень светового загрязнения и даже обнаружить пожары.

🔎 Где их найти?

⭐на Earth at Night (Google Earth) можно просто полюбоваться ночной Землей😍

⭐ на Earth Data NASA есть много ночных спутниковых снимков (от разных спутников), их можно анализировать онлайн или скачать в формате geoTiff; + тут найдете информацию, как подключить GIBS (Global Imagery Browse Services) сервис в QGIS

⭐ Портал Light Pollution Map позволяет просматривать карты светового загрязнения на всей Земле и скачивать спутниковые снимки (VIIRS) на выбранную территорию.

❔ А какие города на этом снимке? 🌃

#geo_data

GIS_AND_PEACE🌎🕊️

Геокодирование 📍

Мы часто в повседневной жизни встречаемся с адресами, но никогда не задумываемся о координатах объектов (да и не нужно это). Но если работать с пространственными данными в ГИС, то без координат уже не обойтись.

Поэтому нам точно пригодится геокодирование 🐈‍⬛ - процесс преобразования адреса или названия места в географические координаты (широту и долготу)

Геокодирование может быть осуществлено вручную 🙌. Например, спросим у гугла: “координаты главного здания МГУ”. Мы получим в ответ: 55°42′11″с.ш.37°31′50″ в.д. Ура , мы геокодировали главное здание МГУ🎉

Но чаще всего у нас далеко не один адрес, а вбивать в поисковик их поочереди было бы довольно не практично (и очень скучно 🥱). Для этого можно использовать специальные приложения или API.

Способы для геокодирования 💫:

1. GeoCode by Awesome Tables
Самый простой и доступный способ геокодирования - использование инструмента GeoCode by Awesome Tables в гугл-таблицах. Для того, чтобы им воспользоваться Вам необходимо установить дополнение (Extensions (Дополнения) - Add-ons - Get add-ons). (ограничение: 800 адресов в день на один аккаунт)

2. Плагин MMQGIS в QGIS (основная проблема - плохо поддерживает адреса на кириллице)

3. Batch Nominatim geocoder - инструмент в QGIS, появился, начиная с версии 3.20

—самая классная группа - API—

4. HERE Geocoding API - сервис геокодирования от компании HERE, который предоставляет бесплатно до 250 тысяч запросов в месяц (сейчас, к сожалению, только при подтверждении карты) . Подробную информацию о сервисе можно прочитать на портале. Для использования сервиса HERE необходимо получить ключ API тут.

5. OpenStreetMap Nominatim API - это бесплатный сервис геокодирования, который использует данные OpenStreetMap для преобразования адресов и названий мест в координаты и наоборот. API также возвращает дополнительную информацию о месте: такую как название, тип объекта и т. д.

6. Yandex Geocoding API - это сервис, предоставляемый компанией Yandex, поиск координат основан на Яндекс.Картах. Очень точные результаты для России, Белоруссии, Украины, Казахстана. Но сейчас установлено ограничение до 1000 запросов в день.

#geo_py #geo_data #geo_qgis

GIS_AND_PEACE🌎🕊️

HERE API: геокодирование на практике 💻

Перед тем как использовать API для геокодирования, надо разобраться с тем, что это такое 🤔

API🔗(application programming interface) это набор инструкций и стандартов, которые позволяют разным программам взаимодействовать друг с другом . В упрощенном виде - посредник, который дает возможность использовать функционал другой программы.

Так, чтобы использовать сервисы HERE📍 для геокодирования, вам нужно обратиться к ним с помощью API: написать запрос - получить ответ. В параметрах запроса необходимо указывать API-ключ (ваш уникальный идентификатор), который необходимо получить на сайте провайдера.

На питоне 🐍 можем отправить запрос с помощью библиотеки requests. Если он успешно выполнен, то получим ответ в формате JSON и уже дальше будем с ним работать. Куда отправлять запрос и что указывать в параметрах можно прочитать в документации.

------ А пример-то можно? 😐

Тут 👩‍💻 можно найти небольшой тьюториал (Jupyter Notebook), в котором мы по шагам разбираемся с тем, как геокодировать адреса из таблицы.
(изначально он был предназначен для студентов курса “Методы пространственного анализа. Продвинутый уровень” программы “Городское планирование”, НИУ ВШЭ)

Итоговой функции для того чтобы магическим 🪄 (или не очень) образом геокодировать все имеющиеся у вас адреса вы не найдете, но если разберетесь со всеми шагами, то с легкостью напишите ее самостоятельно (как настоящий препод, не могу дать прямой ответ, только путь к нему :))

#geo_py

GIS_AND_PEACE🌎🕊️

Гео-квиз 🗺

Примерно два года назад я поняла, что не хочу останавливаться на статических картах, и нужно учиться создавать что-то классное и интерактивное ⭐️

В попытках освоить разные веб-картографические библиотеки появились карта и квиз, посвященные Коренным малочисленным народам Севера, Сибири и Дальнего Востока России. На карте можно посмотреть, какие это народы, в каких регионах России живут и на каких языках говорят, а после - проверить себя 🙃

Карта написана на языке Java Script 👩‍💻 (пожалуй, наиболее популярный язык программирования в веб-картографии) с использованием библиотеки Leaflet, которая содержит широкий набор функций для создания интерактивных карт.

#geo_web

GIS_AND_PEACE🌎🕊️

Местные системы координат (МСК) в QGIS (2/2) 🌐

Местные системы координат(мск) устанавливаются для территорий субъектов РФ и имеют обозначение МСК–NN, где NN – код субъекта РФ в соответствии с его общероссийской классификацией.

По умолчанию QGIS не может работать с проекциями мск, так как не знает их установленных параметров, которые нужно задать самостоятельно.
Описание проекций в формате Proj String для всех мск регионов России в приложении (msk.txt).

Задание параметров новой СК в QGIS ✏️:
Settings - Custom Projections - (формат - Proj String) - и обязательно укажите название системы координат

Теперь вы сможете использовать заданную вами мск и найдете ее в общем списке со всеми другими проекциями

#geo_qgis
GIS_AND_PEACE🌎🕊️

MorphoCode Explorer

очень красивое интерактивное приложение для анализа параметров городской среды в режиме реального времени: плотность застройки, разнообразие землепользования, доступность общественного транспорта, население и др 😍

#geo_vis #geo_web #geo_cities

GIS_AND_PEACE🌎🕊️

Любим карты и города💙

Если вы так же как и я любите карты, города и все что с этим связано — посмотрите, что пишут мои коллеги в своих каналах🤍

🌎 УСЫ
Аналитика больших геоданных, карты и инсайды из урбанистики

🌎 URBAN MASH
Городские данные, карьера в сфере урбанистики и интервью с экспертами

🌎 City’s Backyard
Канал про геоданные и города. Много интерактивных карт и скролителлинга, автор также делится своими проектами.

🌎 UrbanStudent
Канал магистранта Высшей школы урбанистики, в котором можно найти литературу, видео и другие интересные материалы о Градостроительстве

🌎 Картетика
Образовательный канал про геотехнологии с полезными ресурсами, ГИС-туториалами и красивыми картами.

🌎 Картографическая визуализация данных Анастасии Барыкиной
Новости из мира картографической визуализации данных от преподавателя МИИГАиК

🌎 URBAN PLANNING TIMES
Теория градостроительства от профессора МАРХИ: читаю и перевожу с научного - на профессиональный. И обратно.

🌎 Картография
Полезные заметки о картах и картографии и обо всём, что с ними связано

🌎 Urban Heritage
О городском наследии, исследованиях, политиках регенерации и сообществах.

🌎🕊️GIS AND PEACE

#geo_love

Data.mos.ru - ого! так могут выглядеть открытые данные?! 😱

Портал открытых данных правительства Москвы - первый и самый крупный портал в России, где содержится более 1000 наборов данных, большая часть из которых имеет географическую привязку 📍

Данные можно скачать напрямую с портала в форматах xlsx, json, xml, excel или формировать запросы на получение geojson, используя API // (новая версия API) ⬇️

Для запросов чаще всего используется какой-нибудь язык программирования, но можно получить данные прямо в браузере 🤔

На текущий момент (июнь 2023) существует две версии портала - первая (data.mos.ru) и новая (data-new.mos.ru). Новая версия пока не работает стабильно, поэтому стоит пользоваться основной. Процесс экспорта данных не изменится.

🐍 Тут можно посмотреть, как экспортировать данные используя Python
🐕 Видео, которое расскажет, как это сделать с помощью R (+ через браузер)

#geo_data #geo_py #geo_rrr

🌎🕊️ GIS_AND_PEACE

How old is this house 👨‍🦳

прекрасный проект карт возраста домов для разных городов России (14 городов на июнь 2023)
можно изучить интересующий город онлайн на интерактивной карте или скачать данные в формате geopackage 🤩

основатель - Никита Славин, выпускник программы Cartography M.Sc, про которую мы с вами еще будем тут вспоминать 😉

#geo_vis #geo_web #geo_data

🌎🕊️ GIS_AND_PEACE

Оценка уровня озеленения в городе: индекс NDVI 🌳

NDVI (Normalized Difference Vegetation Index) - это индекс, который используется для измерения густоты зеленой массы растительности, зафиксированной на спутниковом снимке

Индекс рассчитывется как частное разности отраженного света в красном и инфракрасном диапазоне и суммы их интенсивностей

NDVI может быть использован для оценки уровня озеленения в городе, здоровья растительности, мониторинга изменений землепользования и многих других характеристик.

Чтобы рассчитать NDVI на интересующую вас территорию, вам нужны спутниковые снимки. Например, можно скачать Landsat на сайте американской геологической службы.
В QGIS индекс проще всего рассчитать с помощью калькулятора растров (библиотеки GDAL или SAGA). Перед этим важно понять, какие каналы соотвествуют красному и инфракрасному диапазонам. Для Landsat (и не только) можно посмотреть тут.

#geo_qgis

🌎🕊️ GIS_AND_PEACE

Гео-плитка — тайлы 🗺

С тайлами знаком каждый, кто когда-либо использовал веб-карты 🕸

Картографическое отображение разбивается на набор квадратных плиточек▪️ - тайлов (tiles), которые генерируются в зависимости от уровня зума. Например, если пользователь увеличивает масштаб карты, то на экране подгружаются тайлы с более детальной информацией.

Тайлы могут быть представлены как в растровом, так и в векторном формате:

◽️растровые тайлы
каждый тайл - это картинка, которая создается на основе геоданных
🔎портал OSM основан на растровых тайлах, изображения сменяют друг друга при зумировании

◽️векторные тайлы
вместо картинок - набор геометрий (линии, полигоны, точки) и связанных с ним атрибутов
🔎 Yandex карты, 2GIS используют векторные тайлы - можно посмотреть как плавно трансформируется отображение, при изменении зума менятся набор объектов

Отличная статья (eng) о различиях этих двух типов данных 📖

#geo_web #geo_data

🌎🕊️ GIS_AND_PEACE

А как вы называете станции московского метро? Ⓜ️
интересный проект студентов НИУ ВШЭ, очень ждем результатов ☄️

Студенты факультета городского и регионального развития под руководством Кирилла Пузанова делают любопытный проект: собирают топонимы станций московского метро. В итоге получится народная схема метро.

Для проекта нужно как можно больше ваших топонимов, поэтому приглашаем вас пройти небольшой опрос.

Будем очень благодарны за прохождение и распространение.

MapTiler API и плагин QGIS🪩

MapTiler 🌐 – компания, которая предоставляет различные картографические услуги. В частности, их API (MapTiler API) дает возможность разработчикам создавать и интегрировать интерактивные карты в свои приложения, поддерживает создание растровых и векторных тайлов, также есть функции для маршрутизации, геокодирования и др.

👨‍💻 MapTiler могут использовать не только разработчики

С помощью плагина для QGIS - MapTiler Cloud ☁️, можно быстро и легко добавлять растровые и векторные тайлы в свои проекты
И это отличный инструмент, чтобы познакомиться с векторными тайлами 😉
Если вам нужна картографическая подложка в определенном оформлении, то не обязательно скачивать данные на рассматриваемую территорию - можно просто стилизовать векторные тайлы 😮
Для использования плагина нужно получить 🔑 бесплатный токен

#geo_web #geo_data #geo_qgis

🌎🕊️ GIS_AND_PEACE

Карта лесных пожаров - Track Wildfires in the West 🌳

Track Wildfires in the West🔥 — проект The New York Times. Карта отображает информацию о лесных пожарах на западе США: их местоположение и интенсивность, качество воздуха на прилегающих территориях

Очаги пожаров получены с помощью спутниковой системы обнаружения пожаров 🔗NASA FIRMS, на сайте которой можно посмотреть актуальную информацию по пожарам во всем мире 🌐

Данные о качестве воздуха получены с помощью датчиков PurpleAir, на основе которых рассчитан Air Quality Index, разработанный Агентством по охране окружающей среды США

👩‍💻 мне особенно нравится рассматривать, как генерализуются данные на разных зум-уровнях, как проявляется рельеф, как сделана карта-навигатор и, конечно, цвет воды 😍

#geo_vis

🌎🕊️ GIS_AND_PEACE