GIS AND PEACE

Открытые данные и день ГИС ⭐️

Работа в ГИС начинается с данных! И сегодня прекрасный повод вспомнить об огромном количестве окрытых источников. Ведь мы отмечаем Международный день ГИС! 💙

Например, только на Free GIS Data можно найти подборку из более 500 ссылок на различные данные ✨

И в этом блоге я часто делюсь полезными и интересными источниками, которые знаю и нахожу #geo_data:

Для всего мира 🌍:
🟣OpenStreetMap и способы экспорта данных на любой вкус
🟣Microsoft Building Footprints – дома на весь мир, если не доверяете OSM
🟡Natural Earth Data и пример, какую красоту можно создавать на их основе
🟡World Pop и другие источники данные о населении
🟣Три агрегатора GTFS данных – транспортных маршрутов для разных городов мира
🟣Atlas of Urban Expansion – данные для оценки городского разрастания
🟢Спутниковые снимки от Copernicus или USGS (United States Geological Survey)
🟢Подборка источников цифровых моделей высот (Global DEM)
🟢FABDEM и другие цифровые модели рельефа
🟢Ночные спутниковые снимки

Для России 🇷🇺:
🔵Данные Росстата и административные границы
🟣Дома 80 городов России с информацией о годе постройки
🟣Портал открытых данных правительства Москвы
🔵Если быть точным – платформа с открытыми данными и исследованиями
🔵Инфраструктура научно-исследовательских данных
🔵Фонд развития территорий (aka Реформа ЖКХ)
🔵Портал открытых данных Министерства Культуры РФ


🟣– вектор, 🟢– растр, 🟡– вектор+растр, 🔵– статистика/таблички

#geo_data

🌎🕊️ GIS_AND_PEACE

Картографирование статистики: база данных муниципальных образований 📕

Росстат ежегодно собирает и публикует тысячи показателей государственной статистики. Один из самых важных и популярных наборов – база данных показателей муниципальных образований (БД ПМО)

Эту статистику очень интересно анализировать и на ее основе можно выявлять разные пространственные закономерности ✨

Для ассоциации данных с административными ячейками их нужно сопоставить с границами муниципалитетов, используя единый идентификатор. Таким ключом может служить уникальный код — ОКТМО (Общероссийский классификатор территорий муниципальных образований)📎

Кажется, это задача довольно простая, и мы с легкостью можем получить набор пространственных данных. Но, к сожалению, это не совсем так, и при работе с государственной статистикой важно учитывать несколько моментов:

1. Официальные данные Росстата не представлены в машиночитаемом и удобном для работы формате – будто предназначены исключительно для тех, кто скачивает xlsx таблички и просматривает их вручную☹️

Эту проблему, впрочем, во многом уже решили за нас: можно найти предобработанные данные, например, от «Инфраструктуры научно-исследовательских данных» или «Если быть точным»*️⃣

Однако есть и другая, более насущная проблема!

2. Муниципалитеты – это непостоянные единицы. Их границы, названия и типы меняются, что затрудняет сбор данных, построение временных рядов и значительно усложняет анализ

По этой теме есть отличное исследование от СберИндекса, где рассмотрены особенности подобных преобразований и как это влияет на работу аналитиков. Там же можно скачать границы муниципалитетов с учетом всех изменений, начиная с 2018 года 😍

*️⃣*️⃣*️⃣
В общем, чтобы упростить себе работу с БД ПМО, мы можем использовать один из вариантов (первый или второй) предобработанных данных и границы муниципалитетов, учитывающие преобразования. Главное, не забывать ссылаться на тех, кто подготовил это для нас 💙

А вот чудесная статья об опыте работы с исходными данными 🙃


#geo_data

🌎🕊️ GIS_AND_PEACE

Инструмент исследования городов — карты

Urban Cartography – электронное пособие от Morphocode, в котором представлены вдохновляющие примеры – не просто интересные визуализации, а важные этапы развития городской картографии

Например, тут можно больше узнать о карте Нолли - детальном плане Рима XVIII века, о карте вспышки холеры Джона Сноу и многих других

И, конечно, это все очень красиво!

#geo_vis #geo_cities

🌎🕊️ GIS_AND_PEACE

Открытые уличные карты
или OpenStreetMap :)

Один из основных источников открытых пространственных данных

Веб-картографический проект, который создается пользователями (примерно как Википедия) и предоставляет данные о дорожной сети, зданиях, парках и многих других объектах по всему миру

Существует множество вариантов их выгрузки. Вот самые популярные:

🟣Overpass Turbo
с помощью простых запросов можно экспортировать определенные типы объектов в форматах GeoJSON или XML. Удобен для получения отдельных категорий

🟡Geofabrik
тут можно скачать данные на любую территорию в разных форматах: osm.pbf, shp, osm.bz2. Наименьший пространственный охват — уровень стран и регионов, но также можно экспортировать данные для всего мира. Подойдет для крупных территорий

🔵BBBike
сервис, позволяющий выбрать интересующую область для выгрузки данных, которые будут отправлены на вашу почту в формате shp. Максимальный размер не может превышать 128Мб. Оптимален для небольших областей

Бесспорный фаворит при работе в QGIS:
🟣QuickOSM (плагин)

Python библиотеки🐍:
🟣OSMnx
🟣osmpy
🟡Pyrosm

R библиотеки 🐕:
🟣osmdata
🟢osmextract

🟣-- основаны на Overpass API

❗️Для экспорта данных OSM пригодится информация о ключах и значениях — тегах, которые помогают унифицировать описание объектов и их характеристик


О некоторых других открытых источниках гео-данных можно почитать тут 💌

#geo_data

🌎🕊️ GIS_AND_PEACE

Найди Вершину 🏔

Не обязательно достигать вершин, можно ими просто любоваться!

Посмотреть, какие горы видны с определенной точки, можно в PeakFinder. А также узнать, во сколько встает и заходит солнце в этом месте, какая у него траектория движения в разные дни ☀️

В приложении для телефона PeakFinder использует технологию дополненной реальности, накладывая названия вершин на изображение с камеры📱

И без подобных изысков — бесплатная веб-версия с минималистичной панорамой может стать прекрасным дополнением к обычной карте в поле горах 🗺


🌎🕊️ GIS_AND_PEACE

8.11 – Всемирный день градостроительства

Работать на стыке двух сфер, градостроительства и картографии, невероятно интересно!

ГИС – важный инструмент в исследовании городского пространства, и многие наши заметки это потдверждают #geo_cities:

🟣Morphocode Explorer – интерактивный и очень красивый анализ районов Манхеттена "на лету"

🟢How old is this house – карты возраста домов в 80 городах России

🔵Geo-Py – Python для городской аналитики

🟣MapLab – статьи о картографии в городских исследованиях

и еще:
🟡Исторические планы городов
🟣Атлас городского разрастания
🟡Карта вернакулярных районов Нью-Йорка
🟢Close – карта доступности
🔵Лекции по городской экономике
🟡Городская грамматика
🟣Kiezcolors – открытки
🟢План города за 5 минут c QuickOSM
🟡Шварцплан

#geo_cities

🌎🕊️ GIS_AND_PEACE

План наводнения Санкт-Петербурга 7 ноября 1824 года

200 лет назад произошло одно из самых значительных и разрушительных наводнений Санкт-Петербурга. На карте видно, какая часть города была затоплена

На полноформатном изображении можно найти промеры глубины в футах и дюймах, нанесенные красными чернилами

Источник: ЭтоМесто

#geo_vis

🌎🕊️ GIS_AND_PEACE

Geocompx – геовычисления

Прекрасный проект с открытыми материалами о пространственных вычислениях на разных языках с использованием единого подхода

Тут можно найти книжки:
🐕 Geocomputation with R
🐍 Geocomputation with Python
👧 Geocomputation with Julia

+ другие ресурсы по R (презентации, воркшопы, дополнительная литература)
+ интересный блог


#geo_py #geo_rrr

🌎🕊️ GIS_AND_PEACE

Рукописные карты: искусство картографии

Обнаружила прекрасный проект Manuscript Maps Кевина Шиена (Kevin Sheehan), который также занимается созданием карт от руки 🖋

В блоге Кевин рассказывает, как начал рисовать карты, и делится описанием процесса работы:
Part 1 - Planning & Pencil
Part 2 - Ink Drawing and Calligraphy
Part 3 - Tricks of the Trade

Восторг!

#geo_vis

🌎🕊️ GIS_AND_PEACE

Классическая картография

На этой неделе у меня начался курс "Manual Cartography", где мы создаем карты без компьютера 🖋

Курс ведет доктор Рольф Бём (Dr. Rolf Böhm) — картограф из Саксонии, который уже более 30 лет делает карты исключительно от руки. Да, такие люди все еще существуют, и это очень вдохновляет!

Его работы по Саксонской Швейцарии и окрестностям скорее произведения искусства, чем просто инструменты для навигации

На изображении карта Рольфа Бёма "Stolpen und das Stolpner Land 1:20000"
Больше работ можно найти на его сайте


#geo_vis

🌎🕊️ GIS_AND_PEACE

Картетика проводит исследование рынка труда гео-специалистов 📊

Мы продолжаем собирать информацию про нашу профессиональную деятельность. В прошлом году мы делали исследование гео-вакансий по данным HH. Но то, что пишут в резюме и вакансиях, только частично отражает общую картину.

Чтобы углубить наше знание о реальном положении дел, в этом году мы сделали свой опрос. Он для всех, кто причисляет себя к гео-специалистам 🗺

Примеры вопросов, на которые мы хотим и пытаемся найти ответы:
- какие зарплаты у нас в сфере
- какие навыки и ПО сейчас актуальны на рынке
- как много тех нас, кто работает на нескольких работах
- какая фактическая география нашего рынка труда

⚡️Как можно поучаствовать в исследовании:
- пройдите опрос самостоятельно, это займёт 7-10 минут
- поделитесь опросом с друзьями и коллегами, которые работают в нашей сфере

Чем больше ответов мы соберём, тем полнее и показательнее будут результаты💪🏻 Результаты опроса мы выложим открыто и добавим к ним свежие данные по вакансиям.

Интерактивные блокноты для анализа и визуализации данных 📕

Интерактивные блокноты – мощные инструменты, используемые в анализе данных, так как позволяют объединять код, текст и графику в одном документе ✨

Они невероятно удобны в исследованиях и образовании благодаря возможности пошагового выполнения кода и просмотра результатов 📱

🟡Jupyter Notebooks
открытый и, наверное, самый популярный инструмент для анализа данных с использованием различных языков программирования, включая Python и R

🔵Geo Notebooks
расширение Jupyter, которое поддерживает интерактивные карты для работы с геопространственными данными

🟣Observable notebooks
JavaScript-ориентированные блокноты, работают в браузере и автоматически обновляют связанные ячейки

🟢R Notebooks
интегрированные в RStudio блокноты, часто используются в статистике и поддерживают мощные графические библиотеки

🟡nTeract
простое десктопное приложение для создания блокнотов, основано на React, поддерживает JavaScript и визуализацию через Vega и Altair. Примеры тут

🔵Google Colab
облачная платформа для работы с Jupyter Notebooks, интегрированная с Google Drive

Interactive Notebooks for Data Analysis and Visualization – статья-обзор блокнотов от Morphocode (en.)


🌎🕊️ GIS_AND_PEACE

Close – карта доступности ✨

Интерактивная карта показывает доступность разных объектов в городах США пешком, на общественном транспорте или на велосипеде

Здорово, что можно как по отдельности оценить близость расположения продуктовых магазинов, школ, остановок общественного транспорта, библиотек и парков, так и общую доступность для всех

Методология расчетов не описана, но чуть больше информации о проекте можно найти в статье A Map That Visualizes Walkable Neighborhoods Across the US


#geo_vis #geo_cities

🌎🕊️ GIS_AND_PEACE

#30DaysMapChallenge 2024

Приближается ноябрь, а значит, и ежегодное событие — #30DayMapChallenge! ⭐️

Суть мероприятия — создавать и публиковать карты на заданные темы каждый день 🙃

Для вдохновения можно посмотреть работы прошлых лет и портфолио Topi Tjukanov — дизайнера-картографа MapBox и инициатора «челленджа» 💙

#geo_vis

🌎🕊️ GIS_AND_PEACE

Географический диктант 2024 ✏️

16-17 ноября пройдёт географический диктант от Русского географического общества (РГО) более чем на 1000 площадках по всей стране и даже за ее пределами ⭐️

С сегодняшнего дня доступна демо-версия диктанта для тех, кто хочет поучаствовать онлайн 📱

На сайте РГО есть также возможность потренироваться на заданиях прошлых лет


🌎🕊️ GIS_AND_PEACE

Лекции по городской экономике 📕

Urban Economic Association
в 2020 году провела серию открытых лекций 🔜

Профессора крутейших мировых университетов (Harvard, Princeton, MIT) рассказали о моделях урбанистического равновесия, проблемах миграции, особенностях городов развивающихся стран и о других актуальных темах городской экономики ⭐️

Записи лекций, слайды презентаций, ссылки на литературу выложены
в открытом доступе (eng) 😍

#geo_cities

🌎🕊️ GIS_AND_PEACE

От основ ГИС до веб-карт 🗺

Сбор пространственных данных, их анализ и публикация в веб — неотъемлемая часть работы современного геоаналитика

В ноябре пройдет пятидневный интенсив от специалистов NextGIS, где можно:
🟣познакомитьcя с основами геоинформационных систем
🟡научиться анализировать и визуализировать пространственные данные в QGIS
🟢создавать интерактивные карты в NextGIS Web

Подробнее о курсе Введение в ГИС и основы работы с QGIS и NextGIS Web ⏪

Реклама. ООО «НекстГИС»

Если быть точным – Россия в цифрах 📕

Платформа с открытыми данными и исследованиями России 💛

Здесь можно найти очищенные и готовые для работы наборы данных, а также аналитические отчеты с подробным описанием методологии❗️

Например:
🟣муниципальная статистика России с 2005 года (основан на БДМО Росстата)
🟢волны жары в городах России в 2023 году
🔵состояние загрязнения атмосферы в городах России с 2007 года
🟡природные пожары по данным Рослесхоза с 2000 года


#geo_data

🌎🕊️ GIS_AND_PEACE

Картографический горный день рождения 🏔️

В этом году я отмечаю свой день рождения на практике по картографии в австрийских Альпах 🇦🇹
Сегодня мы на леднике Дахштайн 🧊

Мне невероятно повезло найти сферу, в которой я работаю и продолжаю учиться с огромным удовольствием 😊

Спасибо, что поддерживаете меня, читая заметки в GIS_AND_PEACE 🌎🕊️

1000 и 152 цветовых палитры в QGIS 🎨

Если вам недостаточно стандартных цветовых схем в QGIS, то можно создать новую палитру из болеe чем 1000 уже доступных в программе:
Color Ramp – Create New Color Ramp – Select Color Ramp Type (Catalog: cpt-city) ✨

Про другие ресурсы, которые помогают подбирать цвета для карт, рассказывала тут ⏩

#geo_vis #geo_qgis

🌎🕊️ GIS_AND_PEACE