Владимир Ловцов | ИТ наизнанку

2025 год уже начался!

Привет! Снова январь, новый год — и мы по привычке начинаем задумываться об будущем, ставить цели, планировать и мечтать о "крутых" достижениях. Но давай задумаемся, чего мы на самом деле хотим достичь? Как сделать так, чтобы эти цели не повисли в воздухе и не оказались непомерно высокими? А нужны ли нам эти цели или эти краткосрочные цели не бьются с тем, чего мы хотим достигнуть стратегически.

Вот тут на помощь и приходит подход SMART, который помогает ставить конкретные, измеримые, достижимые, релевантные и ограниченные по времени цели. Но, согласись, одних «правильных» формулировок мало: важно ещё научиться удерживать фокус, не перегореть и не забить на всё под конец февраля или марта, когда начнётся жара на работе и в жизни.

Предлагаю обсудить
- Как грамотно распланировать год и у кого какие стратегии?
- Как оставаться в ресурсе и не потерять мотивацию?
- Как добиться, чтобы цели не просто звучали красиво, а реально сдвигались с места?

Поделись своими мыслями в комментариях.

Немного о себе:
Я всегда держу одну большую цель в голове к которой понемногу двигаюсь, а на год я ставлю цели которые бьюся с горизонтом в пару лет, хотя если честно, то в прошлом году у меня были слишком амбициозные планы, а ресурсов не так много... из-за чего часть моих целей на год пошла к "коту под хвост".

Результат прошлого года:
1. Вывел в продакшн крайне амбициозный проект для банка со сложной архитектурой, на которой будет базироваться всё направление по предодобренным предложениям;
2. Удержал в течении года команду на высоком уровне производительности;
3. Итогом моей работы стало, что наш продукт стал неотъемлемой часть по формированию предодобренных предложений, в процентном выражении фин.результат только от нашего решения (пока в кредитном направлении) занимает порядка 5-10%, а это по меркам топового банка огромный результат;
4. Разработал курс по системному анализу, но запустил его пока только в корпоративных рамках;
5. Заявился на Хайлоуд и получил хорошую обратную связь;
6. Провёл 15 консультаций: менторинг, трудоустройство под ключ, карьерные консультации.
7. Переболел адски, переехал два раза, продал и купил жилье)

С новым годом!! Да, исполнятся в этом году все заветные желания!

В общем сдигаю свой курс на 20 января!!

Владимир, почему такие перемены? Вы не держите сроков!

Ах, если бы! Как говорится порой у человека написана в душе: "люблю и жду сложностей, особенно их решать"😂😂

Сначала крайне сложная продажа квартиры, потом ребёнок после больницы оправлялся и затем в добавок микоплазма на всю семью, да так что уже пошла шестая неделя отвратительного самочувствия, вот как то так. ДУМАЕТЕ ВСЁ? Нет, переезд и уже 2й по счёту за год... Я своё слово держу, только вот из непредсказуемых ad-hoc событий планы меняются так, что предсказать некоторые события не просто крайне сложно, а практически невозможно, а вероятность того, что в небольшой промежуток времени выстрелит всё.. ну не знаю)))

Что и ожидалось, но затронет это пока только большие корпорации

Китайские компании массово заменяют HR-специалистов на искусственный интеллект. ИИ способен проводить до 2500 собеседований в день, что привлекает работодателей. Кандидаты также оценили нововведение: общение с программой вызывает меньше стресса, чем с живыми рекрутерами. @bezposhady

Говорят, что растут, но надо понимать, что инфляция адская и об этом не говорят😁

Короче, не знаю, что за ерунду я подхватил в поездке... Но не вылечился до сих пор, а пообщавшись с несколькими руководителями из разных компаний узнал, что у некоторых сейчас чуть ли не половина болеет и вроде как всё начинается с горла.... У меня вот за последние 4 недели 3 раза голос пропадал полностью... В общем, будьте здоровы и берегите себя) Т.к. на больничном особо не поваляешься: коллеги "скучают", твою работу никто не сделает и CФР много не заплатит. А чтобы не было скушно, небольшое чтиво - ссылка

P.S. мини-статейка навеяна общением с СА))) Расписывать много не стал, так о чем подумал)

Когда мозг пылает, а задачи не становятся проще....

Сижу, значит, дома, состояние адское — какая то простуда скосила, голова трещит, сил нет, а вот на брейншторм почему-то есть. И вот параллельно с попытками заварить чай без того, чтобы забыть, зачем вообще я на кухню пришел, я ломаю голову над задачей: как, чёрт возьми, обработать таблицу весом в 1 ТБ в своей текущей архитектуре?

Тут не просто «пару строк фильтрануть». Тут джойны. Множество джойнов. Сложные операции над всем массивом данных, где результат зависит от всей картины. И вот я сижу, думаю, что использовать и какие инструменты, возможно как бы заставить Apache Spark и Tarantool, это своеобразное «братство», справиться с этой задачей.

Почему это сложнее, чем кажется?
Во-первых, 1 ТБ — это уже не «загрузим в память и поехали». Тут каждый шаг приходится продумывать:
- как разрезать данные на куски, чтобы всё не утонуло в shuffle?
- как джойнить, когда обе таблицы большие?
- как сделать так, чтобы Tarantool на своей стороне не упал в ступор, пока Spark крутит свои колеса?

Во-вторых, я не хочу Hadoop, есть нюансы. Всё на Kubernetes, где Spark чувствует себя более-менее комфортно, но вот Tarantool — это NoSQL-хранилище, которое изначально не заточено под такие сценарии. И да, оно быстрое, гибкое, поддерживает шардирование, но заставить его дружить с задачами масштаба «обработай 1 ТБ за приемлемое время» — это прям испытание, а ещё и со спарком)

Что я придумал (между приступами кашля)? (Возможно придя в себя, пойму, что создаю монстра)

1. Шардирование спасает мир
Без Tarantool vshard здесь вообще никуда. Распределяю данные по нескольким узлам, чтобы не было узких мест. Spark при этом тоже помогает — можно настроить обработку данных параллельно, забирая части таблиц с каждого узла.

2. Делим на куски
Идея проста: даже 1 ТБ можно разбить на более мелкие порции. Можно агрегировать часть данных до джойнов, чтобы уменьшить их объем.

3. Джойны с умом
Тут выбор подхода: либо джойнить данные в Spark через партиции (если таблицы большие), либо попробовать схитрить и сделать часть работы заранее в Tarantool.

4. Хранилище для промежуточных данных
Иногда проще выгрузить часть расчетов в промежуточное хранилище (тот же S3) и работать с результатами как с новым источником данных.

Вопрос на миллион

А нужен ли мне вообще такой подход? Может, проще выделить одну задачу для Tarantool, другую для Spark? Или всё-таки объединить их возможности, чтобы найти баланс между скоростью Tarantool и мощью Spark?

Сижу, ломаю голову, и понимаю: такие задачи — это как раз тот случай, когда тебе одновременно нужен грамотный подход и хороший аспирин.

P.S. параллельно кручу другие связки, но пока ещё не взвесил все за и против.

В тему набравших популярность постов об отмене отсрочки

⚡ ИТ-отсрочка продолжает действовать

В СМИ появилась информация о том, что в скором времени будет отменена ИТ-отсрочка. Это не так. Отсрочка для ИТ-специалистов, в том числе от прохождения срочной службы, продолжает действовать, здесь ничего не меняется.

Были скорректированы общие правила бронирования сотрудников компаний из всех отраслей экономики. Речь идёт о перечне условий, при которых организация признаётся обеспечивающей устойчивую работу экономики и получает по отдельному решению право бронирования своих сотрудников.

Никаких специальных изменений для ИТ-отрасли нет, уже оформленные брони сотрудникам ИТ-компаний продолжают действовать до 21 марта 2025 года. После этой даты получить бронь можно будет по новым условиям. В течение декабря мы доведём до сведения ИТ-компаний обновлённые условия оформления брони.

@mintsifry

Самое обидное, что кажется не попаду в родной университет на Импульс Москва..., надеюсь до Хайлоуда Москва будет лучше. Нельзя такие события пропускать, но вирусы и бактерии не спрашивают😂

Как ни странно, свалился с болезнью повторно, чуть торможу активности. Голоса почти нет и температура никак не уходит нормально. Но уже лучше, не теряйте!

Набор закрыл, в фокус группу войдёт 10 человек.

Зачем IT-специалисту высшее образование? (в продолжении опроса)

Часто слышно мнение, что диплом — лишь формальность, подставка для кружки. Мол, освоил пару языков программирования или прошёл курс нкбольшой — и можно покорять вершины. Но так ли это на самом деле? Попробую поразмышлять, почему высшее образование играет ключевую роль как для разработчиков, аналитиков, так и для все ИТ направлений.

1. Глубина мышления и системное видение

Университет даёт не только знания о конкретных технологиях, но и понимание фундаментальных принципов построения систем. Понимание архитектуры, паттернов проектирования, принципов масштабирования — всё это закладывается через изучение базовых дисциплин и сложных проектов.
Аналитика — это не просто сбор требований и построение графиков. Это глубокий анализ бизнес-процессов, понимание причинно-следственных связей, умение формулировать гипотезы и проверять их. Высшее образование обучает системному мышлению, позволяя видеть не отдельные данные, а целостную картину.

2. Проектирование и решение комплексных задач

Создание эффективного и надёжного программного обеспечения требует понимания алгоритмов, структур данных и оптимизаций. Университетские дисциплины по алгоритмам, теория вычислительных машин, операционные системы, да и просто матан— это фундамент для решения нестандартных задач.

Например, для аналитиков: построение моделей прогнозирования, оптимизация бизнес-процессов, проведение A/B тестов — всё это опирается на глубокие знания статистики, теории вероятностей и эконометрики. Высшая школа помогает овладеть этим инструментарием на продвинутом уровне, правда надо реально учиться, а не просиживать штаны.

3. Как добывать знания и как делать инновации

Когда стандартные методы не работают, и задача выходит за рамки привычного — именно тогда на первый план выходит научный подход и высшее образование как раз учит:

- формулировать проблемы так, чтобы их можно было решать методично;
- проводить исследования, искать и критически оценивать источники информации;
- интегрировать знания из разных областей, создавая инновационные решения.

4. Математический аппарат и логическое мышление

Понимание сложности алгоритмов, работа с параллельными вычислениями, криптография — без серьёзной математической базы здесь не обойтись. Это не просто теоретические знания, а инструменты для создания эффективных и безопасных систем.

Например для аналитиков, математическая статистика, оптимизационные методы, теория игр — эти дисциплины позволяют аналитикам строить модели, которые реально работают и приносят ценность бизнесу, т.е. смотреть более широко.

5. Инженерное и аналитическое мышление

Высшее образование формирует определённый склад ума:

- стремление к оптимизации, надёжности и масштабируемости. Умение предвидеть проблемы и предотвращать их на этапе проектирования и прототипирования;
- способность видеть скрытые зависимости, понимать глубинные причины явлений, предлагать обоснованные рекомендации.

6. Этические и социальные аспекты

Итого, высшее образование — это не просто диплом на полке, как мне кажется, это глубокое понимание принципов, методологий и подходов, которые позволяют решать сложнейшие задачи и видеть решение там, где для многих тупик. Это умение мыслить системно, критически оценивать информацию и постоянно учиться новому.
В мире, где технологии меняются стремительно, фундаментальные знания и навыки, полученные в университете, становятся опорой, которая помогает не только идти в ногу со временем, но и опережать его. Поэтому ни один курс не даст этой базы, это та база, которая идёт от универа.

#почитать #размышления

Тут появился рейтинг лучших ИТ работодателей, интересно😁 а вы что думаете?

https://habr.com/ru/specials/857092/

К посту выше, вообще сейчас сложное время, нужно быть супер адаптирующимся и готовым моментально подстроиться под любые изменения во внешней среде, что является ценой?

- Ценник на профи экспертов должен сдвинуться вверх, т.к. они незаменимые единицы сейчас и компании должны это понимать

- HR рынок подстраивается под работника

- ИТ спецам приходится работать в недостатке ресурсов и на сырых решениях

- фокус на ИБ и кибербезопастноть по максиму

- просто нервы ит спецов, т.к. постоянно отваливаются опоры


Но зато, лет через 10 у нас будет множество великолепных ит решений и продуктов, которые будут полностью конкурентно способны и в большинстве отраслей

Это прям правда и огромная боль ⬇️

Немного устал, но уже почти восстановился, до нового года наверное энергии хаватит🏋️‍♂️. Короче, обещал не раз про начало курса по Системному анализу, в общем заходите в отдельный чат, данный чат только для обучения, не всех возьму и не всех добавлю, т.к. есть ограничения по количеству.

@it_underside

Тут небольшие новости для мира ИТ

1. Наших ребят выкинули из Линекс.... эта новость крайне отвратительная, т.к. нанесён как по мне серьёзный ущерб open community и Linux уже кажется не такой прекрасной ОС. Что дальше?

2. У части компаний в РФ "убили" оплаченные лицензии на продукты JetBrains, пока слухи, но не верю, что они на пустом месте

3. Apple выплатит до $1 млн за взлом системы Private Cloud Compute, в общем пытаются найти уязвимости...

4. Nvidia, та самая компания, которая делает видеокарты для ML и вообще AI стала самой дорогой, но долго там не продержалась


Но если честно, меня больше беспокоит вторая и первая))) после такого, хочется просто крякать ПО и забыть о лицензиями внешнего мира...

⚙️ Проектирование системы для обработки данных в реальном времени

Доброй ночи, товарищи ИТшники! 😴 Хочу немного поделиться мыслями о последних вызовах, с которыми пришлось столкнуться в рамках моего текущего проекта. На повестке дня — проектирование системы для обработки больших массивов клиентских данных за определённый временной промежуток. Архитектурные решения основываются на существующей концептуальной модели моего текущего 🌟 real-time решения. Такая вот задача. 🙂

🗝️ Ключевые аспекты проектирования

В таких задачах критически важно не просто учитывать ключевые параметры — такие как производительность, масштабируемость, отказоустойчивость, эластичность и т.п. — но и обеспечивать баланс между вычислительными ресурсами и требованиями к SLA, которые исходят от бизнеса. Мы говорим здесь о high-load архитектуре, где даже незначительная ошибка в оценке ресурсов или архитектурных паттернов может привести к деградации системы.

🏗️ Архитектурные решения

Архитектура строится на базе микросервисного подхода с активным использованием контейнеризации (Kubernetes) для лучшей управляемости и гибкости. Применяются такие шаблоны, как sidecar для мониторинга и управления конфигурациями, а также для обеспечения сетевой безопасности через service mesh. Строгая изоляция сервисов и возможность горизонтального масштабирования обеспечиваются с учётом потенциальных узких мест, таких как лимиты на пул соединений с базами данных и необходимость оптимизации состояния контейнеров через автоскейлинг на основе HPA (Horizontal Pod Autoscaler).

⚖️ Управление согласованностью данных

Для управления согласованностью данных и поддержания eventual consistency применяем паттерны CQRS и Saga. В частности, для координации распределённых транзакций используем оркестрацию через специализированные инструменты, что позволяет более гибко управлять сложными бизнес-процессами. Важно также учитывать стратегию обработки ошибок и повторных попыток (retry policies), чтобы минимизировать влияние транзиентных отказов на пользовательский опыт.

🔄 Потоки данных и взаимодействие между сервисами

Потоки данных организованы через асинхронные механизмы с использованием Apache Kafka как основной системы очередей, а также для обеспечения Pub/Sub взаимодействия между микросервисами. В случае обработки данных в реальном времени интегрированы Apache Flink, что позволяет поддерживать высокую пропускную способность и низкие задержки. Взаимодействие между сервисами осуществляется через REST API в зависимости от требований к производительности и объему данных, при этом применяется API Gateway для унификации внешних интерфейсов и обеспечения дополнительных механизмов безопасности, таких как rate limiting и авторизация.

🗄️ Кэширование

Архитектура предусматривает применение различных стратегий кэширования — от локального кэша в каждом сервисе до распределенного кэша на базе Tarantool, что существенно сокращает нагрузку на основную базу данных и снижает время отклика для конечных пользователей.

🌟 Уникальность проекта

Этот проект уникален не только в рамках компании 🏢, где я работаю, но и в рамках СНГ 🌍 по масштабу и по сложности. Это серьёзный вызов не только для меня, но и для команды 👥, но именно такие задачи позволяют максимально раскрыть потенциал архитектурных решений 🏗️, синхронизировать технологии и бизнес-цели 💼. Создать такую систему — значит заложить фундамент 🧱 для масштабирования и эволюции бизнеса 📈 в условиях непрерывно растущих требований.

В общем, доброй ночи! 🌙🙂 Это так, мысли на ночь. А в ноябре я всё-таки выйду на конференцию "Импульс" ⚡ и расскажу о своём решении. Буду рад пообщаться в кулуарах. 💬

#ИнженерныеПрактики

Мне всегда было интересно про тех, кто собирает папки с каналами и группами, что какие они молодцы, пока не наткнулся на парачке каналов на один и тот же пост, но со своей оберткой, в общем, тоже решил поучаствовать)) так как это возможноть взглянуть на новые лица и подходы в российском ИТ, что весьма полезно. Да, вот та самая папка «БАЗА по ИТ» (BA/SA/PO IT).


@it_underside

P.S. автор подборки

Всё, я ожил! Начинаю то, что остановил)))

https://deployhoroscope.ru/

Я разболелся, пока все активности на ✋️ 🛑 стоп. Приду в себя и возобновлю.

Как то сейчас с профессиональными аналитиками трудно совсем((( Ищу в команду middle(+) SA, если есть такой знакомый, тогда пиши в лс с пометкой Сиситемный аналитик и резюме, оплата на уровне рынка (финтех/банкинг).

Ссылка на описание

@Vladimir_Lov

Любить удалёнку можно сколько угодно, но есть порой некие преимущества в офисе, например терраса, когда можно в городе удобно и комфортно поработать,да почти на свежем воздухе😄


@it_underside

Этим нельзя не поделиться, ловите, перечитал пару раз и сомнений нет, чётко.

3k подписчиков — спасибо!

У нас тут в группе задали хороший вопрос — какие документы создают БА, а какие — СА?

Мой заход в тему:

БА:
- диаграмма оргструктуры
- регламент бизнес-процесса
- модель бизнес-показателей
- карта процессов предприятия
- контекстная диаграмма процесса
- диаграмма потока создания ценности
- карта клиентского опыта
- модель бизнес-процессов
- модель предметной области
- отчет об обследовании
- аналитическая записка
- реестр бизнес-правил
- бизнес-требования
- требования заинтересованных лиц
- модель проблем и целей проекта
- бизнес-ограничения проекта
- концепция автоматизации
- технико-экономическое обоснование проекта / business case
- сценарии использования информационной системы уровня чёрного ящика
- техническое задание на выбор, заказ, разработку, построение информационной системы
- регламенты применения информационной системы
- макеты отчётов
- алгоритмы расчета бизнес-величин

СА (в автоматизации бизнеса и создании ИТ-продуктов):
- модель данных, словарь данных
- модели жизненного цикла объектов ИТ-системы
- функциональные требования к ИТ-системе
- карта пользовательских историй
- алгоритмы обработки данных
- атрибуты качества ИТ-системы
- расчеты количественных показателей эксплуатации ИТ-системы во времени
- модель надежности ИТ-системы
- технические ограничения ИТ-системы
- контекстная диаграмма ИТ-системы или подсистемы
- сценарии использования ит-системы уровня серого ящика
- предложения по функциональному и структурному разбиению ИТ-системы
- техническое задание на проектирование и разработку подсистемы
- структура БД
- сценарии интеграции системы
- спецификация API
- диаграмма навигации по экранам
- черновые макеты пользовательских интерфейсов
- технический проект на разработку ИТ-системы

Планы 1С-мастеров на ближайшую неделю:
❌ Думать о данных
✅ Подать заявку на обучение в Открытые школы Т1

Аккуратно напоминаем, что мы всё ещё в поиске участников на ближайший набор в ОШ по направлению «‎Младший аналитик 1С»‎.

Открытые школы Т1 — это классная возможность за месяц получить практические навыки и возможность устроиться к нам на работу.

🗓 Старт обучения — 30 сентября.

✏️ Стоимость участия: бесплатно.

⌛ Формат: онлайн, из любой точки России. Мы будем встречаться по вечерам от 8 часов в неделю по 4 часа на вебинары и самостоятельную практику.

Оставляй заявку на сайте. И встретимся на обучении!

#ВКомандуТ1