Записки Ппилифа

Channel photo updated

Все спрашивали где, а я никак не мог начать писать. Только что дописал. Классическая графомания с итогами моего года.

https://garnet-cuticle-0cd.notion.site/2024-85957d9fdcd34874a73cae1a39c86f04?pvs=4

Дисклеймер:

Моё мнение может не совпадать с вашим. Мои мысли могут вам показаться незрелыми. Я не профессиональный журналист, делаю орфографические ошибки и могу использовать ужасные формулировки.

Если у вас пригорает от написанного — закройте этот текст и посмотрите видео с капибарами.

Дорогие студенты.

Когда я вам рекомендовал эту книгу, я не ожидал что вы пойдете на крайние меры. Верните плиз книги назад.

Уважаемые кандидаты, которых я собеседовал и отказал после алгоритмической сессии. Аналогичная просьба.

Давайте прекратим кошмарить бизнес, им достаточно ставки от ЦБ.

P. S. Вышло второе дополненное издание. Не смейте его воровать!

Я буду в Белграде до 12 декабря, если вы тоже там и есть желание попить кофе, пишите в личку :3

Учился с Васей вместе в ЦМФ, он ищет людей на стипедию. От Skynet не спасемся, но все же 🥲
——

📲 Рекомендация — если вам интересно попробовать себя в AI Safety и вы считаете, что у кожаных мешков всё ещё есть шанс, то есть отличная возможность, с которой может помочь мой друг Вася. Далее текст от него:

🎓 Стипендиальная программа Impact Academy для технических исследователей безопасности ИИ

Мы — сообщество Unitaware. Ищем амбициозных и талантливых людей в области ML/AI для участия в стипендиальной программе Impact Academy по безопасности ИИ. Это шанс проводить исследования и работать с лидерами индустрии — и получить от них приглашения в топовые AI safety лабы и проекты (например, Center for Human-Compatible Artificial Intelligence, FAR AI и Mila AI Institute)

💼 Что вас ждет?

• Оффлайн программа (3-6 месяцев с марта) в Сингапуре, Англии или США.
• Исследования и коучинг в сфере AI safety.
• Стипендия ~$5000/мес.
• Перспектива работы в ведущих AI-проектах.

👤 Кого мы ищем?

• Отличный английский и опыт в ML/DL (публикации, стажировки, проекты).
• Программирование на уровне ведущей техкомпании.
• Достижения: олимпиады или учеба на топовых кафедрах.
• Интерес к снижению рисков от продвинутых AI-систем.

⏳ Срок подачи: до 31 декабря (лучше до первой недели декабря).

Если заинтересовались или знаете подходящего кандидата, напишите @vakondyrev, это максимизирует шансы при прочих равных. За рекомендацию подходящего кандидата также предусмотрено вознаграждение.

Красной нитью через мой канал идёт высер, что линейная регрессия это про АБ. Из-за этого мне очень отрадно видеть такие тексты как этот. Всем рекомендую.

https://habr.com/ru/companies/X5Tech/articles/846298/

Решил бросить пить до осени.

But where is everybody?

Все прочитали “Воспоминания о прошлом Земли” Лю Цысиня?

Я в начале года прочитал на одном дыхании. Теперь:

- Тёмный лес моё любимое объяснение парадокса Ферми.
- Я знаю, почему в теории струн так много измерений и куда они все исчезли.
- Я знаю, почему скорось света такая маленькая и скоро будет ещё меньше.
- Я знаю, что инопланетяне газлайтят человечество, подмешивая ему шум в фундаментальные эксперименты.

Все три книги читаются запойно. Это очень безжалостная фантастика, подкидывающая для размышления тонну идей от роли человека в истории и НТП до тепловой смерти вселенной. Всем, кто не читал очень рекомендую.

А для тех, кто прочитал, рекомендую пост моего друга Димы, где он решает тёмный лес с помощью теории игр.

Любой, кто прочитал книгу и без математики знает, что оптимальная стратегия человечества — молчать.

Однако Вояджер уже покинул солнечную систему, а радиоволны бегут от Земли в разные стороны с начала 20 века.

В статейке подробно разбирается, насколько сильно мы спалились и как скоро мы потенциально можем погибнуть и не булщит ли весь этот ваш тёмный лес вообще.

Подписаться на Диму можно тут: https://t.me/data_wondering

P.S. слово Шрушер как раз взято из решения парадокса Ферми, которое называется “Zoo Hypothesis.” Его обыгрывали в серии южного парка (s7 e4).

наконец-то полезная теоретико-игровая модель!

https://arxiv.org/abs/2404.00732

Новый курс Andrej Karpathy выглядит оч сексуально, правда я уже второй месяц не могу досмотреть его подкаст с Фридманом и глянуть что там в его новых вышедших видосах про LLM

- Строим GPT с нуля, с разбором кода в ноутбуке
- Как тренировали ChatGPT (large scale)
- Интро в большие языковые модели (LLM)
- Токенизация в GPT и как ее закодить
- Как воспроизвести и натренировать GPT-2 (124M) с нуля

Всё тешу себя тем, что лето наступило, время появилось и вот ща я всё отсмотрю и кайфану с просмотра....

Про винные фесты

Как вы поняли по кружочкам выше, я за последний месяц посетил больше трёх винных фестивалей. Немного расскажу о них, может быть, кто-то из вас запланирует на следующий год себе путешествие 🙂

Все три феста прошли офигенно, все они идут несколько дней, все они разные. На каждом можно затестить кучу локальных сортов и найти свой личный незабываемый вкус.

С вином и попутно двумя из трёх фестов меня познакомил Лёша, 😘

Часть фоток я нагло спёр с его канала про гедонизм. У него можно там найти много вкусностей: @slaves_of_hedonism

https://telegra.ph/Pro-vinnye-festy-06-15

В Вышке понемногу заканчивается весенний семестр. Каждую неделю обязанностей всё меньше и я чувствую себя всё свободнее. Появилось время не только пить вино на фестах, но и посты писать.

Я рассказывал в прошлом посте, что вписался искать лекторов по ML для майнора в Вышке и выдал большую подборку из прошедших лекций. Курс практически подошёл к концу. Осталось только прочитать одну лекцию про АБ-тесты.

Поэтому хочу поделиться с вами второй подборкой лекций. В курс вписалось дофига классных лекторов. Если кто-то из вас это читает, большое спасибо каждому из вас. Вы офигенные 🤗

Первая часть была из сплошного DL, во второй его поменьше. Каждый лектор даёт введение в свой кусок ML-я, а дальше можно самому копать в него подробнее.

🥛 Кусочек про DL в графах от Эльдара Валитова:

9. Введение в глубинное обучение в анализе графовых данных

Если хочется больше, можно заглянуть в курс Эльдара с ПМИ или в Стэнфордский аналогичный курс, на котором, во многом, основан курс ПМИ. [видео]

Ещё мы два года назад собрали для ML на ФКН классный семинар с базовыми способами учить эмбеды для вершин в графах. [конспект] [тетрадка] [видео]

🥛 Кусочек про временные ряды от разработчиков библиотеки ETNA из Т-банка (Мартин Габдушев и Яков Малышев):

10-11. Временные ряды

Обычно основная проблема в лекциях про временные ряды в том, что люди рассказывают только про ARIMA ииии всё. У меня всегда с этого жутко подгорало. У ребят получилась большая обзорная лекция, где они прошлись по всему спектру задач и моделей, возникающих для временных рядов.

Если хочется копнуть глубже и поисследовать математику, которая стоит за всеми этими моделями, можно закопаться в курс с ФКН от Бори Демешева и Матвея Зехова, все лекции в открытом доступе. Возможно, записи прошлого года поудачнее, тк там нет упоротой вышкинской заставки, когда лектор молчит.

Update: Матвей говорит, что семинары от этого года удачнее, в них было много изменений по сравнению с прошлым :3

🥛 Кусочек про MLOps от Влада Гончаренко

12. Introduction to MLOps
13. Введение в современный MLOps

Полный курс Влада можно найти вот тут. Вроде неплохо выглядит курс от ODS по MLOps, но он проходил три года назад и часть штук могла устареть.

Ещё все очень позитивно отзываются о курсе Макса Рябинина Эффективные системы глубинного обучения. Я пока не смотрел, но планирую летом глянуть свежую шадовскую версию. В открытом доступе есть видео от 2022 года.

Также много инфраструктурных вещей есть в курсе ML для больших данных от Лёши Космачёва. [видосы]

🥛 Кусочек про рекомендательные системы от Сергея Малышева

14. Recsys Intro
15. Recsys Advanced

Если хочется закопаться чуть глубже, рекомендую глянуть лекции с основного курса по ML с ФКН (лекции 11-14), а дальше можно покопаться в репозитории с более продвинутым курсом. Видосов, к сожалению, не нашел 🙁

🥛 Экспериментальный кусочек про области где используют ML. Тут семест кончился, поэтому была только лекция от Димы Сергеева про HealthTech :3

16. Data Science in HealthTech

P.S. Все материалы на гите

Всем привет с винного феста Yerevan wine days из Еревана

Всем привет с винного фестиваля wine garden в Белграде

Всем привет с фестиваля натуральных вин zero compromise из Тбилиси 🤗🤗🤗