Никита о Нейросетях

Разработчики больших языковых моделей (LLM) всё больше используют Обучение с подкреплением (RL - Reinforcement Learning) и меньше Контролируемую тонкую настройку (SFT - Supervised Fine-Tuning). Что это такое и почему так происходит?👇

В мире искусственного интеллекта происходит интересный сдвиг: все больше разработчиков переходят от SFT к RL. Например, все не "рассуждающие" модели GPT были SFT, а вот o1 (OpenAI) или R1 (DeepSeek) обучались на RL

Раньше модели ИИ обучались в основном с помощью SFT, то есть дообучения на размеченных данных. Это метод, при котором алгоритмы подгоняются под уже известные примеры, что хорошо работает в областях, где есть много данных и чёткие ответы (например, обработка текста). В этом случае мы явно говорим ИИ какие ответы на какие вопросы правильные

Но в исследовании DeepMind, представленном в 2017 году, команда показала, что можно добиться сверхчеловеческого уровня игры в го, используя только reinforcement learning. Вместо обучения на партиях профессионалов AlphaGo Zero учился играть, тренируясь сам с собой, без человеческого опыта.

Почему RL лучше в таких задачах?
1. Отсутствие зависимости от человеческих данных – нет ошибок, предвзятости и ограничений, которые могли быть в исторических данных.
2. Обучение с нуля (Tabula Rasa) – ИИ исследует среду самостоятельно и открывает новые стратегии, а не просто повторяет известные решения.
3. Эффективность и масштабируемость – RL позволяет создавать универсальные алгоритмы, которые можно применять за пределами игр (например, в робототехнике, автономном вождении и трейдинге).

Будущее: RL > SFT?
Хотя RL — мощный инструмент, он не заменит полностью SFT, особенно в задачах с четко определёнными правилами. Однако там, где важны исследование, творчество и адаптация к сложным условиям — reinforcement learning выигрывает.

На картинке можете увидеть скриншот из исследования DeepMind на котором явно видно, что обучение с помощью Supervised Learning имеет свои пределы и ИИ, обученный на этом методе никак не может преодолеть человеческую планку сильнейших игроков, а при использовании RL он сперва сильно отстаёт, а затем происходит резкий скачок, позволяющий обойти самого сильного игрока в мире.

Почему языковые модели могут ошибаться даже по таким простейшим вопросам как "что больше 9.11 или 9.9"?

В процессе исследования оказалось, что при ответе на этот вопрос в нейросетях активируются нейроны, которые ассоциированы с библейскими стихами (цифры выглядят как маркеры стихов в Библии) и поэтому ИИ ошибается, используя порядок стихов, а не математику.

Следующим запросом я воспользовался советом из прошлого поста, попросив использовать код для решения задачи и ИИ справился👐

#Фишки_ChatGPT

Узнаю много полезного из лекции Карпатого про разработку LLM. Напишу несколько постов с полезными выводами. Даже думаю поменять хэштэг на #Фишки_LLM т.к. есть много знаний, применимых к любой языковой модели.

Модель лучше решает задачи, если не просить ее сразу сказать ответ или сказать кратко ответ, а затем объяснить его (Скриншот 1). Она лучше работает когда мы либо не мешаем модели самой начинать писать ответ и предварительно сделать рассуждение, либо явно говорим "сперва подумай, а потом говори ответ" (Скриншот 2)

Это связано с тем, что модель тратит вычисления на каждый последующий токен и если мы сразу запрашиваем ответ, модели не хватит вычислений (одного прохода по нейронной сети), чтобы написать ответ. Лучше когда мы распределяем эти вычисления, дав модели написать множество токенов самой себе, чтобы в конце ей было проще сделать окончательный вывод. Это значит, что она делает множество проходов по своей нейронной сети, чтобы написать каждый токен и в конце ей проще написать ответ.

Про совет: При решении задач, в которых требуется арифметика или что-то решаемое формулой или кодом, скажите модели "Используй код" (Скриншот 3). В этом случае вместо того, чтобы использовать "Ментальную арифметику" (Пытаться придумать ответ словами) она решит задачу с помощью кода и напишет вам ответ.

Обнаружил приложение PixVerse в котором есть куча ИИ фильтров, включая превращение фотографий в видео на котором вас обнимает Иисус

Получается очень мило, а с мемами ещё и очень смешно😆

Несколько первых генераций бесплатно

В комментах бонус с максимально проклятыми генерациями👍

Андрей Карпатый, сооснователь OpenAI, который впоследствии поработал в Telsa и вернулся в OpenAI, чтобы сделать GPT4 и покинуть их снова, начав образовательную деятельность (Мне бы такое описание жизни), выпустил видео, в которым постарался наиболее простым языком рассказать в общих чертах, но при этом весьма подробно, о том как создаются большие языковые модели.

Забавно, что я буквально недавно тоже читал лекцию на эту тему, но в упрощённом варианте :)

Если вы знаете английский и вам интересно посмотреть:
youtube.com/watch?v=7xTGNNLPyMI

Друзья прорабатывают гипотезу нового продукта: устройство с голосовым интерфейсом для общения с ИИ и берут интервью у людей, кто пользуется голосовыми нейросетями или у тех кому интересно было бы о этом поговорить

Если это вы или у вас на примете есть такие, оставьте коммент - вам напишут. Интервью займет ~ 30-60 минут.

—————-
Про то как пользоваться функционалом Operator бесплатно готовлю информацию. Вышла задержка т.к. появились проблемы при запуске. Про то как решал тоже напишу. Но если кому-то невтерпеж и хочется попробовать самому, гуглите: "browser-use/web-ui"

o3-mini

Вышла новая модель с рассуждениями
Правда не понятно куда не mini версию дели😁

Модель доступна бесплатно. Отличная возможность попробовать Reasoning, если вы ещё не пробовали его в ChatGPT или в DeepSeek (В дипсике сразу было бесплатно. Напоминаю обязательно зайти - отличная вещь)

Доступна в 2 вариантах. Стандартная o3-mini и o3-mini-high - думает дольше
Так же выложили системную карту, но почитаю уже завтра. Сегодня ещё с работы не вернулся💀

Ходит слух, что следующая модель будет называться "o5-mini high super deluxe alpha S-rank thunderbolt heavy metal flagship mothership friendship part 2 the revengence"🤪

Operator. Мои выводы

Дошли руки протестировать новый продукт от OpenAI - бояться нечего, у него нет шансов вас заменить. Подождите пару лет.

Если вдруг не слышали про Operator:
Operator — это новый браузерный агент который может видеть веб-страницы, нажимать, печатать, прокручивать и выполнять для вас задачи, например, бронировать тур, заказывать продукты или заполнять формы.
Представьте браузер которому можно написать что-то сделать, например, открыть определенный сайт и заказать на нём продукты для борща или сказать сделать ручную работу возможную в браузере. Вот это Operator

А ещё он не просто читает кнопки на сайте, изучая HTML код, а использует Vision модель, чтобы точно видеть текущую веб страницу

Но без минусов не обошлось:
- На данный момент работает слабо. Не может справляться со всеми задачами
- Работает долго. Вручную реально сделать быстрее, к тому же нельзя оставить работать самого по себе
- Нужен постоянный контроль и поддержка человека. Он часто спрашивает подтверждение того, что нужно выполнить то или иное действие. Он делает правильно, но реально нужно постоянно ему помогать

Это сейчас. У меня твёрдая уверенность, что пройдёт время и мы не будем представлять жизнь без подобного инструмента

А ещё стоит 200$ в месяц. Пока работает только на такой подписке.

Но его можно запустить бесплатно. Точнее не совсем его, а open-source проект, который работает по тому же принципу. Рассказывать?)
————
На видео ускоренный пример как можно использовать Operator для поиска и брони билетов на самолёт

Если прошлый пост показался вам сложным, то вот объяснение как тренируются LLM и как отличился DeepSeek на пацанском языке🤩

Прочитал статью от разработчиков DeepSeek R1. Ребята решили не играть по общим правилам и применили нестандартный подход к разработке LLM. Держите разбор простыми словами🗒

Обычно языковые модели разрабатываются по классической схеме: сначала их подстраивают с использованием Supervised Fine-Tuning (SFT), а затем дополнительно тренируют с помощью Reinforcement Learning from Human Feedback (обучение с подкреплением и обратной связью от человека).

DeepSeek же отказался от обратной связи от человека на первых этапах, изменив принцип использования SFT. Это стало значительным отходом от стандартных методик. Такой метод позволил модели самостоятельно развивать навыки логического построения рассуждений (chain-of-thought), а также способности к самопроверке и рефлексии. Для специалистов в области LLM это стало открытием.

Простое объяснение процесса обучения:

1 этап. Первичное обучение

На первом этапе языковая модель проходит начальное обучение на огромном массиве текстов, включающих книги, статьи, Википедию, веб-ресурсы и другие источники. Основная задача модели – научиться предсказывать следующее слово в предложении, опираясь на предыдущие слова.
После этого этапа модель получает базовое понимание структуры человеческой речи и становится способной формировать осмысленные предложения.

2 этап. Контролируемая тонкая настройка (Supervised Fine-Tuning)

Следующим шагом является дообучение модели на специально подготовленных человеком данных в формате «Вопрос-Ответ».
Люди составляют наборы данных, содержащие возможные вопросы пользователей и корректные ответы на них. Затем модель обучается на этих примерах, чтобы лучше понимать, какие ответы являются уместными, а какие нет, формируя таким образом свою этическую основу.

Однако DeepSeek выбрали иной подход. Вместо традиционной аннотированной тонкой настройки в формате «Вопрос-Ответ» они применили стратегию «Холодного старта». Модель обучалась не на готовых ответах, а на тысячах тщательно отобранных примеров логических рассуждений (цепочки фраз которыми рассуждает человек). Вместо того чтобы просто научить модель давать правильные ответы, разработчики сделали акцент на обучении модели мыслительному процессу, приближенному к человеческому.

3 этап. Обучение с подкреплением и обратной связью от человека (Reinforcement Learning from Human Feedback)

На этом этапе классические модели получают сообщения, после чего генерируют несколько вариантов ответа. Разработчики выбирают лучший вариант, а затем модель дообучается на этих примерах, постепенно повышая качество своих ответов.

DeepSeek снова пошли другим путем. Они применили Reinforcement Learning, но без обратной связи от человека, позволив модели самостоятельно учиться, используя уже сформированные навыки логического мышления.
Лишь на завершающем этапе разработчики включили механизм обратной связи: они отбраковывали неудачные рассуждения (rejection sampling) и окончательно корректировали модель с помощью Reinforcement Learning без участия человека для достижения более точных и сбалансированных результатов.

Вышла бесплатная нейросеть с Reasoning (рассуждениями) от DeepSeek. В ChatGPT за использование подобной нужно платить 20$ в месяц🔥

Работает через https://chat.deepseek.com/

Доступно 50 сообщений в день, что достаточно много по сравнению с ГПТшным o1, где столько же сообщений дают на неделю

На скриншоте бенчмарки. Местами обгоняет o1😘
UPD. На моих тестах работает хуже чем o1, но все равно неплохо. Где то на уровне 4o

Сейчас пробую одни и те же задачи в обеих нейросетях и сравню результаты

Google представили новую архитектуру искусственного интеллекта Titans, которая работает по принципу человеческого мозга и в некоторых задачах даже превосходит его.

В Titans реализована долгосрочная, краткосрочная и постоянная память. Эта модель теперь может выборочно забывать ненужную информацию, запоминая важное. Как и мозг человека, долгосрочная память обучается и обновляется, адаптируясь к новой информации, а также поддерживает параллельную обработку данных, что ускоряет обучение и делает систему более эффективной.

В задачах моделирования, прогнозирования Titans имеет потенциал превзойти все современные модели. Архитектура эффективно работает с анализом геномов, временных рядов и многого другого.

А ещё в контекстном окне Titans 2 миллиона токенов.

Мы стали немного ближе к появлению разума у ИИ

Инженер-энтузиаст научил винтовку самостоятельно наводиться на цель с помощью искусственного интеллекта ChatGPT. За это создатели сервиса заблокировали ему доступ.

Нужно быть осторожней, баня таких персонажей 😁

Пока не вернулся к работе расскажу вам про пару знаменательных событий, которые я для себя устроил в этом году

1. Получил водительские права в ОАЭ

Это было то, что я очень долго откладывал на потом, но после того как друзья из США сказали, что если я приеду к ним в гости с правами, они мне дадут мне машину - откладывание неожиданно прекратилось

После этого я ещё 3 месяца арендовал машину, совершил ошибки новичка, поцарапав и чуть-чуть помяв ее на парковке, а так же задел мусорный бак. На фото я после убирания вмятины вантузом😁
В итоге вернул, возместив весь ущерб

2. Купил свою первую машину

Главный критерий был - максимальная безопасность и камеры со всех сторон, чтобы любая парковка стала мне ни по чем

Теперь я уже несколько месяцев с уверенностью и безаварийно передвигаюсь по парковкам, умело лавирую между мусорными баками, используя все преимущества адаптивного круиз контроля и 540 градусной камеры, а угроза поцарапать машину исходит только от завистников, которые говорят, что у неё слишком красивый градиентный цвет😎

Один старый друг с Мальты говорил, что он приедет в ОАЭ только когда у меня будет машина, так что ждём🎅

Мужчины не нужны, получается?😧

Юмор.

Когда после НГ обнулился салатный кэш и решил потестить GPT на бытовуху.

Я сейчас кушал в Макдоналдсе (это такая заграничная копия Вкусно и Точка), думал над вредностью некоторой еды и придумал очень крутую профессию будущего. Берите на вооружение и можете начать изучать - в любом случае будет и актуально для вас и прибыльно

«Специалист по бессмертию» — это как персональный тренер, но для долголетия. Он помогает клиентам замедлить старение: сначала через простые методы вроде правильного питания, тренировок и сна, а затем — с помощью разных омолаживающих технологий, в работе которых он разбирается. Задача - продлить молодость и сделать старение более медленным и комфортным.

Думаю таких специалистов будут нанимать очень богатые люди, которые хотят прожить как можно дольше и соответственно будут много платить. Вполне вероятно такие уже существуют. Например, я близок к сообществу людей, занимающимся замедлением старения и понемногу добавляю их фишки в свою жизнь. Топы их этого сообщества вполне вероятно уже работают с богатыми дедами ребятами, составляя для них личные протоколы сохранения жизни

Как вам идея взять это на вооружение и сделать 2025 годом личного здоровья? С Новым годом!

Посмотрите этот короткий ролик и отправьте близким как напоминание. С этого момента даже видео нельзя полностью доверять

2024. Португалия. Рождество.

16:14 по местному времени.

Я на краю света, точнее на самой крайней точке Европы.

Дальше только США.

Когда сюда ехал даже не придавал этому значения. Ну край и край.

А сейчас стою тут, жду закат. И знаете, вдохновляет.

Нахожусь в новогоднем отпуске в Португалии и вот из чего на 90% состоят мои диалоги с LLM

1. Фото меню с запросом объяснить блюда из него
2. Запрос на то как есть незнакомое блюдо. Больше никогда не буду кушать устриц, кто вообще их может есть? Это же сопли со вкусом океана.
3. Запрос на объяснение счета. Он на португальском и я проверяю, чтобы туда не было записано блюдо, которое забыли принести.
4. Отправляю фото кондиционера и пульта от него с просьбой помочь включить на обогрев. Он издавал звуки, но не желал работать. Чем то похоже на меня, когда несколько недель работаю без выходных.

Из других кейсов:
- написание поздравления с наступающим
- написание остроумного ответа на комментарий

Наконец-то узнал что за странные огурцы с пупырками продаются в супермаркете. Оказывается это такая дыня

А ещё попробовал новый временный голос Санты Клауса. Как по мне слишком медленный и тихий. Хотя возможно тихий потому что запустил gpt на втором телефоне. На основном почему то пропала возможно демонстрации с камеры🥲

Добро пожаловать в Новый
Мир

😱ВЫШЕЛ! ВЫШЕЛ! ВЫШЕЛ!!!!🤔

Теперь можно включить камеру, показывать окружение чату гпт и общаться об этом!

Прям как в фильме «Она»

Пошел тестить🚶‍♂️

Какой же кайф
Думал вручную в экселе копировать и вставлять ячейки, но потом описал GPT проблему и он дал готовую формулу

А на следующий день друг обратился прям с тем же вопросом и я ему тоже эту формулу прописал

Подготовил для вас нечто особенное!

Это видео про Cursor в интересном формате: Впервые открываю код игры, загруженной из опенсорса, написанной на незнакомом фреймворке, и демонстрирую с комментариями, как с помощью ИИ от Cursor можно разобраться в проекте и добавить новые фичи буквально за минуты

Если вы ещё не программируете, а только думаете о этом - будет не менее полезно

Пошли смотреть до конца:
https://youtu.be/qUPo7d3upXE

Ну и лайк не забудь❤️

Борюсь со стеснительностью

В середине прошлого года я выпустил первый ролик, в котором рассказал о разных, на тот момент самых полезных для меня, фишках использования ChatGPT, а так же про полезные бесплатные ресурсы для углубления в тему.

Спустя время мне стало стыдно за то, как я выгляжу на своём первом ролике, я сам себе начал казаться неловким и нелепым, поэтому скрыл это видео, чтобы другие не увидели...

А уже в этом году под анонсом того ролика начали появляться комментарии о том, что видео не доступно. Люди реально прочитали кучу постов на канале, наткнулись на ссылку и захотели посмотреть. Тут мне стало неудобно уже перед вами.

Открыл ролик, пересмотрел. Ну да, выгляжу забавно, стесняюсь, но при этом всё по делу и рассказываю полезные вещи, про которые другие не говорили и которые должны быть актуальны всегда. Нет какого-то хорошего монтажа, но какая разница?

Вновь открыл ролик для всех:
https://youtu.be/XtT86SGyUpk

Понимаю, что он не наберёт много просмотров из-за своей сути, но всё равно буду рад, если вы посмотрите на парнишку, которым я был год назад и используете себе на пользу, ведь полезного там много.

А ещё готов к выходу гайд по программированию на Cursor, поддержи лайком для скорейшего выхода❤️ (Загружается долго)

Про Cursor или за обучение какой программе берут 78 тысяч рублей

Кратко:
Cursor — программа для разработки, предназначенная для упрощения процесса написания, редактирования и тестирования кода, применяя ИИ. Вещь не сложная в освоении и обучиться ей не сложнее чем обучиться использовать Word

Подробнее:
Есть такой бесплатный, легкий и кроссплатформенный редактор кода "VS Code". Cursor это его форк, то есть тот же редактор кода, но с дополнительными фишками для оптимизации процесса разработки.

Фишки такие:
- Cursor прочитает все папки проекта и проиндексирет содержание файлов (прочитает их, чтобы эффективно находить нужные данные), создавая структурированную карту для быстрого поиска и анализа.. Из этого выходят последующие фишки
- Автодополнение кода. Пока мы пишем наш код - он уже начинает предлагать как дописать строку и по нажатию одной кнопки она будет дописана.
- Автонаписание кода. Мы можем сказать что хотим получить в коде и он, используя своё знание остального кода, допишет его
- Можно добавить отдельные куски кода/ошибки/файлы в отдельный чат и пообщаться про них. Например, попросить объяснить кусок кода или как решить ошибку в контексте именно этого проекта
- Предложения по исправлению/дополнению кода можно применить одной кнопкой. Супер удобно
- Можно использовать разные LLM (GPT, Claude, cursor-small)

Я им пользуюсь уже несколько месяцев и очень доволен. Недавно даже ради интереса написал небольшую игру на фреймворке и языке программирования, который не знаю, просто применяя Claude3 для описания проекта + Cursor для написания кода😁

Минусы?
- Платно. От 20$ в месяц, но есть бесплатный период (Или можно пользоваться своим API ключом и не платить за подписку)

Sora для создания видео от OpenAI вышла в открытый доступ

Теперь каждый подписчик может сгенерировать видео от нейросети - это хорошая новость. Однако туда ломанулся настолько большой поток людей, что временно приостановили регистрацию

На скриншоте возможности для разных уровней подписки. Да, в ChatGPT добавили новую Про подписку за 200 долларов в месяц. У меня когда-то приблизительно такая зарплата была😅

Ссылка: sora.com
Тут можно посмотреть возможности: openai.com/sora
Можно не только генерировать видео, но и заменять элементы в готовой генерации, продлевать видео в обе стороны, делать раскадровку, зацикливать и применять различные стили

Работает, конечно же через VPN. Вот список стран, в которых доступна (не Европа)

Попробовал интересное применение ChatGPT

Теперь мы знаем, что Искусственный Интеллект заменит не программистов, а гадалок

Внимание на последний скрин 😺

Что означает второе президентство Трампа для современных технологий?

Второй срок Дональда Трампа, который начнётся в январе 2025 года, означает существенные изменения в политике в области искусственного интеллекта, криптовалют и электромобилей. Уже сейчас можно обсудить некоторые грядущие перемены и задаться вопросом, будут ли они шагом вперёд или принесут новые вызовы?

ИИ🤖

Трамп пообещал отменить указ администрации Байдена об ИИ, который предписывал  разрабатывать стандарты тестирования и безопасности для предотвращения использования ИИ дискриминационными способами. Будущая администрация, скорее всего, снизит приоритетность защиты этих мер.

Политика в области ИИ — это область, в которой Илон Маск заинтересован оказать свое влияние. Маск управляет xAI и критиковал действующих игроков, таких как OpenAI — фирму, которую он соосновал, но позже дистанцировался от нее и подал в суд. В октябре 2024 года стало известно, что Илон Маск ведёт переговоры с инвесторами из Ближнего Востока о привлечении средств для развития xAI. Он надеется, что к концу 2025 года ИИ-системы смогут превзойти человека по интеллектуальным способностям.

Электромобили🚗

Налоговые льготы на электромобили и другие меры политики, ориентированные на заботу об окружающей среде, скорее всего, окажутся под угрозой при Трампе. Хотя это может быть осложнено его сотрудничеством с Илоном Маском, поскольку Tesla может выиграть от политики, благоприятной для электромобилей. Тем не менее, аналитик Wedbush Дэн Айвс ранее сказал, что «Масштаб и размах Tesla… могут дать Маску и Tesla явное конкурентное преимущество в среде, не предусматривающей субсидирование электромобилей».

Аналитик Bloomberg Intelligence Натан Дин видит всего 30% шанс сохранения налоговых льгот на электромобили при Трампе. Он предсказывает продолжение разговоров о том, что электромобили являются «благом для экономики Китая», наряду с попытками заменить налоговые льготы потребительскими стимулами, которые могут принести пользу традиционным автопроизводителям, таким как General Motors, Ford и Stellantis.

Крипто🪙

Трамп сделал значительные шаги в сторону криптовалютной индустрии, возглавив крупную Биткоин конференцию этим летом и получив значительную поддержку от известных криптоинвесторов. При Трампе индустрия, вероятно, исполнит свое самое заветное желание: отставку председателя Комиссии по ценным бумагам и биржам Гэри Генслера. Дональд Трамп призвал сделать США «биткоин-сверхдержавой». После его победы на выборах биткоин обновил свой исторический рекорд, превысив 89 тыс. долларов.

Теперь переходя на ai.com вы будете попадать в chatgpt - удобно)
Говорят OpenAI еще купили домен chat.com , но у меня не открывает

Вы уже попробовали SearchGPT? Это поисковик как гугл, но с использованием ChatGPT. Я вот не пробовал т.к. слетела подписка и ещё не обновил

Во первых он доступен только по подписке, но это не проблема потому что уже до этого существовал отличный бесплатный поисковик с AI - perplexity.ai . И на данный момент Перплексити всё ещё работает лучше, однако уверен, что OpenAI заберёт их аудиторию

А во вторых он имеет следующие фичи:
- Функция работает быстрее: ответ генерируется почти мгновенно, без долгих задержек.
- Благодаря более чем десятку партнёрств с крупными СМИ, ChatGPT теперь имеет быстрый доступ к самым актуальным новостям.
- Внутри стоит дообученная версия GPT-4o, улучшенная за счёт синтетических данных и дистилляции ответов от более продвинутой модели o1.
- Для поискового индекса используется Bing

В ближайшие месяцы откроется доступ всем пользователям

Пригласили бесплатно посетить техническую конференцию в Абу-Даби как «лидера в области AI/ERP». При этом обычная стоимость билета 2500 долларов

Первое письмо я даже не читал и сразу отправил в корзину (Оно на скрине), вторым письмом они напомнили про первое и я понял, что это был не спам😁

Даже не знаю проситься ли туда отправиться т.к. мало актуальных тем и я вечно загружен, но провести несколько вечеров в столице ОАЭ было бы неплохо

P.S. Скорее всего меня нашли после того как я раздал много визиток на последней конфе, но вообще никому не рекомендую так делать. Теперь день получаю по 5 спам имейлов и 1-2 раза в неделю звонки. Это один из немногих полезных мейлов за несколько лет

Причина устроиться на работу в IT №237

Работодатель оплачивает подписку на ChatGPT

Программистом за 8 недель? Почему курс по Cursor — это просто фальшивая надежда

Увидел сегодня абсурд. На скрине анонс курса по Cursor после прохождения которого обещают сделать из вас программиста, даже если до этого вы никогда не писали код.

На такое ни за что нельзя вестись.

Создание бота — это не просто склеивание нескольких команд. Для нормальной работы нужно понимать, как работают API, как обрабатывать запросы, работать с токенами, а не просто копировать-вставлять готовые куски кода из ассистента. Без базовых знаний ты даже не заметишь, если бот вдруг перестанет работать из-за того, что где-то не хватает кавычки.

Генератор картинок. Это про что? Нужен как минимум базовый бэкграунд в работе с ML, а в частности с нейронными сетями, понимание того, как они генерируют изображения и какие данные они используют. Нужно понимать как работать с серьёзными библиотеками. Не знаю, что они предлагают, но скорее всего опять обращение к существующей модели по API или локально.

Да и любой проект это не копировать-вставить. Можно научиться писать запросы, но быть программистом - это как минимум понимать базу разработки. Правильную базу, а не тяп ляп хуяк-хуяк и в продакшн за 2 месяца. Учеба по такому курсу - деньги на ветер.

Я сам пользуюсь Cursor и это отличный инструмент. Но это только инструмент! Инструмент, который не работает за тебя. Он ускоряет написание кода и дает быстрые идеи для блоков кода, но одновременно с этим совершает ошибки. Я, как разработчик с опытом, вижу ошибки, которые делает ассистент, и могу их исправить. А кто-то, кто только начинает, эти ошибки просто не заметит.
Cursor классный, но строить курс ДЛЯ КАЖДОГО вокруг него - обман.

И вот за это они просят 78 тысяч рублей. Или даже 150 тысяч за подписку на год на их курсы. Если вам обещают, что вы станете программистом без усилий — будьте осторожны, скорее всего это просто обман.

О том как выгодно «не брать первое, что попалось» или сколько стоят линзы для очков в разных магазинах ОАЭ

Несколько недель назад друг подарил две крутые оправы для очков и чтобы их носить нужно было купить новые линзы

Важный критерий - должен быть фильтр синего света и в процессе выяснилось, что они должны быть небьющимися т.к. эта оправа является оправой для очков без оправы😁. Прикреплю или скину фото в комменты, чтобы было понятно

Я посетил 7 магазинов в рамках одного ТЦ. В разных магазинах за одни и те же линзы цена колеблется в пределах 20-30%.

В среднем небьющиеся с индексом 1.53 (средней толщины) стоят 770-1000 дирхам, это 20-26 тыс рублей. Инфляция, блин. Я несколько лет назад в России покупал целые очки, а не только линзы дешевле

Небьющиеся с индексом 1.6 (тонкие) стоят 950-1250 дирхам, это 25-32.5 тыс. рублей

В итоге нашел самое выгодное для себя предложение - небьющиеся линзы с индексом 1.59 за 750 дирхам (19.5 тыс. Р.). Ребята объяснили свои цены тем, что они не заказывают как другие из Германии, а делают тут по немецким технологиям и материалам.

Лайфхак 1 - все цены после дискаунта. Если мне сразу не предлагали, я спрашивал «Какую максимальную скидку вы можете дать?». Эта простая фраза может сэкономить 15-30% от цены, если покупаете тут линзы

Лайфхак 2 - помимо денежной скидки можно получить какие-нибудь допы. Сейчас я этого не получил, но, например, при устройстве на работу если вы не можете выбить зарплату выше вилки - можно договориться получить sign up бонус. Это разовая выплата за то, что ты принимаешь оффер на работу. Компаниям выгодно его дать подходящему кандидату, ведь время на поиск нового - трата дополнительных денег

Ну и когда вам что-то предлагают, всегда смотрите на альтернативы, хотя бы одним глазом

Как и обещал в последнем видео о установке приватного GPT, опубликовал текстовый гайд о том как дополнить приватный ИИ технологией RAG для того, чтобы вы могли загрузить туда файлы и общаться о них без интернета

Гайд бесплатный и доступен всем:
https://boosty.to/nickaboutit/posts/b2bcd0dd-c121-4301-81fd-09272c24c3e9

Периодически буду давать подобный материал на бусти, который будет доступен без платной подписки, поэтому нажмите на "Отслеживать", чтобы не пропустить.

Киберпанк все ближе и ближе. Маск показал новые машины Tesla

На картинках можете увидеть как будут выглядеть Cybercab - беспилотное такси, и Robovan - автоматизированный минивэн без традиционного водительского места

Какие же они красивые, особенно Cybercab. Машины обещают сделать до 2027 года, поэтому ждём к 2030😁

А на видео роботы, которые танцевали на презентации

Пионерам искусственного интеллекта Хопфилду и Хинтону присудили нобелевку по физике

Джон Хопфилд создал ассоциативную память, которая может хранить и восстанавливать изображения и другие типы шаблонов в данных. Джеффри Хинтон изобрел метод, который может автономно находить свойства в данных и таким образом выполнять такие задачи, как идентификация определенных элементов на изображениях

Видео на YouTube. В нем показываю как за несколько минут можно запустить Llama прямо на вашем компьютере и общаться с ИИ прямо как с ChatGPT, но без интернета. При этом ваши данные не будут сохраняться у частной компании
https://youtu.be/6wh_KfFSFjc?si=LyYQSBplcuMCWKr_

Продолжение, в котором рассказываю как туда ещё установить RAG для того, чтобы вы могли загрузить в ИИ свои текстовые файлы, чтобы добавить ему знания выложил на бусти и запустил акцию на скидку (100 рублей вместо 500) для первых подписчиков:
https://boosty.to/nickaboutit/posts/790dbb13-172d-4b72-be82-8fad232f06fd

В течении недели подготовлю текстовую статью о которой рассказываю в видео

Если открываешь - смотри до конца. Так ты поможешь в продвижении и дашь алгоритмам ютуба понять кому рекомендовать мой контент

Я ща умру от смеха

Делаю обложку. Как вам такой вариант? Пока черновой, но я уже 10 минут не могу продолжить работать😂

Представь, что однажды у всего мира или в твоём регионе выключат интернет.
Есть идеи, что делать? Как действовать?

Так и хочется сказать - обратиться за советом к ChatGPT, но без интернета это не возможно... Или возможно?😏

Это была подводка к моему ролику о том, как можно запустить языковую модель локально на домашнем компьютере и общаться с нейросетью без интернета😁

Видео готово. Осталось сделать обложки и выложить его.
А после видео в течении пары недель подготовлю и выложу сюда инструкцию в текстовом виде)

OpenAI выпустила новую языковую модель под кодовым названием o1, которая специально обучена для решения сложных задач с использованием глубокой логики.

Модель o1 превосходит GPT-4o по ряду критериев, таких как решение задач по олимпиадному программированию, математические олимпиады и ответы на вопросы уровня PhD.

Основные улучшения модели o1 связаны с задачами, требующими сложных рассуждений, однако для простых задач, где подобные рассуждения не требуются, её преимущества не так заметны.

Модель o1 будет доступна с сегодняшнего дня для всех пользователей API и тех, кто имеет платную подписку.

Завтра уже попробую с ней программировать. Вообще последнюю неделю использую Cursor, потом напишу про него пост, но как IDE - офигенная. Теперь не представляю как работать без него

Ссылка на пост-анонс о о1:
https://openai.com/index/learning-to-reason-with-llms/

В копилку хороших книг по ML:
Читаю сейчас "Machine Learning Engineering", автор Andriy Burkov. Очень хорошая. Можно купить, а можно и бесплатно читать - вот тут он выложил черновики, которые тянут на готовую книгу (В формате прочитай прежде чем купить) https://www.mlebook.com/wiki/doku.php
На русском тоже есть, в интернете в pdf находил

Что считаю хорошим - написано о применении ML на практике, а не о теории. Сейчас многие курсы и книги по ML более академические и описывают математику внутри машинного обучения. Это хорошо, если вы идёте в ресёрч, но большинство людей занимаются разработкой, а не ресёрчем и эта книга для них
Ну и формат "Прочитай прежде чем купить" классный. Это не будет очередная книжка, которую покупаешь и ставишь на полку. Ты реально можешь её оценить и купить пока читаешь или когда уже прочтёшь, чтобы поблагодарить автора. Мне это напоминает ситуацию, когда скачиваешь пиратскую игру, проходишь её, а потом покупаешь т.к. очень понравилось

Если говорить о минусах - книга 2020 года, поэтому актуальные вещи, ставшие известные после этого (Например, трансформеры) либо отсутствуют, либо о них сказано совсем немного

Я пообщался с частью из ребят, которые победили на недавнем международном соревновании по Искусственному Интеллекту. И вот, что я о них скажу... А так же, что интересного узнал о их школе и олимпиаде на которой они взяли золото

1. Очень необычно было говорить на одном и том же языке со школьниками, которые только закончили 10 и 11 класс. Я видел очень много взрослых, у которых уровень познания мира, а так же понятийная база значительно меньше чем у этих ребят.

2. Они уже понимают чего хотят от жизни и имеют цели на ближайшие годы

Мне рассказали о своих увлечениях олимпиадами, желанием поступить в университет на определенный универ и направление, а так же о дальнейших планах на магистратуру и PhD

В их возрасте у меня было намного меньше понимания своего будущего.

3. Инсайд с олимпиады.
Данная олимпиада проходила в первый раз и попасть на неё оказалось очень легко т.к. была малоизвестна и не широко афиширована
Видимо поэтому как минимум 1 их них посчитал олимпиаду очень простой т.к. изучение Машинного Обучения он начал только в этом году (А за полгода набрать опыта, чтобы взять золото это о-го-го какое достижение), а оппоненты оказались недостаточно подготовлены к соревнованиям по Machine Learning.
Другая грань - олимпиады по Информатике, которые проходят очень давно и взять там призовое место трудно, ведь начинают к ним готовиться с младших классов. По мнению одного из победителей - противники готовились больше к информатике чем к ML

Однако как по мне это не должно уменьшать их заслуг. В любом случае повторить их успех смогли бы менее 1% людей их возраста

А вам или вашим детям рекомендую присмотреться к этой олимпиаде в следующем году

4. Немного о школе, которую они заканчивают.
«Летово» - частная школа-пансион, в которую можно поступить с 7 по 9 классы. Обучение похоже на университет т.к. вместо уроков пары и каждый учится по своему профилю. А благодаря вступительным экзаменам учатся там действительно способные ученики.
Идея при поступлении такая - кандидаты сдают экзамены, самые лучшие из них получают извещение о поступлении. После этого их родители определённым способом подают информацию о своих доходах, а школа (или банк, не запомнил) определяют сколько нужно будет платить за обучение.

Это образует классный социальный лифт при котором дети из обычных семей могут получить элитное образование. (Эх, знал бы я о таких возможностях и было бы у меня желание раньше😳)

Вот статистика по обучающимся за прошедший год: 80% учеников получили стипендии на обучение. Из них 42% учатся бесплатно или оплачивают от 1 до 9% от стоимости обучения.

А полная стоимость обучения без скидки в год, если что, 20 000 долларов😳

Но попробовать туда поступить ничего не мешает, как я понял все экзамены и подготовку можно сделать онлайн. Так что если вы можете - попробуйте. Это лучше чем потом жалеть об упущенных возможностях

А еще я себе тоже сказал доброе утро, а вернее уже день😐

2 недели готовил видео для YouTube о том, как вы сможете запустить частную нейросеть типа ChatGPT у себя на компьютере, при этом без интернета и общаться с ней

Сел просматривать материал, а там больше часа материала у меня не шла запись экрана, а только голоса 💀. При этом весь видео материал занял 2 часа

Сейчас буду разбираться и в процессе перезаписывать, но в любом случае видео будет

Насчет длительности не волнуйтесь. Готовое видео будет выложено в открытый доступ без воды и всего 10-20 минут, а еще с классным монтажом и анимациями

Воскресенье сказало доброе утро через арест Павла Дурова (создателя телеграма)

Если вы храните в телеграме крупные файлы (я сам так делаю) - на всякий случай сохраните их сегодня куда-нибудь ещё. Возможно будут арестовывать сервера в Европе и файлы станут на какое то время или навсегда недоступны

Для тех, кто хранит свои заметки в Сохраненных сообщениях тут, вы можете скачать их все, а так же все ваши переписки. Скорее всего текст не пропадет, но тоже на всякий случай:
- Для этого с десктопной версии (с компьютера) нужно зайти в «Настройки» — «Продвинутые настройки» (пролистать до конца) — и выбрать «Экспорт данных из Telegram»

В комментах политику не развивайте, для этого есть другие каналы. Лучше пишите свои идеи/советы по этому вопросу, чтобы помочь другим и мнение, что дальше будет

Ещё могу добавить - если у вас есть TON, задумайтесь, что делать. Возможно стоит продать. Так же на всякий случай до понимания чем закончится ситуация можно вывести крипту с телеграм кошелька, если она есть (я не знаю насколько в данной ситуации ее безопасно тут хранить, возможно безопасно)

Midjourney дает 25 бесплатных генераций изображений

А ещё миджорни теперь доступен не только в дискорде, но и прям в браузере. В честь этого они раздают по 25 бесплатных генераций изображений, поэтому если еще не пробовали - самое время
Доступно на официальном сайте: midjourney.com