Шрёдингер Кота

Public

Просмотреть канал

30K

50K

35.4K

Не можете присоединиться? @cats_shredinger

1.8k Участники

Обновлено: May 18, 2026 at 8:50 PM

Шрёдингер Кота

AI, NLP, мемы и многое другое Авторский канал Дани Эль-Айясса @dayyass

@cats_shredinger is a dedicated channel for dayyass with regular updates in Мемы

Рейтинг

Глобальный рейтинг

#456

Рейтинг по языку

#45

Рейтинг по категории

#23

-1

Рост участников (Последние 6 дней)

Всего: 1.8K

Рост за 24ч: +0 0%

Последние посты

Шрёдингер Кота

3 мая 2026 г., 11:29

Немного GPT-4 intepretability от OpenAI:
https://openai.com/index/extracting-concepts-from-gpt-4/

1,640

Шрёдингер Кота

3 мая 2026 г., 11:29

Ребята, мне интересно, у меня одного с момента выхода GPT-4o обычный ChatGPT-3.5 откатился до уровня RNN 2015 года? 🤔

1,700

Шрёдингер Кота

3 мая 2026 г., 11:29

Друзья, всем привет) 👋

Возможно некоторые из вас уже знают, что я покидаю SberDevices и в целом Сбер - завтра у меня последний рабочий день 😢

Знаю, что меня в том числе читают мои друзья и коллеги по цеху - хочу обратиться в первую очередь к ним ❤️

Для меня было большим счастьем работать вместе с вами все это время над GigaChat, я искренне считаю, что мы все сделали очень большое дело и сделали это на высшем уровне 🚀
Я много чему научился у вас, вы - топовые ребята в индустрии, уверен, что вы знаете об этом, но лишним никогда не будет об этом напомнить 🤗

Мы ни с кем не прощаемся и не теряемся, я всегда на связи 🙏

Завтра буду накрывать прощальную полянку в Сбере, поэтому всех, кто будет в офисе, буду рад видеть 👀

1,840

Шрёдингер Кота

3 мая 2026 г., 11:29

Друзья, всем привет)

Осенью того года у меня началась череда интересных событий, которыми я не успел тогда поделиться с вами - первый семестр учебного года я читал курс по NLP во ВШЭ и в МФТИ 📖

Честно говоря, давно имел большое желание поделиться знаниями и опытом и наконец-то дошел до этого
По мере чтения лекций и подготовки к ним я сам повторял для себя какие-то моменты из NLP, поэтому в том числе и для меня это было полезно 🔥

Ну а о качестве и полезности курса, тут уж судить не мне, но кажется, что ребята остались довольны 🤗
В этом году планирую продолжить чтение курса

Также с некоторыми студентами мы продолжили взаимодействие уже в рамках написания магистерских диссертаций и вот на этой неделе у них будет защита
Хочу пожелать вам успешно все защитить, была проделена отличная работа - вы большие молодцы и у вас все получится ❤️

1,720

Шрёдингер Кота

3 мая 2026 г., 11:29

Когда дело касается векторизации текстов на русском языке, моим личным фаворитом является модель Multilingual Universal Sentence Encoder ( https://www.kaggle.com/models/google/universal-sentence-encoder/tensorFlow2/multilingual-large) версии large, которая помимо русского и английского может работать с еще 14 языками и которая очень хорошо себя зарекомендовала на многих прикладных задачах.
За примером далеко идти не надо, Давид Дале в своей https://habr.com/ru/articles/669674/ про сравнение рускоязычных энкодеров предложений сравнивает много моделей, где mUSE находится в лидерах 💪

Но есть некоторая "проблема", если так можно выразиться - модель доступна только в версии на TF / TF Hub, при этом я сам не раз ощущал потребность в том, чтобы дотюнить ее под свои задачи.
И вот уже на протяжении двух лет я вынашивал идею того, чтобы экспортировать ее на PyTorch. Более того, я даже два раза предпринимал попытки сделать это, упирался в какие-то трудности и ограничения, и бросал это дело 😭

И вот сейчас я наконец-то довел это дело до конца и экспортировал эту модель в PyTorch, чем хочу поделиться с вами! ❤️
Сама модель доступна в https://huggingface.co/dayyass/universal-sentence-encoder-multilingual-large-3-pytorch, напрямую через torch (пока без нативной поддержки transformers), код конвертации и сама проделанная работа доступны в https://github.com/dayyass/muse_tf2pt 🔥

Честно говоря, работы была не самой простой, и по факту я полностью вручную переписывал граф вычислений TF/ONNX на PyTorch. Надеюсь, что это будет полезно во времена доминирования PyTorch, особенно учитывая тренд с RAG подходами, где как раз таки нужны хорошие и сильные энкодеры для end-to-end обучения 🙏

2,040

Шрёдингер Кота

3 мая 2026 г., 11:29

Друзья, всем привет! 👋

Давно мы с вами не слышались на этом канале, к сожалению, уж такие были обстоятельства...
Если коротко, то можно сказать, что наступила весна, уже и лето близится, и в эти периоды времени я нахожу силы для ведения канала.
Осенью и зимой с этим все сложно 😓

На самом деле мысль написать что-то в канале появилась у меня месяц-полтора назад, но мне не хотелось ограничиваться просто текстом, мол "я жив, всем привет" - мне хотелось обыграть это поинтереснее, сделать что-то интересное и полезное, чем-то поделиться с вами и коммьюнити 🤔

Поэтому я приготовил для вас классную, как мне кажется, вещь, о полезности которой уже судить вам 🤗

Подробнее об этом напишу в посте ниже, а этим сообщение хочется сказать о своем возвращении из спячки - друзья, рад снова быть с вами ❤️

1,640

Шрёдингер Кота

3 мая 2026 г., 11:29

🏆Сегодня мы официально запускаем новый https://dsworks.ru/group/ddf75cd6-6995-4aa4-9eb3-2d69a40f0639, в котором заявлено 5 крутых задач с общим призовым фондом 11+ млн. рублей!!!

1) Strong Intelligence — создать мультимодальную модель, которая обыгрывает знатоков интеллектуальных викторин и показывает суперуровень эрудиции

2) Unique RecSys — обучить ИИ-алгоритм подбирать наиболее релевантный контент

3) Personal AI — создать человекоцентричного ИИ-помощника

4) Equal AI — сделать сервисы доступными каждому — обучить модель распознавать русский жестовый язык по видео

5) Rescue AI — разработать новый способ расшифровки генома

Обо всех задачах подробно можно прочитать https://dsworks.ru/group/ddf75cd6-6995-4aa4-9eb3-2d69a40f0639

Первая же задача https://dsworks.ru/champ/24cbf452-5c7b-44d4-99ba-b2e870742d23#overview (самая сложная и на повестке современных мультимодальных исследований) разрабатывалась нашей командой AIRI + Sber AI — очень хочется получить много интересных крутых решений. Готов отвечать на вопросы, если будут возникать!

Скоро откроем гитхаб и в ближайшее время проведём вебинар, где расскажем подробно про задачи и ответим на возникающие вопросы, а пока желаю всем продуктивного погружения в контекст задач🦾

Следите за информацией)

4,010

Шрёдингер Кота

3 мая 2026 г., 11:29

📷 Photo

#nlp #про_nlp #nlp_papers
🌸Зоопарк русскоязычных NLP-моделей🌸

Вышел препринт, объединяющий всю работу AI Forever над семейством языковых моделей для русского языка!
A Family of Pretrained Transformer Language Models for Russian

13 русскоязычных трансформеров описаны и провалидированы в одной статье:
— encoder (ruBERT, ruRoBERTa, ruELECTRA)
— decoder (ruGPT-3)
— encoder-decoder (ruT5, FRED-T5)
+ их версии разных размеров.

Результаты приводятся для всех моделей, а также в сравненнии с бейзлайнами, например, YaLM P-tune и RuLeanALBERT.
Бенчмарки и тесты: интеллектуальные навыки (RussianSuperGLUE), оценка способности к языку (RuCoLA), оценка токсичности, а также тесты суммаризации, симпликифации и детоксификации текста.

🟣Статья на http://arxiv.org/abs/2309.10931
🟣Хаб моделей на https://huggingface.co/ai-forever?sort_models=downloads#models🟣Все модели: https://huggingface.co/ai-forever/ruBert-base, https://huggingface.co/ai-forever/ruBert-large, https://huggingface.co/ai-forever/ruRoberta-large, https://huggingface.co/ai-forever/ruElectra-small, https://huggingface.co/ai-forever/ruElectra-medium, https://huggingface.co/ai-forever/ruElectra-large, https://huggingface.co/ai-forever/rugpt3small_based_on_gpt2, https://huggingface.co/ai-forever/rugpt3medium_based_on_gpt2, https://huggingface.co/ai-forever/rugpt3large_based_on_gpt2, https://huggingface.co/ai-forever/ruT5-base, https://huggingface.co/ai-forever/ruT5-large, https://huggingface.co/ai-forever/FRED-T5-large, https://huggingface.co/ai-forever/FRED-T5-1.7B

Шрёдингер Кота

3 мая 2026 г., 11:29

📷 Photo

Более 100 млн человек в мире уже используют chatGPT. В чем уникальность и секрет популярности этой модели ❓ Что у неё «под капотом» ❓ И как можно ее усовершенствовать ❓

📍 УЖЕ СЕГОДНЯ ответим на эти вопросы и обсудим все детали на вебинаре «ChatGPT & Co».
⏰ Подключайся 25 сентября в 19:00.
🔥 Ссылку найдешь в своем личном канете после https://rucode.net/final/

С вами встретится один из разработчиков GigaChat, исполнительный директор в SberDevices, магистрант ВМК МГУ Дани Эль-Айясс 👩‍💻

На лекции разберем методы, лежащие в основе типа ChatGPT и расскажем про GigaChat - мультимодальную нейросеть от Сбера.

#десятилетиенауки #МинобрнаукиРоссии #популяризациянауки

2,140

Шрёдингер Кота

3 мая 2026 г., 11:29

Друзья, всем привет!) 👋

Сегодня в 19:00 выступаю с докладом про ChatGPT-подобные модели, присоединяйтесь) 🔥

1,950

Showing 10 of 10 posts

No more posts

Рейтинг

Требуется вход

Отзывы пользователей (0)

Пока нет отзывов. Будьте первым, кто поделится своим опытом!

Шрёдингер Кота

Шрёдингер Кота

Рейтинг

Рост участников (Последние 6 дней)

Последние посты

Рейтинг

Отзывы пользователей (0)

Похожие каналы Telegram

Olesya.mystory

jānam

Афиша от Пермяка

архив темных двадцатых

Hi, Darling

Мемы от Лео (мемы, приколы, юмор)

Кейтеринг Улыбка

💻LAPTOPS.UZ

Похожие каналы Telegram

Olesya.mystory

jānam

Афиша от Пермяка

архив темных двадцатых

Hi, Darling

Мемы от Лео (мемы, приколы, юмор)

Кейтеринг Улыбка

💻LAPTOPS.UZ

Отзывы пользователей (0)

Последние посты