⚠️ Good news, everyone!
I think everyone noticed that yesterday all our bots decided to take an unplanned day off and nothing was working. Here's what happened. Yesterday, for some reason, the main database got overloaded. This is a normal event that sometimes occurs, and it used to automatically recover - but not yesterday. Instead of working properly, the database started complaining about data corruption. That happens too, but in this case it was much more serious, so we had to sequentially restore each table and check its integrity. This process took several hours.
Closer to midnight, we thought everything was fine and restarted the system. Overall, things were okay, but
https://t.me/AximoBot message history was corrupted (and tricky: validation had passed, but part of the data was broken). As a result, some users received greetings from the past - specifically, several dozen old messages. We noticed the old spam immediately and cut it off, but unfortunately some of the data had already been sent. We apologize for this and have already added checks so that old posts are filtered out by several additional layers.
So we had to spend some time restoring data for
https://t.me/AximoBot separately, but by morning everything was working normally.
We also had to separately restore part of the data for
https://t.me/download_it_bot. In particular, for a day we disabled fetching data from the cache, and inline search wasn’t working. But now everything is fine.
The situation was unpleasant, but we managed to restore almost everything without losses. To compensate for the downtime, we added an extra 3 days of access for everyone with premium accounts or trials for
https://t.me/AximoBot. Everyone who used the trial for
https://t.me/download_it_bot yesterday in the second half of the day and experienced system slowdowns, please check - it's very likely you were in the group for whom we reset the trial, so you can try again.
Need help? Ask any questions you like in our support group:
https://t.me/madbots_talk.
——————————-
⚠️ Отличные новости!
Думаю, все заметили, что вчера все наши боты решили устроить себе незапланированный выходной и ничего не работало. Рассказываем, что случилось.
Вчера по какой-то причине перегрузилась основная база данных. Событие штатное, иногда случается, и всегда всё автоматически запускалось, но не вчера. Вместо того чтобы работать как надо, БД начала ругаться на повреждение данных, тоже бывает, но только в данном случае всё было намного серьёзнее, так что нам пришлось последовательно восстанавливать каждую таблицу и проверять её целостность. Всё это немного затянулось на несколько часов.
Ближе к полуночи мы уже подумали, что всё хорошо, и перезапустили систему. В целом всё было нормально, только вот у
https://t.me/AximoBot оказалась повреждена история отправленных сообщений (причём хитро: валидация прошла, но часть данных была битой). Как следствие, часть пользователей успела получить привет из прошлого, а именно несколько десятков старых сообщений. То, что пошёл спам старьём, мы заметили сразу и обрубили, но к сожалению часть данных успела уже отправиться. За это извиняемся и мы уже добавили проверки, чтобы старые посты отсекались несколькими дополнительными фильтрами.
Так что пришлось повозиться с восстановлением данных для
https://t.me/AximoBot отдельно, но ближе к утру всё уже работало штатно.
Также пришлось отдельно восстанавливать часть данных для
https://t.me/download_it_bot. В частности, на сутки мы отключали получение данных из кэша и не работал inline-поиск. Но сейчас всё ок.
Ситуация неприятная, но получилось всё восстановить почти без потерь. Чтобы компенсировать простой сервиса мы начислили всем, у кого премиум-аккаунты или триал для
https://t.me/AximoBot дополнительные 3 дня пользования системой. Все, кто пользовался вчера триалом для
https://t.me/download_it_bot во второй половине дня и попал на тормоза системы, проверьте - вполне вероятно, вы попали в группу, кому мы сбросили триал, то можно попробовать снова.
Проверяем, тестируем. Если обнаружились проблемы, не стесняемся писать в группу поддержки
https://t.me/madbots_talk.
