Приятная новость для ваших сайтов!
Лучший и самый простой и удобный сервис по анализу проблем сайтов для владельцев и оптимизаторов:

💣 30% скидка и free доступ до 4.04 на Netpeak Spider 3.0

Netpeak Software выпустил Netpeak Spider 3.0 - самый крупный релиз за всю историю существования продукта (более 300 изменений)
Все конкуренты нервно курят в стороне... Выше отлько звезды

Самые важные изменения:
⚡анализ сайтов-гигантов;
⚡гиперскорость сканирования;
⚡продвинутая SEO-аналитика;
⚡и более 300 других улучшений.

До 4 апреля вас ждёт бесплатный триал, чтобы вы смогли оценить обновление программы и поделиться впечатлениями!
Релиз и 30% скидка тут - https://goo.gl/68ZzrS

Подробнее обо всех изменениях читайте в посте на нашем блоге
⬇
https://goo.gl/2TUREt

привет, на днях займемся исправлениями

привет! пару недель были в полном ауте от работы, любовались киевскими пейзажами с любимыми родственниками, приехавшими погостить пару дней в столицу. Скопилось много сообщений, все видим не паникуйте, временные затруднения, сервис ни в коем случае не умер, работаем :)

В общем, в чем суть:
- все нормально работает как и раньше просто оочень медленно.
- большой наплыв пользователей и лишних тестовых проектов, в ближайшее время сделаем ограничение по общему количеству проектов на аккаунт, т.к. все равно те у кого реальный магазин - грузят в основном один проект для своей группы, а остальные - забивают товарами пустые группы и создают десятки дублей просто чтобы потестировать.
- сделаем ограничение на удаление, оно будет доступно не сразу а через несколько часов, т.к. слишком часто пользователи добавляют/удаляют проекты по 10 раз через 2-3 минуты, думая что тысячу товаров реально загрузить за пару минут... а это просто забивает очередь и мешает всем.

эти микропоправки полностью избавят от текущих проблем и позволят идти дальше.

уважаемые пользователи!
Умоляю! 🤕😭

перестаньте:
- добавлять кучу бессмысленных одинаковых выгрузок
- удалять проект каждых 5 минут
- грузить для теста проекты по 10-15 тыщ товаров...

клянусь поголовно захожу смотрю добавился проект на тыщу-две товаров, товары встали в очередь загрузки, загружаются себе понемногу, нагружают сервер... хлоп, удалился проект - товары снова встали в очередь удаления. потом опять новый проект, абсолютно тот же... снова удалился... через 5 минут еще один, опять удалился...

и так по кругу в среднем от 3 до 6 раз, ЗАЧЕМ?

неужели вы думаете что за 5 минут можно загрузить тыщу ваших товаров? даже сотню картинок - тоже тяжело т.к. каждую картинку нужно скачать на сервер, обработать, загрузить на сервер ВК, обработать там, получить ее id, добавить в нашу базу... + у ВК еще свои лимиты есть..
кроме того бывают магазины где у товаров не 1 а сразу 5 изображений или больше, и загрузка соответственно длится в 5 раз дольше, обрабатывая по 5 изображений для каждого одного товара.

все это мешает нормально выполнять загрузку в совокупности всем пользователям, т.к. объемы передаваемой информации не резиновые.

----------------
на данный момент сервис в состоянии загружать по 500-600 новых товаров в час для 20 магазинов одновременно а обновлять (если не требуется загрузка изображения) и того больше - до 20000 обновлений товаров в час, то есть если в среднем у магазинов поменялись цены на 100 товаров то это выходит 200 магазинов в час.

но эти объемы не выполняются как нужно и сервис страдает изза того что на 10+ новых пользователей которые добавляются ежедневно выходит в сумме по 50-70 новых проектов из которых 90% удаляются ими же через каждых 5 минут захламляя базу кучей товаров которым так и не суждено быть загруженными.

не надо так =/ прочитайте пожалуйста сообщение перед добавление проекта - мы ведь там просим дождитесь пожалуйста загрузки, она может длиться час и больше, просто потому что база сильно захламлена.
---------------

пишите ваши предложения, подскажите что можно придумать чтобы остановить поток дублей проектов, может ограничение какое-то внести чтобы удалить можно было только через сутки к примеру? или ограничить пока например общее количество проектов не больше двух чтобы не добавлялось куча всего?

привет, пока немного разобрались с проблемой добавлением, увеличили в 3 раза скорость загрузки, но это еще не все, пришло озарение - удалось найти проблемное место, придется многое переделать НО скорость загрузки должна возрасти просто неимоверно, ожидаем что добьемся загрузки до 800-1000 товаров в час (выше просто невозможно т.к. лимиты ВК не допускают больше 1000 в час), скорее всего увеличим обновление прайсов с 4 раз в сутки до раз в 3 часа :)

снова к сожалению немного сдвигаем подборки, но мы не рассчитывали что будет столько пользователей, более 650 тысяч товаров, 300+ активных проектов, каждый день добавляется десяток-другой новых...