Кто такая Анастасия Тайлакова?
Что известно о биографии Анастасии Тайлаковой?
Вам также может понравиться
Интересно, что за девушка в белом снималась в новом
Так что по другому вопрос означает найти орининал песни
Интересно, кто снимался в новом рекламном ролике Вкусно и Точка!
Интересно, что за девушка с голубыми волосами снималась
Актёр Андрей Чернышов не так уж часто появляется (в
Какие биография и личная жизнь? Похожие страницы: Елена
Что за девушка снималась в новом рекламном ролике Перекрёсток «Впрок» (2022)?
Что за мужчина из рекламы?https://www. youtube. com/embed/bCOIRAjusS8?feature=oembed
- Yappy
- 0 комментариев
https://youtube.com/watch?v=avOSVyUIbyI%3Ffeature%3Doembed
Еще статьи
Кто такая Наталья Вовк и чем занимается?
Интересно, кто такая Наталья Вовк, которую подозревают в убийстве Дарьи Дугиной?
Чем она занимается по жизни?
Какие личная жизнь и биография?
Какие у Натальи есть соц сети, инстаграм?
Интересно, что за девушка в облегающем костюме снималась в новом рекламном ролике Мегафон «Потому что ты» «Мобильный интернет от МегаФона в 1,5 раза быстрее всех. Попробуй!» с Азаматом Мусагалиевым и Брюсом Уиллисом (2021)?
Эта девушка спецстажёр, который питается интернетом и живёт на высокой скорости. Действие рекламы происходит в секретном научном центре компании «МегаФон».
Блог
https://youtube.com/watch?v=32iRxjXRN8k%3Ffeature%3Doembed
У этой записи 6 комментариев
- Настя-
19 Май 2022
ОтветитьЭто как раз что мне нужно!Аноним
30 Май 2022
Ответить - Аноним
30 Май 2022
Ответить - noname
1 Июн 2022
ОтветитьТаланты снимают кино, бездари опу. - Аноним
18 Июн 2022
ОтветитьБОЖЕ,ГДЕ ОНИ ЭТОГО РЫЖЕГО МАЛЬЧИКА-ДАУНА НАШЛИ,АХАХАХАХАХА - Борис
21 Июн 2022
ОтветитьОпа, опа, дыра для аноскопа
Опа, опа, сустав для артроскопа
Опа, опа, корм для астроскопа
Опа, опа, гортань для аутоскопа
Опа, опа, труба для бороскопа
Опа, опа, путь для бронхоскопа
Опа, опа, живот для гастроскопа
Опа, опа, дождь для гигроскопа
Опа, опа, пилот без гироскопа
Опа, опа, слайд для диаскопа
Опа, опа, экран у кинескопа
Опа, опа, чертеж для кодоскопа
Опа, опа, п***а для кольпоскопа
Опа, опа, таз для кульдоскопа
Опа, опа, микроб для микроскопа
Опа, опа, яйцо для овоскопа
Опа, опа, ушко для отоскопа
Опа, опа, мишень для перископа
Опа, опа, жирок для пиоскопа
Опа, опа, печь для пироскопа
Опа, опа, кишка для ректоскопа
Опа, опа, жабень для реоскопа
Опа, опа, нос для риноскопа
Опа, опа, грудь для стетоскопа
Опа, опа, дискач для стробоскопа
Опа, опа, мозг для топоскопа
Опа, опа, речь для фоноскопа
Опа, опа, пузырь для цистоскопа
Опа, опа, больной для эндоскопа
Опа, опа, больной для эхоскопа
Опа, опа, альбА для епискОпа
Главным героем видео стал многорукий курьер.
Торговая сеть «Перекрёсток» объявила кастинг среди покупательниц на роль главной героини для съёмки нового рекламного видео, которая состоится в январе 2022 года.
Заявки принимаются до 7 января 2022 года. В письме необходимо рассказать о себе, прикрепить несколько фотографий (в полный рост и портрет), а также записать небольшую видео-визитку с рассказом о своих увлечениях, профессии и семье.
С отобранными кандидатками предварительно свяжутся и пригласят на кастинг в студию.
«В «Перекрёсток» ежедневно приходят тысячи женщин. Они прекрасны: знают, чего хотят, управляют всем и сразу в своей жизни, принимая любые вызовы современного мира.
В преддверии дачного сезона, с 10 по 31 мая 2022 года, пользователи Vprok. ru Перекрёсток приобрели более 680 тыс. товаров из раздела «Да-ча и гриль», что на 14% больше, чем за аналогичный период месяцем ранее. Всего пользователи потратили на товары для дачи более 75 млн рублей.
Среди ассортимента для отдыха за городом наибольший прирост спроса был в катего-риях «уличная мебель» и «игры на улице»— на эти категории спрос увеличился в 7 раз и в 6 раз соответственно.
В категории «уличная мебель» лидировали табуреты, а в разделе «игры на улице» — мыльные пузыри и мелки для рисования. В целом спрос на товары категории «отдых на природе» увеличился в 1,8 раза.
В разделе «всё для гриля», спрос на который вырос на 5%, пользователи в 1,4 раза чаще заказывали аксессуары для барбекю: щетки для чистки гриля, вилки для барбекю и изделия для раздувания огня. Кроме того, спросом традиционно пользовались решетки, казаны, шампуры, древесные угли и жидкости для розжига.
Также в разделе «продукты» на 18% выросли продажи товаров для маринада, при этом чаще все пользователи добавляли в маринад кефир и томатную пасту.
С весны 2020 года жителям Московской, Ленинградской и Нижегородской областей стала доступна программа доставки заказов весом до 500 кг за город.
В Московской области товары доставляются в пределах Большого и Малого бетонных колец. В конце весны 2022 года радиус доставки в область увеличился до 70 км от МКАД. Заказы в но-вые регионы формируются в ближайших к ним дарксторах, при этом цены на товары между городами не отличаются.
***
Самые интересные новости читайте в нашей группе в VKontakte, а также на канале Яндекс. Дзен. Больше новостей и возможность поделиться своим мнением в комментариях на нашем канале в Telegram. И подписывайтесь на итоговую рассылку самых важных новостей.
Онлайн-супермаркет «Перекрёсток» изменил название на «Перекрёсток Впрок». Новый бренд подчеркивает миссию сервиса — большой ассортимент продуктов по доступным ценам. Разработкой новой рекламной кампании бренда занималось агентство Blacklight.
Онлайн-магазин Perekrestok. ru запустился в 2017 году. Сегодня у компании пять дарк-сторов: три в Москве и по одному в Санкт-Петербурге и Нижнем Новгороде. С января 2020 года онлайн-гипермаркет стал самостоятельной бизнес-единицей внутри X5 Retail Group, которая в мае также запустила сервис быстрой доставки «Перекрёсток. Быстро».
По словам Ивана Калюжного, руководителя по бренду и маркетинговым коммуникациям «Перекрёсток Впрок», клиентам стало сложнее ориентироваться в сервисах.
«Мы решили дифференцироваться в зонтике «Перекрёстка». Мы провели исследования названий из шорт-листа и пришли к выводу, что «Впрок» очень точно характеризует наш формат. Ведь у нас клиенты покупают несколько раз в неделю, заказывая достаточно много продуктов (в среднем чек около 4 тыс. рублей). Поэтому теперь у нас два сервиса — «Перекрёсток Впрок» и «Перекрёсток. Быстро»», — говорит он.
Продолжением изменений стала рекламная кампания. Новая креативная рамка должна была рассказать и об обновлении названия, и о преимуществах сервиса. В центр коммуникации решили поместить курьера, организовав ему elevator pitch.
https://youtube.com/watch?v=c_p12pK84oQ%3Frel%3D0
Состав творческой группы:
«Перекрёсток Впрок» (клиент)
Иван Калюжный — Руководитель по бренду и маркетинговым коммуникациям
Дарья Пашинская — Менеджер по бренду и маркетинговым коммуникациям
Ольга Кочетова — Менеджер по медиапланированию и размещению рекламы
Заботина Софья — Руководитель креативной группы
Ольга Такоева — Старший креативный продюсер
Яна Нафталиева — Младший креативный продюсер
Павел Балыкин — Арт-директор
Максим Перлин — Управляющий партнер
Феликс Умаров — Режиссер
Владимир Ушаков — Оператор
Марианна Ларинина — Продюсер
Юлия Эсауленко — Линейный продюсер
Игорь Рабчун — Второй режиссер
Иван Севастьянов — Композитор, Саунд-дизайнер
Анна Толстунова — Художник-постановщик
Дмитрий Боханов — Кастинг-директор
Борис Куколкин — Художник по костюмам
Елена Дементьева — Художник по гриму
Михаил Борисовский — Директор группы
Мария Бойцова — Постпродакшн продюсер
Известная певица Вера Брежнева появилась в ярком и запоминающемся рекламном ролике для одного из лидирующих сервисов по доставке продуктов в России «СберМаркет», снятом компанией Filmway Production. Певица сыграла роль простого клиента, который заказывает продукты и получает их в рекордно короткий срок.
Яркий и динамичный видеоролик с Верой Брежневой в главной роли был снят под адаптацию хита Blinding lights известного американского исполнителя The Weeknd, который уже не раз покорял чарты. Легкий и цепляющий текст песни перепела сама Вера Брежнева. А хореографию героям ставил Александр Тронов – участник первого сезона шоу «Танцы» на телеканале «ТНТ», «Звезда танцпола» (MTV) и «Танцуй» (МУЗ).
«Видео привлекает внимание к сервису и подчеркивает его конкурентные преимущества: удобное приложение, качественную работу и очень быструю доставку продуктов, на которую уходит от 20 минут. «Ролик в метафоричной форме демонстрирует взаимодействие клиента и сборщика заказов, – отмечает Александр Зарщиков, креативный продюсер Filmway Production.
Главная героиня ролика, Вера Брежнева, заказывает продукты в СберМаркете через мобильное приложение. Каждое действие героини в ее смартфоне вызывает отклик со стороны сотрудника службы доставки: пока Вера поет и добавляет товары в виртуальную корзину, доставщик танцует и собирает продукты, быстро и умело ориентируясь в арт-пространстве магазинных полок».
– Когда заказ собран, зритель отмечает прямую отсылку к клипу Weekend: сборщик начинает левитировать и «подлетает» с заказом к клиенту, подтверждая основной посыл видеоролика о быстроте доставки. Левитировать герою рекламы помогала бригада каскадеров. Завершается песня в видеоролике строчкой песни «Пара кликов – и заказ мой тут».
«Мы рады, что у нас с командами профессионалов СберМаркета и Filmway Production получилось объединить в этом ролике самую популярную песню Blinding Lights, очаровательный голос Веры и яркий видеоряд в фирменном стиле бренда, – говорит Ольга Наджарова, руководитель рабочей группы, рекламное агентство Medor.
– Надеемся, что благодаря этому видео многие потребители смогут воспользоваться и оценить быструю доставку СберМаркета от 20 минут».
Онлайн-супермаркет «Перекрёсток» переименовали в «Перекрёсток Впрок», что точно отражает миссию большой закупки, которую поддерживает площадка.
Perekrestok. ru расширяет клиентское предложение под новым брендом «Перекрёсток Впрок», подчеркивая миссию сервиса – большой выбор товаров для закупки впрок по доступным ценам. Потребитель уже может сделать заказ весом до полтонны на основе ассортимента в 40 тысяч позиций, при этом пользуясь всеми преимуществами онлайн-покупок.
Доставка «Перекрёсток Впрок» осуществляется в день заказа или на следующий день из дарксторов. Таких складов сейчас пять: три в Москве и по одному в Санкт-Петербурге и Нижнем Новгороде.
Минимальная сумма заказа составляет 1 тыс. рублей в Москве, Московской области, Санкт-Петербурге, Ленинградской области и Нижнем Новгороде; 3 тыс. рублей — в Туле, Рязани и Твери; 2,5 тыс. рублей — в Великом Новгороде.
Средний чек по итогам второго квартала достиг значения 4587 рублей. Средний вес заказа сегодня составляет 30-35 кг. До конца 2020 года ассортимент «Перекрёсток Впрок» будет расширен до 50 тыс. позиций. В мобильном приложении «Перекрёсток Впрок» будут действовать акции программы лояльности «Клуб Перекрёсток», а также опции бесконтактной доставки и доставки для пенсионеров.
«Новое название «Перекрёсток Впрок» точно отражает нашу миссию большой закупки. Развитие в сторону онлайн-гипермаркета — закономерный этап эволюции этой модели.
Мы постоянно расширяем ассортимент и продолжим это делать, в том числе за счёт позиций, которые завозим под конкретные заказы покупателей, например, профессиональные корма для животных или морепродукты.
Наша цель — обеспечить клиентов всем необходимым на одной площадке, чтобы им не нужно было самим ездить за покупками и потом нести тяжёлые пакеты до дома. При этом мы сохраняем доступные цены как в гипермаркете.
«Перекрёсток Впрок» придерживается строгих правил хранения товаров в дарксторах, где для разных категорий продуктов предусмотрены зоны с необходимым температурным режимом, что позволяет обеспечить максимальную свежесть продуктов. Наш приоритет — удобство клиента и высокий уровень сервиса», — рассказал управляющий директор онлайн-гипермаркета «Перекрёсток Впрок» Леонид Довладбегян.
Онлайн-магазин Perekrestok. ru был запущен в 2017 году в Москве. С 1 января 2020 года он выделен в самостоятельную бизнес-единицу, что позволило приобрести операционную самостоятельность, в частности, делать закупки, формировать дополнительный в сравнении с офлайн-сетью ассортимент и формировать собственную ценовую политику.
Наряду с онлайн-гипермаркетом «Перекрёсток Впрок» покупателям доступен сервис быстрой доставки в пределах 60 минут с помощью «Перекресток. Быстро», где товары доставляются из ассортимента и по ценам ближайшего супермаркета.
Доброго времени суток!
Мы живем за городом в частном секторе и доставками не разбалованы. Из продуктов бесплатных доставок всего 2: Перекресток Впрок (есть минимальная сумма заказа) и ВкусВилл (всегда бесплатно).
Рядом магазинов нет, только на территории с минимумом необходимого, платой наличными, которых вечно нет и ценами выше среднего.
До ближайшего ВкусВилла 16км. Сами представляете во сколько времени и денег выльется сгонять в магазинчик ребенку за творожком. Да-да, в начале я там покупала только творожок сыну. Срок годности которого 5 суток. много заранее не накупишь. И даже 2 творожка мне везли бесплатно, правда в чеке плюсуют пакет за 6 рублей.
Можно заказать даже 1 пироженку
Удобное и интуитивно понятное. Поиск по каталогу работает хорошо. Карта у меня заведена виртуальная. Если покупаю в магазине, диктую номер телефона и скидка капает в приложение бонусами, которые можно использовать при доставке.
С июня вроде есть акция разнообразное питание. Если выполняешь ее условия, получаешь дополнительную скидку на всё на следующий месяц.
Если делать заказ рано утром, то доставка будет с 10 утра до 12. В другое время доставка в течении 2х часов после заказа (до 21 часа). Доставка бесплатно. Но во время повышенного спроса, может появиться минимальная сумма заказа. В приложении это прописывается. Однажды она составляла 2000 рублей (я решила заказать на следующий день)
Доставку осуществляют через Яндекс доставку. Если установлено приложение Яндекс такси, то курьер легко отслеживается. Для нас это важно, так как у нас на кпп нужен пропуск, и в приложении я вижу все данные, необходимые для этого. Так же я вижу, если он заблудился у нас на территории и могу его сориентировать куда ехать.
К нам пакеты привозят не запечатанными. А в Вологде к родителям привозят пакет заклеенный наклейкой ВкусВилл. В пакет все равно попасть можно, а вот использовать его уже не получится. При удалении наклейки он рвется.
В интернете всегда можно найти промокод на первый заказ.
Сейчас можно обзавестись скидкой на следующий месяц по акции разнообразное питание.
Скидка 20% на любимый продукт. Любимый продукт можно установить после покупки на 500руб в течении 2 дней. Действкует на неделю. В любимые продукты не выбрать вино, крепкий алкоголь, аптеку.
Оплата снимается с карты после того, как заказ собран. При первой покупке и внесении данных карты снимут и вернут 1 рубль для проверки. К сумме в корзине прибавится стоимость пакета 6 руб. так же могут позвонить, если сроки годности не очень и решить с вами, что делать, убрать, заменить оставить. Сумма может измениться незначительно, если есть в корзине весовые товары.
Я не сталкивалась с возвратом, всегда все было хорошо. Но один раз писала в поддержку, так как заказ оформила не на ту квартиру ( до этого заказывала сестре и адрес остался) сразу написала в поддержку, моментально исправили.
Так же однажды мой заказ ощутимо задержался в пути. Поддержка держала меня в курсе и начислили бонус 200 рублей при заказе от 700рублей.
По итогу нам очень выгодно заказывать из ВкусВилл. Мне не нужно тащиться с малышом в магазин и тратить на это время минимум час. Цены как в магазине, и в приложении сразу видно что есть, а чего нет. Да и искать намного проще, чем в магазине. Качество продуктов всегда отличное, ну, а если не повезет, всегда пишите в поддержку, вам пойдут на встречу
В один прекрасный момент вы можете переезжать из одного ДЦ в другой и понять, что не знаете свои системы: их поведение может стать неожиданным. В одной системе вы должны были работать гораздо быстрее, но теперь работаете медленно. В другой — не понимаете, куда приходит запрос, а в третьей столкнетесь с новыми проблемами.
Чтобы проще и быстрее понимать взаимосвязи между системами и легко их оптимизировать, вам прекрасно подойдет distributed tracing. Но как его выбрать, внедрить и не собрать все грабли?
Безкоровайный Денис, директор подразделения DevOps/DevSecOps в Proto Group и Панычев Дмитрий, руководитель разработки в Vprok. ru Перекресток, на конференции DevOps 2021 на примерах показали, как distributed tracing помог им решить бизнес-задачи. Читайте под катом, как они выбирали решение для distributed tracing и обходили грабли.
Долгий отбор товаров на WMS
Представьте себе: складская система WMS (warehouse management system), склад и сборщики заказов. Чтобы сборщики собрали заказ как можно быстрее, логистика по складу и ПО выстроены так, чтобы время сбора заказа было, во-первых, минимально, а во-вторых, предсказуемо. Чтобы у сборщика руки были свободны и ничего не мешало ему собирать заказ, на руке у него закреплен терминал сбора данных, а на пальце — сканер штрих-кодов. А любая его операция в ПО работает быстро (и должна работать быстро).
Но в какой-то момент алертинг сообщает, что процесс сборки затягивается — вместо десятых долей секунды он стал занимать слишком много времени:
График взлетел практически до небес — от десятых долей секунды до десятков секунд.
Проблема воспроизводилась только на одном из складов, и, как ни странно, не самом большом. Посмотрев на трейс от инцидента, стало понятно, что с оборудованием на ТСД и шлюзом проблем нет:
Но зато была замечательная коричневая линия, которая показывала запрос к БД. При этом тот же самый запрос с теми же самыми данными на других сервисах выполнялся быстро:
В итоге виновным оказался планировщик базы: для данного конкретного сервиса он немного изменил план выполнения запроса, в результате чего запрос стал ходить мимо индекса:
Инженеры создали новый индекс, прибили старый, и всё заработало: запрос стал, как и раньше, выполняться за миллисекунды. Но, исследуя проблему по классическому пути, без distributed tracing, найти корневую причину заняло бы больше времени, то есть сборка на складе стояла бы существенно дольше.
Сетевая связанность с SSO
В один момент стало понятно, что есть проблема: не всегда работает SSO, который лишь часть внешней аутентификации через X5 ID. Он находится во внешнем контуре, а само решение (и сервис аутентификации, в том числе) — в двух различных ЦОДах. Хоть и не везде, но SSO начал падать по таймауту, что означало: клиенты не смогут авторизоваться тем способом аутентификации, который выбрали.
С внедренной системой distributed tracing посмотрели трейс, и действительно: запрос падает по таймауту. Система мониторинга не обманывает:
Тем не менее специалист SRE не обнаружил на карте сервисов ошибок при обращении к конкретному сервису. А раз сервис не отдает ошибки, то все запросы к тому самому внешнему SSO завершаются успешно. Но зато в том же самом трейсе был таймаут коннекта к Sentry — в том же самом контуре, где лежал SSO.
Благодаря этому картина стала достаточно ясной. Система, не получая ответ и падая по таймауту от SSO, пыталась записать проблему в Sentry. Но не могла до него достучаться, поэтому соединение с Sentry тоже падало по таймауту. Это происходило на некоторых нодах, и очевидно, эти ноды потеряли сетевую связанность с внешним контуром.
Проблему исправили, переключив балансировку на первый ЦОД, потому что сетевую связанность потерял на самом деле только второй ЦОД. На исследование проблемы хватило меньше одной минуты, вторая была потрачена на переключение. Оставшиеся проблемы были решены в течение некоторого времени, но больше система не пятисотила.
Вы, наверное, уже думаете, что это классная штука, хорошо бы ее себе внедрить. Но давайте немного погрузимся в теорию и посмотрим, как это работает.
В ожидании резкого роста цен петербуржцы продолжают активно скупать продовольствие впрок.
Опустевшие полки обнаружили в том числе посетители магазина сети «Перекрёсток». По их словам, дефицитными становятся предметы женской гигиены, сахар, недорогие макароны и крупы. В компании X5 Retail Group (управляет сетями «Пятёрочка», «Перекрёсток» и «Карусель») заявили, что временное исчезновение некоторых категорий товаров с полок петербургских супермаркетов связано с повышенным спросом и нерасторопностью поставщиков. На складах продукции достаточно, заверил ретейлер.
Ранее торговые сети ввели ограничение на количество товаров, которые отпускаются в одни руки. Оно касается чая, кофе, сахара, муки, консервов, масла, косметики, туалетной бумаги, бытовой химии и других категорий товаров.
Президент России Владимир Путин 10 марта заявил, что власти фиксируют повышение спроса на отдельные группы товаров.
«Нет сомнений в том, что в ходе работы в спокойном режиме будем решать все эти проблемы», — подчеркнул Путин.
Огромная очередь образовалась у магазина Uniqlo у станции метро «Петроградская» после того, как стало известно, что бренд уходит из России. Японская компания предупредила клиентов о прекращении онлайн-продаж и закрытии всех 50 магазинов в России c 21 марта.
Ранее петербуржцы уже осаждали магазины IKEA и OBI, с повышенным спросом после объявления о приостановке работы столкнулись и в сети «Макдоналдс».
Для уходящего из России бизнеса, по всей видимости, будут вводить внешнее управление.
Завод Nissan, расположенный в Петербурге, временно остановит конвейер с 14 марта сроком на 3 недели, сообщили «ДП» в пресс-службе российского представительства компании. Как и в случае с Toyota и Hyundai, о закрытии завода речь не идёт.
Банк России ввёл на полгода лимиты на снятие иностранной наличной валюты для компаний и индивидуальных предпринимателей.
До сентября юридические лица и индивидуальные предприниматели смогут получить со счетов наличные доллары США, японские иены, фунты стерлингов и евро в пределах 5 тыс. долларов США только для оплаты расходов по зарубежным командировкам.
Для физических лиц ранее было введено ограничение на снятие с вкладов в валюте суммы в 10 тыс. долларов.
Власти Петербурга вновь внесли изменения в 121-е постановление, которое регулирует действующие в городе COVID-ограничения.
На фоне снижения заболеваемости снимается запрет на посещение детскими группами музеев, концертов и театров.
Временный госпиталь в «Ленэкспо» больше не принимает пациентов с COVID, всего же более 1 тыс. специализированных коек свёрнуто в пяти медучреждениях.
Золото как замена валюте, призыв бизнеса к Смольному и тренды авторынка
Жителям России на фоне ограничений на операции с валютой предложили хранить сбережения в золоте. Заработать на этом скорее всего не удастся, но задача долгосрочного сохранения средств может быть решена, считают эксперты.
Основным трендом 2021 года на автомобильном рынке Петербурга стало превышение спроса над предложением. Причин тому было несколько, но в первую очередь — разрыв логистических цепочек в поставках и дефицит полупроводников. Второй тренд — ослабление курса рубля к иностранной валюте и рост стоимости автомобилей. Подробности — в материале «ДП».
Власти Петербурга и представители бизнеса на совместных переговорах должны предложить решения в связи с массовым исходом иностранных компаний из города, уверен управляющий партнёр FortGroup Максим Левченко. Он считает, что нужно использовать тот же формат общения чиновников и предпринимателей, который использовался при обсуждении отмены QR-кодов.
Геополитическая обстановка обусловила новые вызовы для застройщиков. Крупные игроки рынка к ним готовы, считает генеральный директор «ЛСР. Недвижимость – Северо-Запад» Юрий Константинов. Читайте интервью на dp.
Встреча глав министерств иностранных дел России и Украины в Турции, сводки Минобороны, заявления иностранного бизнеса — всё, что стало известно о военной спецоперации на Украине и её экономических последствиях 10 марта, — в хронике «Делового Петербурга».
Другие новости
В Петербурге дефицит рабочей силы на строительных площадках может превысить 60%. Ситуацию усугубляет отток мигрантов и падение курса рубля, сообщили в компании «СтройКрафт».
С начала 2022 года петербуржцы оставили на сайте комитета по транспорту более 3 тыс. заявок с жалобами на неправильную парковку. Активнее всего за нарушителями следят жители Приморского района.
Главное здание Санкт-Петербургского государственного университета (СПбГУ) и Академическую гимназию эвакуировали днём 10 марта из-за сообщения о минировании. Никаких подозрительных предметов в ходе проверки обнаружено не было.
«Невский экологический оператор» оспаривает штрафы за несвоевременную уборку мусора по итогам проверок, прошедших на старте мусорной реформы, в январе 2022 года. Пока НЭО направил 43 иска к ГАТИ.
Что выбрать для distributed tracing
Чтобы понять, что лучше — купить инструментарий, сделать его самим или поискать OpenSource — определитесь с критериями. Например, инженерам Впрока нужно было внедрить distributed tracing быстро, но при этом покрыть весь имеющийся у них разнородный стек технологий. Для идеальной реализации вся система также должна была быть стабильной и поддерживаться вендором, а команда — обладать достаточным опытом работы с ней.
Если говорить про ручную инструментацию, даже на базе готовых инструментов — то это достаточно долго и дорого относительно тех ресурсов, которые необходимо потратить. И наконец, у компаний, которые пошли по этому пути, обычно есть проблема: когда запрос проходит через множество разных сервисов, часть которых еще не покрыта, то ценность distributed tracing сильно падает. То есть это нетривиальная задача: написать самим всё и сразу, особенно когда реализовать нужно достаточно быстро — как это было во Впроке. Поэтому они выбрали коммерческое решение.
В принципе, на рынке есть несколько подходов к distributed tracing, чтобы всю инструментацию за вас делали агенты:
Возможно, теперь вы думаете, что реализация distributed tracing должна пройти без проблем, но на самом деле в таких проектах есть большое количество подводных камней, сложностей и граблей.
Проблемы и сложности при внедрении distributed tracing
Вот краткий список граблей, с которыми столкнулись инженеры Впрока.
Если говорить про инструментацию всего, то это огромные объемы данных, которые генерит система distributed tracing. Кто-то для снижения нагрузки решает эту проблему сэмплированием трейсов. Но это не дает гарантии того, что когда вам нужно найти проблему, вы найдете именно ту транзакцию, тот трейс, который вам нужен.
Другая проблема связана с детализацией трейсов. Если у вас неполное покрытие, то вы не видите какую-то критичную часть, через которую проходит ваш запрос, и по сути, ценности очень сильно теряются.
Естественно, когда вы сами внедряете систему, нужно постоянно думать про TraceContext, не забывая его делать. Это решается частично шаблонами ваших микросервисов, но все равно это время разработчика, которое нужно затратить на инструментацию этих вещей.
Если говорить про стандарты, то не всегда они стыкуются с их конкретными реализациями, потому что одни и те же вещи можно назвать по-разному. Разные команды разработки могут использовать разные нотации. Хотя по сути данные одни и те же, но у них, например, разные названия тегов, и поэтому всё вместе сложно склеить, как и анализировать. Даже используя одни и те же, казалось бы, стандартизированные вещи, все равно можно столкнуться с разным подходом к реализации.
И, конечно, существуют риски, как в любом проекте: сроки, ресурсы и влияние на стабильность приложения. Посмотрим на примерах Впрока.
Нагрузка на CPU на проде
Что случилось? В один прекрасный момент на app-нодах (PHP) начало расти потребление CPU со временем, причем пропорционально нагрузке и достаточно непонятно. При отключении агента всё возвращалось в норму
Кто виноват? От глубокого и долгого исследования инженеров спасло, во-первых, понимание, что агент — это JVM. Они знали об особенностях работы ее с процессором в некоторых случаях. А во-вторых — то, что сами по себе агенты были раскатаны на 20% нод. Всё это помогло достаточно быстро выявить прямую корреляцию агента с потреблением CPU.
Что сделали? Во-первых, поставили reboot, чтобы после него JVM некоторое время она не перегружал процессор. На некоторых нодах reboot поставили раз в 3 часа. После чего стали разбираться с вендором и выяснили, что архитектура самого агента под этот кейс не совсем подходит. Потому что именно в этих условиях он архитектурно будет себя вести себя именно так.
У агента отключили ряд функций, после чего вендор достаточно долго дорабатывал и пересматривал его архитектуру. И после того как выкатили обновленную версию агента с новой архитектурой, больше таких проблем не воспроизводится. Это ясная и понятная проблема, с которой может столкнуться каждый, кто внедряет в свои продовые процессы стороннее решение.
Автообновление агента на проде
Что случилось? Начал пятисотить сервис аутентификации, причем только он, иногда, и в Kubernetes. Но примерно 1 из 200 пользователей мог аутентифицироваться только со второго раза.
Кто виноват? Ситуация не была такой уж очевидной — в APM, Sentry и логах ничего криминального не было. Разбирались достаточно долго, пока один из SRE-инженеров не попал на конкретный трейс процессов в момент исполнения, где неожиданно обнаружил следы агента. Когда отключили APM и distributed tracing, то внезапно пятисотки прекратились. Но у нас же везде то же самое, у нас же везде стоит — в чем проблема?
Все оказалось достаточно просто: агент конкретного решения автоматически обновляется в кластере k8s в случае, если не указано иное, если не зафиксирована версия. А новая версия агента приводила в некоторых случаях к крашу приложения. Да, ребята забыли, что версию нужно зафиксировать. Они фиксировали их на предыдущих сервисах, этот сервис был инструментирован позже. К тому же они не думали, что кому-то в здравом уме придет в голову что-то автоматически обновлять на чужом проде.
Что сделали? Зафиксировали версию агента, и проблема была решена. Коллег из этого конкретного решения попросили отключить обновление для всех.
Остаться без мониторинга?
APM — это круто и здорово, но альтернативные системы также нужны. Любое решение, которое полностью поставляет всю информацию о ваших сервисах и системах (особенно на достаточно небольших и достаточно простых инфраструктурно проектах), иногда может приводить к вопросам: а зачем нам другой мониторинг, зачем нам его вообще поддерживать?
Но если падает APM, то есть вариант остаться вообще без мониторинга. Во Впроке был случай, когда на 20-30 минут инженеры остались без мониторинга, потому что одновременно с ним упал и APM. Такая ситуация возможна, и от нее нужно страховаться по максимуму.
Нужно больше места!
Абсолютно каждый запрос записывает всё, что он делает. И для хранения этого объема, как его ни архивируй, как ни складывай, необходимо очень много места. В Перекрестке уже не так, но когда-то было прямо совсем тяжело.
Сейчас это порядка 30 Тб, но не с очень большим горизонтом хранения полностью детализированной информации для быстрого анализа — порядка 6-7 дней. Агрегированная информация хранится до 3-4 месяцев. При этом эти 30 Тб — это быстрые диски, поэтому это не всегда дешево.
Зачем это всё нужно?
Distributed tracing — это тайминги и анализ производительности систем. Потому что, когда мы рассматриваем один и тот же вызов с разных сторон, склеивая все спаны в одну систему, то можем понять, сколько времени исполнялся каждый вызов и на что ушло это время:
Например, сколько времени один сервис ожидал вызова другого сервиса. Или мы понимаем, в какое время в сервисе была произведена какая-то работа — и мы знаем, сколько миллисекунд это заняло. Или же это была сетевая задержка. Причем необязательно при межсетевом взаимодействии, это могли быть задержки, связанные с межпроцессным взаимодействием или чем-то еще.
Если описывать коротко, то distributed tracing — это способ понять распределенную систему, что в ней происходит и какие сервисы как обрабатывают запросы:
- Через какие сервисы проходят запросы? Например, через какие сервисы проходит один запрос?
- Сколько времени обрабатываются запросы в том или ином сервисе?
- Если есть какие-то проблемы, то где именно они возникают в распределенной системе?
Также distributed tracing напрямую связан с KPI производительности — таким, как Golden Signals:
По сути, из анализа результатов работы distributed tracing можно получить данные, которые отвечают на вопросы:
- Какой процент вызовов завершились ошибкой?
- Какая длительность исполнения транзакций по 90-му перцентилю?
- Сколько вызовов в секунду обрабатывает сервис X?
В принципе, их можно взять просто как метрики, но по сути, вы можете косвенно, на основе анализа трейсов, эти метрики сразу получить. А это уже часть observability.
Distributed tracing – часть observability
Как мы знаем, observability — это логи, метрики и трейсы. Но не только это, а еще и контекст, в котором все эти данные обрабатываются и интерпретируются. Как правило, в трейсах уже содержится какая-то информация, связанная с ошибками. Практически все реализации distributed tracing собирают ошибки и логи напрямую с приложения, либо их можно туда отправить вручную.
То есть, внедрив distributed tracing, вы уже больше чем на треть приближаетесь к observability, потому что и метрики, и логи также можно получить из трейсов.
Зачем тогда нужно observability? Мониторинг — это некий реактивный процесс: мы отвечаем на вопросы: что и когда сломалось, и, как правило, уже после того, как оно сломалось. В случае observability мы действуем проактивно и, как правило, отвечаем на более сложные вопросы: почему сломалось, как сломалось и как предотвратить, чтобы не ломалось дальше.
В случае кейса про SSO и сетевую связанность observability поможет не только быстро обнаружить виновника и причины проблемы, но и быстро, если не исправить проблему, то начать действовать и свести проблему к минимуму. Потому что distributed tracing — это не только метрики производительности. Есть замечательная метрика time to repair, и distributed tracing позволяет уменьшить время, которое необходимо на восстановление системы в работоспособном состоянии. Поэтому это очень важно для DevOps и SRE.
Distributed Tracing – плюсы использования для Dev и SRE
- Понимание всей картины распределенной системы;
- Детальный анализ прохождения запросов;
- Выявление узких мест;
- Возможность просмотреть транзакцию целиком.
Это такой helicopter view на всё. Но при этом вы можете как под микроскопом рассмотреть каждую конкретную транзакцию и понять, как проходит запрос в том или ином сервисе, какие есть узкие места. Ключевое — это понять, как улучшить систему, смотря на нее — с помощью distributed tracing — от общего обзора до мелких деталей.
Как работает distributed tracing
Итак, допустим, у вас есть несколько сервисов, которые друг с другом взаимодействуют. Чем сложнее становится инфраструктура и чем она более микросервисная, тем сложнее будет это взаимодействие. Сами сервисы при этом могут быть написаны на разных языках: Node, Java, Go, PHP или еще каком-то. Задача в том, чтобы вся цепочка взаимодействий предстала в наглядном, визуально понятном представлении:
Как правило, в реальной жизни примеры гораздо более сложные
Чтобы получить такую цепочку, нужно еще немного углубиться в теорию, и начнем мы с понятия вызова. В рамках отслеживаемого процесса — обычно это запрос между двумя сервисами — вызов описывает деятельность. Как правило, в микросервисной среде нам важно понять, как один сервис общается с другим, с базой, с очередью, с Elastic или кэш-системой. То, что происходит внутри самого процесса в микросервисной среде — в рассматриваемом контексте менее интересно.
Каждый вызов при этом состоит из одного или нескольких спанов. А трейс состоит из одного или нескольких вызовов, объединяя их в одну цепочку. Эту концепцию и терминологию (трейсы, спаны и т. ) довольно давно придумал и описал Google: «Dapper, Large-Scale Distributed Systems Tracing Infrastructure». А мы все теперь ее используем, в том числе, в концепции OpenTracing (The OpenTracing Semantic Specification).
Когда некий сервис обращается ко второму сервису, то этот вызов сначала снимается с вызываемой системы, а потом он же — с вызывающей. В distributed tracing для этого есть понятия SpanId и TraceId — то, что вы как разработчик, сами прописываете, либо это автоматически делает какая-то другая система. В каждом спане есть основной и дочерние вызовы:
Мы понимаем, что вызов — дочерний, если он относится к тому же TraceId, который был в первом вызове, но его SpanId уже другой.
Чтобы понять, что эти несколько спанов относятся к одному вызову, используется TraceContext. Он описывает, какой из трейсов родительский, какой — дочерний, и как они связаны друг с другом. Так, собрав два разных спана и склеив их вместе, мы можем понять, что это один и тот же вызов:
Например, GET /shop есть синий и желтый, но они оба описывают один и тот же вызов.
Подведение итогов
На скриншоте слева обратите внимание на время — это 5:00 утра. Для экстренных собраний Впрок использует Discord, и некоторое время назад, когда еще не все сервисы были инструментированы, в пять утра можно было наблюдать две группы людей в двух переговорных. Сейчас инженеры стали спать лучше и больше:
В заключение хотелось бы сказать, что distributed tracing — очень эффективный инструмент для:
- Ответа на вечный вопрос «Кто виноват?» Distributed tracing помогает это понять до конкретного сервиса, эндпойнта и даже транзакции. А если есть интеграция с системой релизов, то и до конкретного человека.
- Понимания работы системы во всех её взаимосвязях. Чем более сложна ваша система, тем больше выгоды компания получает от внедрения distributed tracing в том или ином виде.
- Поиска узких мест. От общего вида (helicopter view) можно углубиться и под микроскопом посмотреть каждую транзакцию, каждое узкое место. Понять, почему оно узкое, сколько запросов обрабатывается, где конкретно проблема, избавиться от этих узких мест — и лучше и больше спать.
Видео выступления Дениса и Дмитрия на конференции DevOps Conf 2021:
Профессиональная конференция по интеграции процессов разработки, тестирования и эксплуатации — DevOpsConf 2022 — пройдет 9 и 10 июня в Москве, в Крокус-Экспо, совместно с TechLead Conf.
Обсудим инженерные процессы в IT от XP до DevOps & Beyond, must have инструменты и практики изменений в командах для быстрых и качественных релизов. Программный комитет сейчас в процессе формирования расписания. А пока вы можете посмотреть отобранные доклады и купить билеты.