Трафик на amazon aws, почему перерасход?

я может туплю простите, но опять же есть cloudfront трафик в 367Гб, а есть еще какой-то трафик без него в 1,1Тб... Почему если весь трафик идет через cloudfront не записывается туда? Может у меня какой ресурс напрямую дергается без cloudfront?

Рустам Салаватов: если честно, то сам страдал от Амазоновской калькуляции. Тут нужен специальный отдел, который должен заниматься исключительно их расчетами :)

Но судя по записям, похоже что да, 1.1Тб где-то ходил с S3 напрямую. Там вроде как в одном регионе бесплатно. Может быть с S3 CDN были в одном регионе? И вообще мог быть такой большой объем работы с S3 напрямую?

Рустам Салаватов: т.е. хотел сказать S3 и CDN в разных регионах.

Максим: я проверил насчет регионов... у CDN нет региональной привязки, тк похоже что в этом и суть)) выбрать регион там не возможно вообще для cloudfront.
Вот значит гдето напрямую ходит трафик с s3... и как его вычислить? запрятить напрямую можно?

Максим: еще похоже нашел возможную причину, это то что я данные отправлял с помощью rclone... увидел по логам что он напрямую зачем-то при отправке делает кучу GET запросов, может в этом дело. Разбираюсь. Тут отписал подробнее https://github.com/ncw/rclone/issues/976

Рустам Салаватов: а rclone не работал в каком-нибудь фоновом режиме? И вообще для каких целей все было организованно? Возможен вариант, что он в реалтайме синхронизировал данные. Можно попробовать также глянуть на объем трафика где работал этот rclone :)

Максим: да как раз там тоже трафик превышен, сервер на softlayer.
но я думаю попробовать s3cmd позже и проверить измениться ли результат.
А rclone использовал как удобное решение для разных типов источников, тк использовал и s3,swift и локальное хранилище... когда все было в одном сервисе не чувствовался трафик тк шел внутри приватной сети.