>вообще должно спрашиваться браузерами из коробки.

С чего вдруг? У тебя браузеры спрашивают разрешения можно ли им кэшировать ресурсы? Или спрашивали хоть когда-либо? Или может он тебя спрашивал когда ему можно запускать доп потоки?

Какая вообще программа на твоем компьютере у тебя спрашивает об этом?

Сервис-воркеры в первую очередь это именно это самое высокоуровневое кэширование, которое в доп нагрузку позволяет жс-приложениям работать оффлайн. И сервис-воркер не контролирует свое время жизни, браузер его может запускать, а может вообще не запускать, если ты не обращаешься к данному ресурсу почти никогда.  

Так же,к ак ты управляешь кэшем ресурсов, и разрешениями для сайтов в своем браузере - так же ты можешь управлять и воркерами отдельных сайтов. Во всяком случае в НОРМАЛЬНОМ браузере, есть целая отдельная страница для мониторинга всех зарегистрированных воркеров.