> вопрос - зачем там экстенты - если там переменный размер блока?

Затем, что экстент позволяет помечать одним махом БОЛЬШОЙ регион. Это снижает оверхед по метаданным в ряде нагрузок. И в большинстве нагрузок это работает лучше. Поэтому большинство новых дизайнов взяли на вооружение эту технику. Правда просто? :)

> По сути это тот же экстент - только называется иначе,

Только максимальный размер сильно ниже. Стало быть оверхед на работу с метаданными - больше. Получилось истинно в духе санок: ни два, ни полтора. То-есть, дизайн уже усложнился, а вот хороших параметров из этого недоразумения никто так и не увидит. Вот и приходится подпирать гигазами буферов. Ну а хренли, рамдиски - они быстрые. Только это не заслуга структур разложенных на диске, мягко говоря.

> и наш профайлинг говорит что с него реально добиться скоростей 2-4 GB/s на
> чтении, и  порядка 2GB/s на запись. Приколись.

А приколись, "в среднем по больнице" экстенты будут при прочих равных в одной и той же конфиге эффективнее подобных недомерков под большинством нагрузок. Хуже от них как правило не становится, за исключением всяких клинических случаев "Шишкин-стайл" (когда некто поставил себе задачу нагнуть механику конкретной ФС).

> Чуть хуже ext4 + raid6,

А чуть - это сколько в граммах? И, конечно же, это было тестировано на свежем и пустом пуле, с нулевым временем эксплуатации, правда же? Ну так, чтобы не сталкиваться с всякой там фрагментацией от CoW и тем фактом что "дефрагера нету, б...ь!". Красиво втирать очки утырки из сана умеют, факт. А вот на неудобные вопросы - увиливают от ответа. А вот это мне уже не нравится, т.к. в результате "под капотом" обнаруживаются далеко не самые приятные сюрпризы, а снимая маркетинговую лапшу с ушей как-то лоховато себя ощущаешь.

> но бонусы архитектуры перекрывают минусы.

И какие там "бонусы архитектуры"? Я в основном увидел массу саночного маркетингового булшита. Но это плохой, негодный бонус. А так - первый блин комом. Ну вот и первый CoW-based дизайн который стал сколь-нибудь массовый - как-то так же.

> А сколько дает ваша btrs ?

Да без понятия - вы даже конфиг не указали, не говоря о том что шансы что у меня "совершенно случайно" окажется "рояль в кустах" в виде точно такого же конфига - достаточно скромные. Тем не менее, помнится btrfs вставлял ZFSу в бенчах даже когда был молодой и зеленый. А с тех пор его оптимизили к тому же. И еще вагон места для оптимизаций остался.