5. Самоочистка и HOT-обновления
Суть
- Самоочистка (page pruning) — быстрая очистка одной табличной страницы при обращении к ней (даже при
SELECT), если: прошлыйUPDATEне нашел места на странице, страница заполнена > 90 % или большеfillfactor. Удаляет версии за горизонтом и дефрагментирует страницу. - Самоочистка не трогает индексы, поэтому указатели вычищенных версий не освобождаются, а становятся dead; не обновляет карту видимости и FSM (освобожденное место идет под обновления, а не вставки).
- HOT-обновление (Heap-Only Tuple): если не изменился ни один проиндексированный столбец и новая версия поместилась на ту же страницу, в индексы ничего не добавляется. Индекс ссылается на голову цепочки; версии связаны
ctid, флаги Heap Hot Updated (идти дальше) и Heap Only Tuple (нет ссылок из индекса). BRIN не мешает HOT (v16). - При самоочистке HOT-цепочки голова становится redirect, промежуточные вычищенные версии — сразу unused (на них нет ссылок из индексов).
- Нет места на странице → разрыв цепочки: новая версия на другой странице, новая запись в каждом индексе (
n_tup_newpage_upd, v16). Лекарство при частых обновлениях неиндексированных столбцов — понизить fillfactor. - Индексы тоже чистятся постранично перед расщеплением страницы B-дерева: удаляются записи, помеченные dead при индексном доступе (kill_prior_tuple), а затем — bottom-up deletion (v14) копий-версий одной строки.
Симулятор
Заголовок раздела «Симулятор»Попробуйте повторить книгу: 3 раза UPDATE → на странице 4 версии (выше fillfactor) → следующий UPDATE запускает самоочистку. Затем включите индекс по s — обновления перестанут быть HOT, а самоочистка будет оставлять dead-указатели. Наконец, откройте долгий снимок и обновляйте, пока цепочка не разорвется.
hot(id integer, s char(2000)) WITH (fillfactor = 75): версия строки ≈2 КБ, на страницу помещается 4, вставить можно 3. Индекс hot_id по id.heap_page('hot', …)
| ctid | state | xmin | xmax | hhu | hot | t_ctid | s |
|---|---|---|---|---|---|---|---|
| (0,1) | normal | 830 c | 0 a | (0,1) | A |
index_page('hot_id', 1)
| key | htid | dead |
|---|---|---|
| 1 | (0,1) | f |
pg_stat_all_tables
n_tup_hot_upd = 0
n_tup_newpage_upd = 0
Когда обновление может быть HOT
Заголовок раздела «Когда обновление может быть HOT»| Условие | HOT? |
|---|---|
| На таблице нет индексов | да |
Изменены только неиндексированные столбцы (не упомянуты ни в ключе, ни в выражении, ни в INCLUDE, ни в предикате частичного индекса) |
да, если есть место на странице |
| Индексированный столбец «изменен» на то же значение | да |
| Изменен столбец, входящий только в BRIN-индекс | да (v16+) |
| Изменен столбец любого другого индекса | нет |
| На странице нет места для новой версии | нет (разрыв цепочки) |
SELECT n_tup_upd, n_tup_hot_upd, n_tup_newpage_updFROM pg_stat_all_tables WHERE relid = 'hot'::regclass;-- доля HOT = n_tup_hot_upd / n_tup_upd. Если низкая из-за newpage → уменьшить fillfactorALTER TABLE hot SET (fillfactor = 80);Проверить на живом PostgreSQL
Заголовок раздела «Проверить на живом PostgreSQL»Вопросы для собеседования
Заголовок раздела «Вопросы для собеседования»Что такое HOT-обновление и какие условия для него нужны?базовый
Heap-Only Tuple update — обновление без добавления новых индексных записей. Условия: не изменились столбцы, используемые в индексах (кроме BRIN), и новая версия поместилась на ту же страницу. Версии связываются в цепочку через ctid внутри страницы; индекс указывает на голову цепочки.
Чем самоочистка отличается от VACUUM?средний
Самоочистка работает в пределах одной табличной страницы, запускается «попутно» при обращении к ней, очень быстрая; не чистит индексы, поэтому оставляет указатели в состоянии dead (кроме HOT-цепочек), не обновляет карту видимости и FSM. VACUUM обходит всю таблицу и все индексы, освобождает указатели (unused), обновляет VM и FSM, замораживает версии, может усечь файл.
Что такое redirect-указатель?средний
Состояние указателя (lp_flags = 2) для головы HOT-цепочки после самоочистки: версия, на которую ссылался индекс, уже вычищена, но указатель должен остаться на месте (на него ссылается индекс), поэтому он перенаправляет на текущее начало цепочки. Промежуточные указатели освобождаются полностью.
Как fillfactor влияет на HOT и когда его стоит уменьшать?средний
fillfactor задает, до какой степени заполнения страницы делаются вставки; остаток резервируется под новые версии при обновлениях. Если таблица часто обновляется по неиндексированным столбцам, а n_tup_newpage_upd растет (цепочки рвутся), понижение fillfactor (например, до 70–90) увеличивает долю HOT. Цена — больший размер таблицы. Для индексов fillfactor тоже есть (B-дерево по умолчанию 90).
Как индекс узнает, что запись указывает на мертвую версию?глубокий
При индексном сканировании, если оказывается, что вся HOT-цепочка, на которую ссылается запись, мертва для всех (за горизонтом) или указатель уже dead, запись помечается как LP_DEAD (kill_prior_tuple, видно в bt_page_items(...).dead). Перед расщеплением страницы B-дерево удаляет такие записи (simple deletion), а если их нет — пробует bottom-up deletion: проверяет видимость «подозрительных» дубликатов-версий, обращаясь к таблице.