Branch data Line data Source code
1 : : // Copyright (c) 2009-2010 Satoshi Nakamoto
2 : : // Copyright (c) 2009-2022 The Bitcoin Core developers
3 : : // Distributed under the MIT software license, see the accompanying
4 : : // file COPYING or http://www.opensource.org/licenses/mit-license.php.
5 : :
6 : : #include <txmempool.h>
7 : :
8 : : #include <chain.h>
9 : : #include <coins.h>
10 : : #include <common/system.h>
11 : : #include <consensus/consensus.h>
12 : : #include <consensus/tx_verify.h>
13 : : #include <consensus/validation.h>
14 : : #include <logging.h>
15 : : #include <policy/policy.h>
16 : : #include <policy/settings.h>
17 : : #include <random.h>
18 : : #include <tinyformat.h>
19 : : #include <util/check.h>
20 : : #include <util/feefrac.h>
21 : : #include <util/moneystr.h>
22 : : #include <util/overflow.h>
23 : : #include <util/result.h>
24 : : #include <util/time.h>
25 : : #include <util/trace.h>
26 : : #include <util/translation.h>
27 : : #include <validationinterface.h>
28 : :
29 : : #include <algorithm>
30 : : #include <cmath>
31 : : #include <numeric>
32 : : #include <optional>
33 : : #include <ranges>
34 : : #include <string_view>
35 : : #include <utility>
36 : :
37 : : TRACEPOINT_SEMAPHORE(mempool, added);
38 : : TRACEPOINT_SEMAPHORE(mempool, removed);
39 : :
40 : 0 : bool TestLockPointValidity(CChain& active_chain, const LockPoints& lp)
41 : : {
42 : 0 : AssertLockHeld(cs_main);
43 : : // If there are relative lock times then the maxInputBlock will be set
44 : : // If there are no relative lock times, the LockPoints don't depend on the chain
45 [ # # ]: 0 : if (lp.maxInputBlock) {
46 : : // Check whether active_chain is an extension of the block at which the LockPoints
47 : : // calculation was valid. If not LockPoints are no longer valid
48 [ # # ]: 0 : if (!active_chain.Contains(lp.maxInputBlock)) {
49 : 0 : return false;
50 : : }
51 : : }
52 : :
53 : : // LockPoints still valid
54 : : return true;
55 : : }
56 : :
57 : 0 : void CTxMemPool::UpdateForDescendants(txiter updateIt, cacheMap& cachedDescendants,
58 : : const std::set<uint256>& setExclude, std::set<uint256>& descendants_to_remove)
59 : : {
60 [ # # ]: 0 : CTxMemPoolEntry::Children stageEntries, descendants;
61 [ # # ]: 0 : stageEntries = updateIt->GetMemPoolChildrenConst();
62 : :
63 [ # # ]: 0 : while (!stageEntries.empty()) {
64 [ # # ]: 0 : const CTxMemPoolEntry& descendant = *stageEntries.begin();
65 [ # # ]: 0 : descendants.insert(descendant);
66 : 0 : stageEntries.erase(descendant);
67 : 0 : const CTxMemPoolEntry::Children& children = descendant.GetMemPoolChildrenConst();
68 [ # # ]: 0 : for (const CTxMemPoolEntry& childEntry : children) {
69 : 0 : cacheMap::iterator cacheIt = cachedDescendants.find(mapTx.iterator_to(childEntry));
70 [ # # ]: 0 : if (cacheIt != cachedDescendants.end()) {
71 : : // We've already calculated this one, just add the entries for this set
72 : : // but don't traverse again.
73 [ # # ]: 0 : for (txiter cacheEntry : cacheIt->second) {
74 [ # # ]: 0 : descendants.insert(*cacheEntry);
75 : : }
76 [ # # ]: 0 : } else if (!descendants.count(childEntry)) {
77 : : // Schedule for later processing
78 [ # # ]: 0 : stageEntries.insert(childEntry);
79 : : }
80 : : }
81 : : }
82 : : // descendants now contains all in-mempool descendants of updateIt.
83 : : // Update and add to cached descendant map
84 : 0 : int32_t modifySize = 0;
85 : 0 : CAmount modifyFee = 0;
86 : 0 : int64_t modifyCount = 0;
87 [ # # ]: 0 : for (const CTxMemPoolEntry& descendant : descendants) {
88 [ # # ]: 0 : if (!setExclude.count(descendant.GetTx().GetHash())) {
89 [ # # ]: 0 : modifySize += descendant.GetTxSize();
90 [ # # ]: 0 : modifyFee += descendant.GetModifiedFee();
91 : 0 : modifyCount++;
92 [ # # # # ]: 0 : cachedDescendants[updateIt].insert(mapTx.iterator_to(descendant));
93 : : // Update ancestor state for each descendant
94 [ # # ]: 0 : mapTx.modify(mapTx.iterator_to(descendant), [=](CTxMemPoolEntry& e) {
95 : 0 : e.UpdateAncestorState(updateIt->GetTxSize(), updateIt->GetModifiedFee(), 1, updateIt->GetSigOpCost());
96 : 0 : });
97 : : // Don't directly remove the transaction here -- doing so would
98 : : // invalidate iterators in cachedDescendants. Mark it for removal
99 : : // by inserting into descendants_to_remove.
100 [ # # # # ]: 0 : if (descendant.GetCountWithAncestors() > uint64_t(m_opts.limits.ancestor_count) || descendant.GetSizeWithAncestors() > m_opts.limits.ancestor_size_vbytes) {
101 [ # # ]: 0 : descendants_to_remove.insert(descendant.GetTx().GetHash());
102 : : }
103 : : }
104 : : }
105 [ # # ]: 0 : mapTx.modify(updateIt, [=](CTxMemPoolEntry& e) { e.UpdateDescendantState(modifySize, modifyFee, modifyCount); });
106 : 0 : }
107 : :
108 : 0 : void CTxMemPool::UpdateTransactionsFromBlock(const std::vector<uint256>& vHashesToUpdate)
109 : : {
110 : 0 : AssertLockHeld(cs);
111 : : // For each entry in vHashesToUpdate, store the set of in-mempool, but not
112 : : // in-vHashesToUpdate transactions, so that we don't have to recalculate
113 : : // descendants when we come across a previously seen entry.
114 [ # # ]: 0 : cacheMap mapMemPoolDescendantsToUpdate;
115 : :
116 : : // Use a set for lookups into vHashesToUpdate (these entries are already
117 : : // accounted for in the state of their ancestors)
118 [ # # ]: 0 : std::set<uint256> setAlreadyIncluded(vHashesToUpdate.begin(), vHashesToUpdate.end());
119 : :
120 : 0 : std::set<uint256> descendants_to_remove;
121 : :
122 : : // Iterate in reverse, so that whenever we are looking at a transaction
123 : : // we are sure that all in-mempool descendants have already been processed.
124 : : // This maximizes the benefit of the descendant cache and guarantees that
125 : : // CTxMemPoolEntry::m_children will be updated, an assumption made in
126 : : // UpdateForDescendants.
127 [ # # ]: 0 : for (const uint256& hash : vHashesToUpdate | std::views::reverse) {
128 : : // calculate children from mapNextTx
129 [ # # ]: 0 : txiter it = mapTx.find(hash);
130 [ # # ]: 0 : if (it == mapTx.end()) {
131 : 0 : continue;
132 : : }
133 : 0 : auto iter = mapNextTx.lower_bound(COutPoint(Txid::FromUint256(hash), 0));
134 : : // First calculate the children, and update CTxMemPoolEntry::m_children to
135 : : // include them, and update their CTxMemPoolEntry::m_parents to include this tx.
136 : : // we cache the in-mempool children to avoid duplicate updates
137 : 0 : {
138 : 0 : WITH_FRESH_EPOCH(m_epoch);
139 [ # # # # ]: 0 : for (; iter != mapNextTx.end() && iter->first->hash == hash; ++iter) {
140 [ # # ]: 0 : const uint256 &childHash = iter->second->GetHash();
141 [ # # ]: 0 : txiter childIter = mapTx.find(childHash);
142 [ # # ]: 0 : assert(childIter != mapTx.end());
143 : : // We can skip updating entries we've encountered before or that
144 : : // are in the block (which are already accounted for).
145 [ # # # # ]: 0 : if (!visited(childIter) && !setAlreadyIncluded.count(childHash)) {
146 [ # # ]: 0 : UpdateChild(it, childIter, true);
147 [ # # ]: 0 : UpdateParent(childIter, it, true);
148 : : }
149 : : }
150 : 0 : } // release epoch guard for UpdateForDescendants
151 [ # # ]: 0 : UpdateForDescendants(it, mapMemPoolDescendantsToUpdate, setAlreadyIncluded, descendants_to_remove);
152 : : }
153 : :
154 [ # # ]: 0 : for (const auto& txid : descendants_to_remove) {
155 : : // This txid may have been removed already in a prior call to removeRecursive.
156 : : // Therefore we ensure it is not yet removed already.
157 [ # # # # ]: 0 : if (const std::optional<txiter> txiter = GetIter(txid)) {
158 [ # # ]: 0 : removeRecursive((*txiter)->GetTx(), MemPoolRemovalReason::SIZELIMIT);
159 : : }
160 : : }
161 : 0 : }
162 : :
163 : 2078255 : util::Result<CTxMemPool::setEntries> CTxMemPool::CalculateAncestorsAndCheckLimits(
164 : : int64_t entry_size,
165 : : size_t entry_count,
166 : : CTxMemPoolEntry::Parents& staged_ancestors,
167 : : const Limits& limits) const
168 : : {
169 : 2078255 : int64_t totalSizeWithAncestors = entry_size;
170 : 2078255 : setEntries ancestors;
171 : :
172 [ + + ]: 20123874 : while (!staged_ancestors.empty()) {
173 [ + - ]: 18062152 : const CTxMemPoolEntry& stage = staged_ancestors.begin()->get();
174 : 18062152 : txiter stageit = mapTx.iterator_to(stage);
175 : :
176 [ + - ]: 18062152 : ancestors.insert(stageit);
177 : 18062152 : staged_ancestors.erase(stage);
178 [ + - ]: 18062152 : totalSizeWithAncestors += stageit->GetTxSize();
179 : :
180 [ + + ]: 18062152 : if (stageit->GetSizeWithDescendants() + entry_size > limits.descendant_size_vbytes) {
181 [ + - + - : 21150 : return util::Error{Untranslated(strprintf("exceeds descendant size limit for tx %s [limit: %u]", stageit->GetTx().GetHash().ToString(), limits.descendant_size_vbytes))};
+ - ]
182 [ + + ]: 18055102 : } else if (stageit->GetCountWithDescendants() + entry_count > static_cast<uint64_t>(limits.descendant_count)) {
183 [ + - + - : 9822 : return util::Error{Untranslated(strprintf("too many descendants for tx %s [limit: %u]", stageit->GetTx().GetHash().ToString(), limits.descendant_count))};
+ - ]
184 [ + + ]: 18051828 : } else if (totalSizeWithAncestors > limits.ancestor_size_vbytes) {
185 [ + - + - ]: 13221 : return util::Error{Untranslated(strprintf("exceeds ancestor size limit [limit: %u]", limits.ancestor_size_vbytes))};
186 : : }
187 : :
188 : 18047421 : const CTxMemPoolEntry::Parents& parents = stageit->GetMemPoolParentsConst();
189 [ + + ]: 42727307 : for (const CTxMemPoolEntry& parent : parents) {
190 : 24681688 : txiter parent_it = mapTx.iterator_to(parent);
191 : :
192 : : // If this is a new ancestor, add it.
193 [ + + ]: 24681688 : if (ancestors.count(parent_it) == 0) {
194 [ + - ]: 19510261 : staged_ancestors.insert(parent);
195 : : }
196 [ + + ]: 24681688 : if (staged_ancestors.size() + ancestors.size() + entry_count > static_cast<uint64_t>(limits.ancestor_count)) {
197 [ + - + - ]: 5406 : return util::Error{Untranslated(strprintf("too many unconfirmed ancestors [limit: %u]", limits.ancestor_count))};
198 : : }
199 : : }
200 : : }
201 : :
202 : 2061722 : return ancestors;
203 : 2078255 : }
204 : :
205 : 37214 : util::Result<void> CTxMemPool::CheckPackageLimits(const Package& package,
206 : : const int64_t total_vsize) const
207 : : {
208 [ + + ]: 37214 : size_t pack_count = package.size();
209 : :
210 : : // Package itself is busting mempool limits; should be rejected even if no staged_ancestors exist
211 [ + + ]: 37214 : if (pack_count > static_cast<uint64_t>(m_opts.limits.ancestor_count)) {
212 [ + - ]: 69 : return util::Error{Untranslated(strprintf("package count %u exceeds ancestor count limit [limit: %u]", pack_count, m_opts.limits.ancestor_count))};
213 [ + + ]: 37191 : } else if (pack_count > static_cast<uint64_t>(m_opts.limits.descendant_count)) {
214 [ + - ]: 30 : return util::Error{Untranslated(strprintf("package count %u exceeds descendant count limit [limit: %u]", pack_count, m_opts.limits.descendant_count))};
215 [ + + ]: 37181 : } else if (total_vsize > m_opts.limits.ancestor_size_vbytes) {
216 [ + - ]: 33 : return util::Error{Untranslated(strprintf("package size %u exceeds ancestor size limit [limit: %u]", total_vsize, m_opts.limits.ancestor_size_vbytes))};
217 [ + + ]: 37170 : } else if (total_vsize > m_opts.limits.descendant_size_vbytes) {
218 [ + - ]: 36 : return util::Error{Untranslated(strprintf("package size %u exceeds descendant size limit [limit: %u]", total_vsize, m_opts.limits.descendant_size_vbytes))};
219 : : }
220 : :
221 : 37158 : CTxMemPoolEntry::Parents staged_ancestors;
222 [ + + ]: 94491 : for (const auto& tx : package) {
223 [ + + ]: 222380 : for (const auto& input : tx->vin) {
224 [ + - ]: 165047 : std::optional<txiter> piter = GetIter(input.prevout.hash);
225 [ + + ]: 165047 : if (piter) {
226 [ + - ]: 11193 : staged_ancestors.insert(**piter);
227 [ + + ]: 11193 : if (staged_ancestors.size() + package.size() > static_cast<uint64_t>(m_opts.limits.ancestor_count)) {
228 [ + - + - ]: 3 : return util::Error{Untranslated(strprintf("too many unconfirmed parents [limit: %u]", m_opts.limits.ancestor_count))};
229 : : }
230 : : }
231 : : }
232 : : }
233 : : // When multiple transactions are passed in, the ancestors and descendants of all transactions
234 : : // considered together must be within limits even if they are not interdependent. This may be
235 : : // stricter than the limits for each individual transaction.
236 : 37157 : const auto ancestors{CalculateAncestorsAndCheckLimits(total_vsize, package.size(),
237 [ + - ]: 37157 : staged_ancestors, m_opts.limits)};
238 : : // It's possible to overestimate the ancestor/descendant totals.
239 [ + + + - : 37247 : if (!ancestors.has_value()) return util::Error{Untranslated("possibly " + util::ErrorString(ancestors).original)};
+ - + - ]
240 : 37127 : return {};
241 : 74315 : }
242 : :
243 : 2061533 : util::Result<CTxMemPool::setEntries> CTxMemPool::CalculateMemPoolAncestors(
244 : : const CTxMemPoolEntry &entry,
245 : : const Limits& limits,
246 : : bool fSearchForParents /* = true */) const
247 : : {
248 [ + + ]: 2061533 : CTxMemPoolEntry::Parents staged_ancestors;
249 [ + + ]: 2061533 : const CTransaction &tx = entry.GetTx();
250 : :
251 [ + + ]: 2061533 : if (fSearchForParents) {
252 : : // Get parents of this transaction that are in the mempool
253 : : // GetMemPoolParents() is only valid for entries in the mempool, so we
254 : : // iterate mapTx to find parents.
255 [ + + ]: 8002228 : for (unsigned int i = 0; i < tx.vin.size(); i++) {
256 [ + - ]: 6438335 : std::optional<txiter> piter = GetIter(tx.vin[i].prevout.hash);
257 [ + + ]: 6438335 : if (piter) {
258 [ + - ]: 3539324 : staged_ancestors.insert(**piter);
259 [ + + ]: 3539324 : if (staged_ancestors.size() + 1 > static_cast<uint64_t>(limits.ancestor_count)) {
260 [ + - + - ]: 61305 : return util::Error{Untranslated(strprintf("too many unconfirmed parents [limit: %u]", limits.ancestor_count))};
261 : : }
262 : : }
263 : : }
264 : : } else {
265 : : // If we're not searching for parents, we require this to already be an
266 : : // entry in the mempool and use the entry's cached parents.
267 : 477205 : txiter it = mapTx.iterator_to(entry);
268 [ + - ]: 477205 : staged_ancestors = it->GetMemPoolParentsConst();
269 : : }
270 : :
271 [ + - ]: 2041098 : return CalculateAncestorsAndCheckLimits(entry.GetTxSize(), /*entry_count=*/1, staged_ancestors,
272 [ + - ]: 2041098 : limits);
273 : 2061533 : }
274 : :
275 : 568046 : CTxMemPool::setEntries CTxMemPool::AssumeCalculateMemPoolAncestors(
276 : : std::string_view calling_fn_name,
277 : : const CTxMemPoolEntry &entry,
278 : : const Limits& limits,
279 : : bool fSearchForParents /* = true */) const
280 : : {
281 : 568046 : auto result{CalculateMemPoolAncestors(entry, limits, fSearchForParents)};
282 [ + - - + ]: 568046 : if (!Assume(result)) {
283 [ # # # # : 0 : LogPrintLevel(BCLog::MEMPOOL, BCLog::Level::Error, "%s: CalculateMemPoolAncestors failed unexpectedly, continuing with empty ancestor set (%s)\n",
# # # # ]
284 : : calling_fn_name, util::ErrorString(result).original);
285 : : }
286 : 568046 : return std::move(result).value_or(CTxMemPool::setEntries{});
287 : 568046 : }
288 : :
289 : 1288387 : void CTxMemPool::UpdateAncestorsOf(bool add, txiter it, setEntries &setAncestors)
290 : : {
291 : 1288387 : const CTxMemPoolEntry::Parents& parents = it->GetMemPoolParentsConst();
292 : : // add or remove this tx as a child of each parent
293 [ + + ]: 1975039 : for (const CTxMemPoolEntry& parent : parents) {
294 : 686652 : UpdateChild(mapTx.iterator_to(parent), it, add);
295 : : }
296 [ + + ]: 1288387 : const int32_t updateCount = (add ? 1 : -1);
297 : 1288387 : const int32_t updateSize{updateCount * it->GetTxSize()};
298 : 1288387 : const CAmount updateFee = updateCount * it->GetModifiedFee();
299 [ + + ]: 18541290 : for (txiter ancestorIt : setAncestors) {
300 : 34505806 : mapTx.modify(ancestorIt, [=](CTxMemPoolEntry& e) { e.UpdateDescendantState(updateSize, updateFee, updateCount); });
301 : : }
302 : 1288387 : }
303 : :
304 : 1219777 : void CTxMemPool::UpdateEntryForAncestors(txiter it, const setEntries &setAncestors)
305 : : {
306 : 1219777 : int64_t updateCount = setAncestors.size();
307 : 1219777 : int64_t updateSize = 0;
308 : 1219777 : CAmount updateFee = 0;
309 : 1219777 : int64_t updateSigOpsCost = 0;
310 [ + + ]: 18439330 : for (txiter ancestorIt : setAncestors) {
311 : 17219553 : updateSize += ancestorIt->GetTxSize();
312 : 17219553 : updateFee += ancestorIt->GetModifiedFee();
313 : 17219553 : updateSigOpsCost += ancestorIt->GetSigOpCost();
314 : : }
315 : 2439554 : mapTx.modify(it, [=](CTxMemPoolEntry& e){ e.UpdateAncestorState(updateSize, updateFee, updateCount, updateSigOpsCost); });
316 : 1219777 : }
317 : :
318 : 68610 : void CTxMemPool::UpdateChildrenForRemoval(txiter it)
319 : : {
320 : 68610 : const CTxMemPoolEntry::Children& children = it->GetMemPoolChildrenConst();
321 [ - + ]: 68610 : for (const CTxMemPoolEntry& updateIt : children) {
322 : 0 : UpdateParent(mapTx.iterator_to(updateIt), it, false);
323 : : }
324 : 68610 : }
325 : :
326 : 1354190 : void CTxMemPool::UpdateForRemoveFromMempool(const setEntries &entriesToRemove, bool updateDescendants)
327 : : {
328 : : // For each entry, walk back all ancestors and decrement size associated with this
329 : : // transaction
330 [ - + ]: 1354190 : if (updateDescendants) {
331 : : // updateDescendants should be true whenever we're not recursively
332 : : // removing a tx and all its descendants, eg when a transaction is
333 : : // confirmed in a block.
334 : : // Here we only update statistics and not data in CTxMemPool::Parents
335 : : // and CTxMemPoolEntry::Children (which we need to preserve until we're
336 : : // finished with all operations that need to traverse the mempool).
337 [ # # ]: 0 : for (txiter removeIt : entriesToRemove) {
338 [ # # ]: 0 : setEntries setDescendants;
339 [ # # ]: 0 : CalculateDescendants(removeIt, setDescendants);
340 : 0 : setDescendants.erase(removeIt); // don't update state for self
341 [ # # ]: 0 : int32_t modifySize = -removeIt->GetTxSize();
342 : 0 : CAmount modifyFee = -removeIt->GetModifiedFee();
343 : 0 : int modifySigOps = -removeIt->GetSigOpCost();
344 [ # # ]: 0 : for (txiter dit : setDescendants) {
345 [ # # ]: 0 : mapTx.modify(dit, [=](CTxMemPoolEntry& e){ e.UpdateAncestorState(modifySize, modifyFee, -1, modifySigOps); });
346 : : }
347 : 0 : }
348 : : }
349 [ + + ]: 1422800 : for (txiter removeIt : entriesToRemove) {
350 : 68610 : const CTxMemPoolEntry &entry = *removeIt;
351 : : // Since this is a tx that is already in the mempool, we can call CMPA
352 : : // with fSearchForParents = false. If the mempool is in a consistent
353 : : // state, then using true or false should both be correct, though false
354 : : // should be a bit faster.
355 : : // However, if we happen to be in the middle of processing a reorg, then
356 : : // the mempool can be in an inconsistent state. In this case, the set
357 : : // of ancestors reachable via GetMemPoolParents()/GetMemPoolChildren()
358 : : // will be the same as the set of ancestors whose packages include this
359 : : // transaction, because when we add a new transaction to the mempool in
360 : : // addNewTransaction(), we assume it has no children, and in the case of a
361 : : // reorg where that assumption is false, the in-mempool children aren't
362 : : // linked to the in-block tx's until UpdateTransactionsFromBlock() is
363 : : // called.
364 : : // So if we're being called during a reorg, ie before
365 : : // UpdateTransactionsFromBlock() has been called, then
366 : : // GetMemPoolParents()/GetMemPoolChildren() will differ from the set of
367 : : // mempool parents we'd calculate by searching, and it's important that
368 : : // we use the cached notion of ancestor transactions as the set of
369 : : // things to update for removal.
370 : 68610 : auto ancestors{AssumeCalculateMemPoolAncestors(__func__, entry, Limits::NoLimits(), /*fSearchForParents=*/false)};
371 : : // Note that UpdateAncestorsOf severs the child links that point to
372 : : // removeIt in the entries for the parents of removeIt.
373 [ + - ]: 68610 : UpdateAncestorsOf(false, removeIt, ancestors);
374 : 68610 : }
375 : : // After updating all the ancestor sizes, we can now sever the link between each
376 : : // transaction being removed and any mempool children (ie, update CTxMemPoolEntry::m_parents
377 : : // for each direct child of a transaction being removed).
378 [ + + ]: 1422800 : for (txiter removeIt : entriesToRemove) {
379 : 68610 : UpdateChildrenForRemoval(removeIt);
380 : : }
381 : 1354190 : }
382 : :
383 : 17627531 : void CTxMemPoolEntry::UpdateDescendantState(int32_t modifySize, CAmount modifyFee, int64_t modifyCount)
384 : : {
385 : 17627531 : nSizeWithDescendants += modifySize;
386 [ - + ]: 17627531 : assert(nSizeWithDescendants > 0);
387 : 17627531 : nModFeesWithDescendants = SaturatingAdd(nModFeesWithDescendants, modifyFee);
388 : 17627531 : m_count_with_descendants += modifyCount;
389 [ - + ]: 17627531 : assert(m_count_with_descendants > 0);
390 : 17627531 : }
391 : :
392 : 1266312 : void CTxMemPoolEntry::UpdateAncestorState(int32_t modifySize, CAmount modifyFee, int64_t modifyCount, int64_t modifySigOps)
393 : : {
394 : 1266312 : nSizeWithAncestors += modifySize;
395 [ - + ]: 1266312 : assert(nSizeWithAncestors > 0);
396 : 1266312 : nModFeesWithAncestors = SaturatingAdd(nModFeesWithAncestors, modifyFee);
397 : 1266312 : m_count_with_ancestors += modifyCount;
398 [ - + ]: 1266312 : assert(m_count_with_ancestors > 0);
399 : 1266312 : nSigOpCostWithAncestors += modifySigOps;
400 [ - + ]: 1266312 : assert(int(nSigOpCostWithAncestors) >= 0);
401 : 1266312 : }
402 : :
403 : : //! Clamp option values and populate the error if options are not valid.
404 : 19343 : static CTxMemPool::Options&& Flatten(CTxMemPool::Options&& opts, bilingual_str& error)
405 : : {
406 [ + - ]: 19343 : opts.check_ratio = std::clamp<int>(opts.check_ratio, 0, 1'000'000);
407 : 19343 : int64_t descendant_limit_bytes = opts.limits.descendant_size_vbytes * 40;
408 [ + - + + ]: 19343 : if (opts.max_size_bytes < 0 || opts.max_size_bytes < descendant_limit_bytes) {
409 [ + - ]: 3489 : error = strprintf(_("-maxmempool must be at least %d MB"), std::ceil(descendant_limit_bytes / 1'000'000.0));
410 : : }
411 : 19343 : return std::move(opts);
412 : : }
413 : :
414 : 19343 : CTxMemPool::CTxMemPool(Options opts, bilingual_str& error)
415 [ + - ]: 19343 : : m_opts{Flatten(std::move(opts), error)}
416 : : {
417 : 19343 : }
418 : :
419 : 9 : bool CTxMemPool::isSpent(const COutPoint& outpoint) const
420 : : {
421 : 9 : LOCK(cs);
422 [ + - ]: 9 : return mapNextTx.count(outpoint);
423 : 9 : }
424 : :
425 : 0 : unsigned int CTxMemPool::GetTransactionsUpdated() const
426 : : {
427 : 0 : return nTransactionsUpdated;
428 : : }
429 : :
430 : 115420 : void CTxMemPool::AddTransactionsUpdated(unsigned int n)
431 : : {
432 : 115420 : nTransactionsUpdated += n;
433 : 115420 : }
434 : :
435 : 1219057 : void CTxMemPool::Apply(ChangeSet* changeset)
436 : : {
437 : 1219057 : AssertLockHeld(cs);
438 : 1219057 : RemoveStaged(changeset->m_to_remove, false, MemPoolRemovalReason::REPLACED);
439 : :
440 [ + + ]: 2438834 : for (size_t i=0; i<changeset->m_entry_vec.size(); ++i) {
441 [ + + ]: 1219777 : auto tx_entry = changeset->m_entry_vec[i];
442 : 1219777 : std::optional<CTxMemPool::setEntries> ancestors;
443 [ + + ]: 1219777 : if (i == 0) {
444 : : // Note: ChangeSet::CalculateMemPoolAncestors() will return a
445 : : // cached value if mempool ancestors for this tranaction were
446 : : // previously calculated.
447 : : // We can only use a cached ancestor calculation for the first
448 : : // transaction in a package, because in-package parents won't be
449 : : // present in the cached ancestor sets of in-package children.
450 : : // We pass in Limits::NoLimits() to ensure that this function won't fail
451 : : // (we're going to be applying this set of transactions whether or
452 : : // not the mempool policy limits are being respected).
453 [ + - + - : 2438114 : ancestors = *Assume(changeset->CalculateMemPoolAncestors(tx_entry, Limits::NoLimits()));
+ - ]
454 : : }
455 : : // First splice this entry into mapTx.
456 : 1219777 : auto node_handle = changeset->m_to_add.extract(tx_entry);
457 [ + - ]: 1219777 : auto result = mapTx.insert(std::move(node_handle));
458 : :
459 [ + - ]: 1219777 : Assume(result.inserted);
460 : 1219777 : txiter it = result.position;
461 : :
462 : : // Now update the entry for ancestors/descendants.
463 [ + + ]: 1219777 : if (ancestors.has_value()) {
464 [ + - ]: 1219057 : addNewTransaction(it, *ancestors);
465 : : } else {
466 [ + - ]: 720 : addNewTransaction(it);
467 : : }
468 [ - + ]: 1219777 : }
469 : 1219057 : }
470 : :
471 : 720 : void CTxMemPool::addNewTransaction(CTxMemPool::txiter it)
472 : : {
473 : 720 : auto ancestors{AssumeCalculateMemPoolAncestors(__func__, *it, Limits::NoLimits())};
474 [ + - ]: 720 : return addNewTransaction(it, ancestors);
475 : 720 : }
476 : :
477 : 1219777 : void CTxMemPool::addNewTransaction(CTxMemPool::txiter newit, CTxMemPool::setEntries& setAncestors)
478 : : {
479 : 1219777 : const CTxMemPoolEntry& entry = *newit;
480 : :
481 : : // Update cachedInnerUsage to include contained transaction's usage.
482 : : // (When we update the entry for in-mempool parents, memory usage will be
483 : : // further updated.)
484 : 1219777 : cachedInnerUsage += entry.DynamicMemoryUsage();
485 : :
486 : 1219777 : const CTransaction& tx = newit->GetTx();
487 : 1219777 : std::set<Txid> setParentTransactions;
488 [ + + ]: 4175010 : for (unsigned int i = 0; i < tx.vin.size(); i++) {
489 [ + - ]: 2955233 : mapNextTx.insert(std::make_pair(&tx.vin[i].prevout, &tx));
490 [ + - ]: 2955233 : setParentTransactions.insert(tx.vin[i].prevout.hash);
491 : : }
492 : : // Don't bother worrying about child transactions of this one.
493 : : // Normal case of a new transaction arriving is that there can't be any
494 : : // children, because such children would be orphans.
495 : : // An exception to that is if a transaction enters that used to be in a block.
496 : : // In that case, our disconnect block logic will call UpdateTransactionsFromBlock
497 : : // to clean up the mess we're leaving here.
498 : :
499 : : // Update ancestors with information about this tx
500 [ + - + + ]: 1883514 : for (const auto& pit : GetIterSet(setParentTransactions)) {
501 [ + - ]: 663737 : UpdateParent(newit, pit, true);
502 : 0 : }
503 [ + - ]: 1219777 : UpdateAncestorsOf(true, newit, setAncestors);
504 [ + - ]: 1219777 : UpdateEntryForAncestors(newit, setAncestors);
505 : :
506 [ + - ]: 1219777 : nTransactionsUpdated++;
507 [ + - ]: 1219777 : totalTxSize += entry.GetTxSize();
508 : 1219777 : m_total_fee += entry.GetFee();
509 : :
510 [ + - + - ]: 2439554 : txns_randomized.emplace_back(newit->GetSharedTx());
511 : 1219777 : newit->idx_randomized = txns_randomized.size() - 1;
512 : :
513 : : TRACEPOINT(mempool, added,
514 : : entry.GetTx().GetHash().data(),
515 : : entry.GetTxSize(),
516 : : entry.GetFee()
517 : 1219777 : );
518 : 1219777 : }
519 : :
520 : 68610 : void CTxMemPool::removeUnchecked(txiter it, MemPoolRemovalReason reason)
521 : : {
522 : : // We increment mempool sequence value no matter removal reason
523 : : // even if not directly reported below.
524 [ + + ]: 68610 : uint64_t mempool_sequence = GetAndIncrementSequence();
525 : :
526 [ + + + - ]: 68610 : if (reason != MemPoolRemovalReason::BLOCK && m_opts.signals) {
527 : : // Notify clients that a transaction has been removed from the mempool
528 : : // for any reason except being included in a block. Clients interested
529 : : // in transactions included in blocks can subscribe to the BlockConnected
530 : : // notification.
531 [ + - + - ]: 191154 : m_opts.signals->TransactionRemovedFromMempool(it->GetSharedTx(), reason, mempool_sequence);
532 : : }
533 : : TRACEPOINT(mempool, removed,
534 : : it->GetTx().GetHash().data(),
535 : : RemovalReasonToString(reason).c_str(),
536 : : it->GetTxSize(),
537 : : it->GetFee(),
538 : : std::chrono::duration_cast<std::chrono::duration<std::uint64_t>>(it->GetTime()).count()
539 : 68610 : );
540 : :
541 [ + + ]: 186995 : for (const CTxIn& txin : it->GetTx().vin)
542 : 118385 : mapNextTx.erase(txin.prevout);
543 : :
544 : 68610 : RemoveUnbroadcastTx(it->GetTx().GetHash(), true /* add logging because unchecked */);
545 : :
546 [ + + ]: 68610 : if (txns_randomized.size() > 1) {
547 : : // Update idx_randomized of the to-be-moved entry.
548 : 60907 : Assert(GetEntry(txns_randomized.back()->GetHash()))->idx_randomized = it->idx_randomized;
549 : : // Remove entry from txns_randomized by replacing it with the back and deleting the back.
550 : 60907 : txns_randomized[it->idx_randomized] = std::move(txns_randomized.back());
551 : 60907 : txns_randomized.pop_back();
552 [ + + ]: 60907 : if (txns_randomized.size() * 2 < txns_randomized.capacity())
553 : 9100 : txns_randomized.shrink_to_fit();
554 : : } else
555 : 7703 : txns_randomized.clear();
556 : :
557 : 68610 : totalTxSize -= it->GetTxSize();
558 : 68610 : m_total_fee -= it->GetFee();
559 : 68610 : cachedInnerUsage -= it->DynamicMemoryUsage();
560 : 68610 : cachedInnerUsage -= memusage::DynamicUsage(it->GetMemPoolParentsConst()) + memusage::DynamicUsage(it->GetMemPoolChildrenConst());
561 : 68610 : mapTx.erase(it);
562 : 68610 : nTransactionsUpdated++;
563 : 68610 : }
564 : :
565 : : // Calculates descendants of entry that are not already in setDescendants, and adds to
566 : : // setDescendants. Assumes entryit is already a tx in the mempool and CTxMemPoolEntry::m_children
567 : : // is correct for tx and all descendants.
568 : : // Also assumes that if an entry is in setDescendants already, then all
569 : : // in-mempool descendants of it are already in setDescendants as well, so that we
570 : : // can save time by not iterating over those entries.
571 : 1500311 : void CTxMemPool::CalculateDescendants(txiter entryit, setEntries& setDescendants) const
572 : : {
573 : 1500311 : setEntries stage;
574 [ + + ]: 1500311 : if (setDescendants.count(entryit) == 0) {
575 [ + - ]: 1365520 : stage.insert(entryit);
576 : : }
577 : : // Traverse down the children of entry, only adding children that are not
578 : : // accounted for in setDescendants already (because those children have either
579 : : // already been walked, or will be walked in this iteration).
580 [ + + ]: 39806863 : while (!stage.empty()) {
581 [ + - ]: 38306552 : txiter it = *stage.begin();
582 [ + - ]: 38306552 : setDescendants.insert(it);
583 : 38306552 : stage.erase(it);
584 : :
585 : 38306552 : const CTxMemPoolEntry::Children& children = it->GetMemPoolChildrenConst();
586 [ + + ]: 91974884 : for (const CTxMemPoolEntry& child : children) {
587 : 53668332 : txiter childiter = mapTx.iterator_to(child);
588 [ + + ]: 53668332 : if (!setDescendants.count(childiter)) {
589 [ + - ]: 42798278 : stage.insert(childiter);
590 : : }
591 : : }
592 : : }
593 : 1500311 : }
594 : :
595 : 3163 : void CTxMemPool::removeRecursive(const CTransaction &origTx, MemPoolRemovalReason reason)
596 : : {
597 : : // Remove transaction from memory pool
598 : 3163 : AssertLockHeld(cs);
599 : 3163 : Assume(!m_have_changeset);
600 [ + - ]: 3163 : setEntries txToRemove;
601 [ + - ]: 3163 : txiter origit = mapTx.find(origTx.GetHash());
602 [ + - ]: 3163 : if (origit != mapTx.end()) {
603 [ + - ]: 3163 : txToRemove.insert(origit);
604 : : } else {
605 : : // When recursively removing but origTx isn't in the mempool
606 : : // be sure to remove any children that are in the pool. This can
607 : : // happen during chain re-orgs if origTx isn't re-accepted into
608 : : // the mempool for any reason.
609 [ # # ]: 0 : for (unsigned int i = 0; i < origTx.vout.size(); i++) {
610 : 0 : auto it = mapNextTx.find(COutPoint(origTx.GetHash(), i));
611 [ # # ]: 0 : if (it == mapNextTx.end())
612 : 0 : continue;
613 [ # # ]: 0 : txiter nextit = mapTx.find(it->second->GetHash());
614 [ # # ]: 0 : assert(nextit != mapTx.end());
615 [ # # ]: 0 : txToRemove.insert(nextit);
616 : : }
617 : : }
618 : 3163 : setEntries setAllRemoves;
619 [ + + ]: 6326 : for (txiter it : txToRemove) {
620 [ + - ]: 3163 : CalculateDescendants(it, setAllRemoves);
621 : : }
622 : :
623 [ + - ]: 3163 : RemoveStaged(setAllRemoves, false, reason);
624 : 3163 : }
625 : :
626 : 0 : void CTxMemPool::removeForReorg(CChain& chain, std::function<bool(txiter)> check_final_and_mature)
627 : : {
628 : : // Remove transactions spending a coinbase which are now immature and no-longer-final transactions
629 : 0 : AssertLockHeld(cs);
630 : 0 : AssertLockHeld(::cs_main);
631 : 0 : Assume(!m_have_changeset);
632 : :
633 : 0 : setEntries txToRemove;
634 [ # # ]: 0 : for (indexed_transaction_set::const_iterator it = mapTx.begin(); it != mapTx.end(); it++) {
635 [ # # # # : 0 : if (check_final_and_mature(it)) txToRemove.insert(it);
# # ]
636 : : }
637 : 0 : setEntries setAllRemoves;
638 [ # # ]: 0 : for (txiter it : txToRemove) {
639 [ # # ]: 0 : CalculateDescendants(it, setAllRemoves);
640 : : }
641 [ # # ]: 0 : RemoveStaged(setAllRemoves, false, MemPoolRemovalReason::REORG);
642 [ # # ]: 0 : for (indexed_transaction_set::const_iterator it = mapTx.begin(); it != mapTx.end(); it++) {
643 [ # # # # ]: 0 : assert(TestLockPointValidity(chain, it->GetLockPoints()));
644 : : }
645 : 0 : }
646 : :
647 : 116079 : void CTxMemPool::removeConflicts(const CTransaction &tx)
648 : : {
649 : : // Remove transactions which depend on inputs of tx, recursively
650 : 116079 : AssertLockHeld(cs);
651 [ + + ]: 232299 : for (const CTxIn &txin : tx.vin) {
652 : 116220 : auto it = mapNextTx.find(txin.prevout);
653 [ - + ]: 116220 : if (it != mapNextTx.end()) {
654 [ # # ]: 0 : const CTransaction &txConflict = *it->second;
655 [ # # ]: 0 : if (txConflict != tx)
656 : : {
657 : 0 : ClearPrioritisation(txConflict.GetHash());
658 : 0 : removeRecursive(txConflict, MemPoolRemovalReason::CONFLICT);
659 : : }
660 : : }
661 : : }
662 : 116079 : }
663 : :
664 : : /**
665 : : * Called when a block is connected. Removes from mempool.
666 : : */
667 : 115420 : void CTxMemPool::removeForBlock(const std::vector<CTransactionRef>& vtx, unsigned int nBlockHeight)
668 : : {
669 : 115420 : AssertLockHeld(cs);
670 : 115420 : Assume(!m_have_changeset);
671 : 115420 : std::vector<RemovedMempoolTransactionInfo> txs_removed_for_block;
672 [ + - ]: 115420 : txs_removed_for_block.reserve(vtx.size());
673 [ + + ]: 231499 : for (const auto& tx : vtx)
674 : : {
675 [ + - ]: 116079 : txiter it = mapTx.find(tx->GetHash());
676 [ - + ]: 116079 : if (it != mapTx.end()) {
677 [ # # ]: 0 : setEntries stage;
678 [ # # ]: 0 : stage.insert(it);
679 [ # # ]: 0 : txs_removed_for_block.emplace_back(*it);
680 [ # # ]: 0 : RemoveStaged(stage, true, MemPoolRemovalReason::BLOCK);
681 : 0 : }
682 [ + - ]: 116079 : removeConflicts(*tx);
683 [ + - ]: 116079 : ClearPrioritisation(tx->GetHash());
684 : : }
685 [ + + ]: 115420 : if (m_opts.signals) {
686 [ + - ]: 113696 : m_opts.signals->MempoolTransactionsRemovedForBlock(txs_removed_for_block, nBlockHeight);
687 : : }
688 [ + - ]: 115420 : lastRollingFeeUpdate = GetTime();
689 : 115420 : blockSinceLastRollingFeeBump = true;
690 : 115420 : }
691 : :
692 : 145280 : void CTxMemPool::check(const CCoinsViewCache& active_coins_tip, int64_t spendheight) const
693 : : {
694 [ + - ]: 145280 : if (m_opts.check_ratio == 0) return;
695 : :
696 [ + - ]: 145280 : if (FastRandomContext().randrange(m_opts.check_ratio) >= 1) return;
697 : :
698 : 145280 : AssertLockHeld(::cs_main);
699 : 145280 : LOCK(cs);
700 [ + - + + : 145280 : LogDebug(BCLog::MEMPOOL, "Checking mempool with %u transactions and %u inputs\n", (unsigned int)mapTx.size(), (unsigned int)mapNextTx.size());
+ - ]
701 : :
702 : 145280 : uint64_t checkTotal = 0;
703 : 145280 : CAmount check_total_fee{0};
704 : 145280 : uint64_t innerUsage = 0;
705 : 145280 : uint64_t prev_ancestor_count{0};
706 : :
707 [ + - ]: 145280 : CCoinsViewCache mempoolDuplicate(const_cast<CCoinsViewCache*>(&active_coins_tip));
708 : :
709 [ + - + + ]: 235401 : for (const auto& it : GetSortedDepthAndScore()) {
710 [ + - ]: 90121 : checkTotal += it->GetTxSize();
711 : 90121 : check_total_fee += it->GetFee();
712 : 90121 : innerUsage += it->DynamicMemoryUsage();
713 : 90121 : const CTransaction& tx = it->GetTx();
714 : 90121 : innerUsage += memusage::DynamicUsage(it->GetMemPoolParentsConst()) + memusage::DynamicUsage(it->GetMemPoolChildrenConst());
715 : 90121 : CTxMemPoolEntry::Parents setParentCheck;
716 [ + + ]: 233023 : for (const CTxIn &txin : tx.vin) {
717 : : // Check that every mempool transaction's inputs refer to available coins, or other mempool tx's.
718 [ + - ]: 142902 : indexed_transaction_set::const_iterator it2 = mapTx.find(txin.prevout.hash);
719 [ + + ]: 142902 : if (it2 != mapTx.end()) {
720 [ + - ]: 39746 : const CTransaction& tx2 = it2->GetTx();
721 [ + - - + ]: 39746 : assert(tx2.vout.size() > txin.prevout.n && !tx2.vout[txin.prevout.n].IsNull());
722 [ + - ]: 39746 : setParentCheck.insert(*it2);
723 : : }
724 : : // We are iterating through the mempool entries sorted in order by ancestor count.
725 : : // All parents must have been checked before their children and their coins added to
726 : : // the mempoolDuplicate coins cache.
727 [ + - - + ]: 142902 : assert(mempoolDuplicate.HaveCoin(txin.prevout));
728 : : // Check whether its inputs are marked in mapNextTx.
729 : 142902 : auto it3 = mapNextTx.find(txin.prevout);
730 [ - + ]: 142902 : assert(it3 != mapNextTx.end());
731 [ - + ]: 142902 : assert(it3->first == &txin.prevout);
732 [ - + ]: 142902 : assert(it3->second == &tx);
733 : : }
734 : 149219 : auto comp = [](const CTxMemPoolEntry& a, const CTxMemPoolEntry& b) -> bool {
735 [ + - ]: 59098 : return a.GetTx().GetHash() == b.GetTx().GetHash();
736 : : };
737 [ - + ]: 90121 : assert(setParentCheck.size() == it->GetMemPoolParentsConst().size());
738 [ - + ]: 90121 : assert(std::equal(setParentCheck.begin(), setParentCheck.end(), it->GetMemPoolParentsConst().begin(), comp));
739 : : // Verify ancestor state is correct.
740 [ + - ]: 90121 : auto ancestors{AssumeCalculateMemPoolAncestors(__func__, *it, Limits::NoLimits())};
741 [ + - ]: 90121 : uint64_t nCountCheck = ancestors.size() + 1;
742 [ + - ]: 90121 : int32_t nSizeCheck = it->GetTxSize();
743 : 90121 : CAmount nFeesCheck = it->GetModifiedFee();
744 : 90121 : int64_t nSigOpCheck = it->GetSigOpCost();
745 : :
746 [ + + ]: 142008 : for (txiter ancestorIt : ancestors) {
747 [ + - ]: 51887 : nSizeCheck += ancestorIt->GetTxSize();
748 : 51887 : nFeesCheck += ancestorIt->GetModifiedFee();
749 : 51887 : nSigOpCheck += ancestorIt->GetSigOpCost();
750 : : }
751 : :
752 [ - + ]: 90121 : assert(it->GetCountWithAncestors() == nCountCheck);
753 [ - + ]: 90121 : assert(it->GetSizeWithAncestors() == nSizeCheck);
754 [ - + ]: 90121 : assert(it->GetSigOpCostWithAncestors() == nSigOpCheck);
755 [ - + ]: 90121 : assert(it->GetModFeesWithAncestors() == nFeesCheck);
756 : : // Sanity check: we are walking in ascending ancestor count order.
757 [ - + ]: 90121 : assert(prev_ancestor_count <= it->GetCountWithAncestors());
758 : 90121 : prev_ancestor_count = it->GetCountWithAncestors();
759 : :
760 : : // Check children against mapNextTx
761 : 90121 : CTxMemPoolEntry::Children setChildrenCheck;
762 : 90121 : auto iter = mapNextTx.lower_bound(COutPoint(it->GetTx().GetHash(), 0));
763 : 90121 : int32_t child_sizes{0};
764 [ + + + + ]: 129867 : for (; iter != mapNextTx.end() && iter->first->hash == it->GetTx().GetHash(); ++iter) {
765 [ + - ]: 39746 : txiter childit = mapTx.find(iter->second->GetHash());
766 [ - + ]: 39746 : assert(childit != mapTx.end()); // mapNextTx points to in-mempool transactions
767 [ + - + + ]: 39746 : if (setChildrenCheck.insert(*childit).second) {
768 [ + - ]: 29549 : child_sizes += childit->GetTxSize();
769 : : }
770 : : }
771 [ - + ]: 90121 : assert(setChildrenCheck.size() == it->GetMemPoolChildrenConst().size());
772 [ - + ]: 90121 : assert(std::equal(setChildrenCheck.begin(), setChildrenCheck.end(), it->GetMemPoolChildrenConst().begin(), comp));
773 : : // Also check to make sure size is greater than sum with immediate children.
774 : : // just a sanity check, not definitive that this calc is correct...
775 [ + - - + ]: 90121 : assert(it->GetSizeWithDescendants() >= child_sizes + it->GetTxSize());
776 : :
777 [ - + ]: 90121 : TxValidationState dummy_state; // Not used. CheckTxInputs() should always pass
778 : 90121 : CAmount txfee = 0;
779 [ - + ]: 90121 : assert(!tx.IsCoinBase());
780 [ + - - + ]: 90121 : assert(Consensus::CheckTxInputs(tx, dummy_state, mempoolDuplicate, spendheight, txfee));
781 [ + - + + ]: 233023 : for (const auto& input: tx.vin) mempoolDuplicate.SpendCoin(input.prevout);
782 [ + - ]: 90121 : AddCoins(mempoolDuplicate, tx, std::numeric_limits<int>::max());
783 : 90121 : }
784 [ + + ]: 288182 : for (auto it = mapNextTx.cbegin(); it != mapNextTx.cend(); it++) {
785 [ + - ]: 142902 : uint256 hash = it->second->GetHash();
786 [ + - ]: 142902 : indexed_transaction_set::const_iterator it2 = mapTx.find(hash);
787 [ - + ]: 142902 : const CTransaction& tx = it2->GetTx();
788 [ - + ]: 142902 : assert(it2 != mapTx.end());
789 [ - + ]: 142902 : assert(&tx == it->second);
790 : : }
791 : :
792 [ - + ]: 145280 : assert(totalTxSize == checkTotal);
793 [ - + ]: 145280 : assert(m_total_fee == check_total_fee);
794 [ - + ]: 145280 : assert(innerUsage == cachedInnerUsage);
795 [ + - ]: 290560 : }
796 : :
797 : 0 : bool CTxMemPool::CompareDepthAndScore(const uint256& hasha, const uint256& hashb, bool wtxid)
798 : : {
799 : : /* Return `true` if hasha should be considered sooner than hashb. Namely when:
800 : : * a is not in the mempool, but b is
801 : : * both are in the mempool and a has fewer ancestors than b
802 : : * both are in the mempool and a has a higher score than b
803 : : */
804 : 0 : LOCK(cs);
805 [ # # # # : 0 : indexed_transaction_set::const_iterator j = wtxid ? get_iter_from_wtxid(hashb) : mapTx.find(hashb);
# # ]
806 [ # # ]: 0 : if (j == mapTx.end()) return false;
807 [ # # # # : 0 : indexed_transaction_set::const_iterator i = wtxid ? get_iter_from_wtxid(hasha) : mapTx.find(hasha);
# # ]
808 [ # # ]: 0 : if (i == mapTx.end()) return true;
809 [ # # ]: 0 : uint64_t counta = i->GetCountWithAncestors();
810 : 0 : uint64_t countb = j->GetCountWithAncestors();
811 [ # # ]: 0 : if (counta == countb) {
812 [ # # ]: 0 : return CompareTxMemPoolEntryByScore()(*i, *j);
813 : : }
814 : 0 : return counta < countb;
815 : 0 : }
816 : :
817 : : namespace {
818 : : class DepthAndScoreComparator
819 : : {
820 : : public:
821 : 34631458 : bool operator()(const CTxMemPool::indexed_transaction_set::const_iterator& a, const CTxMemPool::indexed_transaction_set::const_iterator& b)
822 : : {
823 [ + + ]: 34631458 : uint64_t counta = a->GetCountWithAncestors();
824 : 34631458 : uint64_t countb = b->GetCountWithAncestors();
825 [ + + ]: 34631458 : if (counta == countb) {
826 : 24362655 : return CompareTxMemPoolEntryByScore()(*a, *b);
827 : : }
828 : 10268803 : return counta < countb;
829 : : }
830 : : };
831 : : } // namespace
832 : :
833 : 548443 : std::vector<CTxMemPool::indexed_transaction_set::const_iterator> CTxMemPool::GetSortedDepthAndScore() const
834 : : {
835 : 548443 : std::vector<indexed_transaction_set::const_iterator> iters;
836 : 548443 : AssertLockHeld(cs);
837 : :
838 [ + - ]: 548443 : iters.reserve(mapTx.size());
839 : :
840 [ + + + + ]: 12219509 : for (indexed_transaction_set::iterator mi = mapTx.begin(); mi != mapTx.end(); ++mi) {
841 [ + - ]: 5835533 : iters.push_back(mi);
842 : : }
843 [ + - ]: 548443 : std::sort(iters.begin(), iters.end(), DepthAndScoreComparator());
844 : 548443 : return iters;
845 : 0 : }
846 : :
847 : 5752787 : static TxMempoolInfo GetInfo(CTxMemPool::indexed_transaction_set::const_iterator it) {
848 [ + - + - : 11505574 : return TxMempoolInfo{it->GetSharedTx(), it->GetTime(), it->GetFee(), it->GetTxSize(), it->GetModifiedFee() - it->GetFee()};
- - ]
849 : : }
850 : :
851 : 3 : std::vector<CTxMemPoolEntryRef> CTxMemPool::entryAll() const
852 : : {
853 : 3 : AssertLockHeld(cs);
854 : :
855 : 3 : std::vector<CTxMemPoolEntryRef> ret;
856 [ + - ]: 3 : ret.reserve(mapTx.size());
857 [ + - - + ]: 3 : for (const auto& it : GetSortedDepthAndScore()) {
858 [ # # ]: 0 : ret.emplace_back(*it);
859 : 0 : }
860 : 3 : return ret;
861 : 0 : }
862 : :
863 : 403160 : std::vector<TxMempoolInfo> CTxMemPool::infoAll() const
864 : : {
865 : 403160 : LOCK(cs);
866 [ + - ]: 403160 : auto iters = GetSortedDepthAndScore();
867 : :
868 : 403160 : std::vector<TxMempoolInfo> ret;
869 [ + - ]: 403160 : ret.reserve(mapTx.size());
870 [ + + ]: 6148572 : for (auto it : iters) {
871 [ + - - + ]: 11490824 : ret.push_back(GetInfo(it));
872 : : }
873 : :
874 : 403160 : return ret;
875 [ + - ]: 806320 : }
876 : :
877 : 5737537 : const CTxMemPoolEntry* CTxMemPool::GetEntry(const Txid& txid) const
878 : : {
879 : 5737537 : AssertLockHeld(cs);
880 : 5737537 : const auto i = mapTx.find(txid);
881 [ + + ]: 5737537 : return i == mapTx.end() ? nullptr : &(*i);
882 : : }
883 : :
884 : 34693276 : CTransactionRef CTxMemPool::get(const uint256& hash) const
885 : : {
886 : 34693276 : LOCK(cs);
887 [ + - ]: 34693276 : indexed_transaction_set::const_iterator i = mapTx.find(hash);
888 [ + + ]: 34693276 : if (i == mapTx.end())
889 : 16986776 : return nullptr;
890 [ + - + - ]: 52399776 : return i->GetSharedTx();
891 : 34693276 : }
892 : :
893 : 7375 : TxMempoolInfo CTxMemPool::info(const GenTxid& gtxid) const
894 : : {
895 : 7375 : LOCK(cs);
896 [ - + - - : 7375 : indexed_transaction_set::const_iterator i = (gtxid.IsWtxid() ? get_iter_from_wtxid(gtxid.GetHash()) : mapTx.find(gtxid.GetHash()));
+ - ]
897 [ - + ]: 7375 : if (i == mapTx.end())
898 : 0 : return TxMempoolInfo();
899 [ + - ]: 7375 : return GetInfo(i);
900 : 7375 : }
901 : :
902 : 61154 : TxMempoolInfo CTxMemPool::info_for_relay(const GenTxid& gtxid, uint64_t last_sequence) const
903 : : {
904 : 61154 : LOCK(cs);
905 [ + + + - : 61154 : indexed_transaction_set::const_iterator i = (gtxid.IsWtxid() ? get_iter_from_wtxid(gtxid.GetHash()) : mapTx.find(gtxid.GetHash()));
+ - ]
906 [ - + - - ]: 61154 : if (i != mapTx.end() && i->GetSequence() < last_sequence) {
907 [ # # ]: 0 : return GetInfo(i);
908 : : } else {
909 : 61154 : return TxMempoolInfo();
910 : : }
911 : 61154 : }
912 : :
913 : 1633333 : void CTxMemPool::PrioritiseTransaction(const uint256& hash, const CAmount& nFeeDelta)
914 : : {
915 : 1633333 : {
916 : 1633333 : LOCK(cs);
917 [ + - ]: 1633333 : CAmount &delta = mapDeltas[hash];
918 : 1633333 : delta = SaturatingAdd(delta, nFeeDelta);
919 [ + - ]: 1633333 : txiter it = mapTx.find(hash);
920 [ + + ]: 1633333 : if (it != mapTx.end()) {
921 [ + - ]: 751624 : mapTx.modify(it, [&nFeeDelta](CTxMemPoolEntry& e) { e.UpdateModifiedFee(nFeeDelta); });
922 : : // Now update all ancestors' modified fees with descendants
923 [ + - ]: 375812 : auto ancestors{AssumeCalculateMemPoolAncestors(__func__, *it, Limits::NoLimits(), /*fSearchForParents=*/false)};
924 [ + + ]: 750440 : for (txiter ancestorIt : ancestors) {
925 [ + - + - ]: 1123884 : mapTx.modify(ancestorIt, [=](CTxMemPoolEntry& e){ e.UpdateDescendantState(0, nFeeDelta, 0);});
926 : : }
927 : : // Now update all descendants' modified fees with ancestors
928 [ + - ]: 375812 : setEntries setDescendants;
929 [ + - ]: 375812 : CalculateDescendants(it, setDescendants);
930 : 375812 : setDescendants.erase(it);
931 [ + + ]: 422347 : for (txiter descendantIt : setDescendants) {
932 [ + - ]: 139605 : mapTx.modify(descendantIt, [=](CTxMemPoolEntry& e){ e.UpdateAncestorState(0, nFeeDelta, 0, 0); });
933 : : }
934 : 375812 : ++nTransactionsUpdated;
935 : 375812 : }
936 [ + + ]: 1633333 : if (delta == 0) {
937 : 7988 : mapDeltas.erase(hash);
938 [ + + + - : 16247 : LogPrintf("PrioritiseTransaction: %s (%sin mempool) delta cleared\n", hash.ToString(), it == mapTx.end() ? "not " : "");
+ - ]
939 : : } else {
940 [ + - + - : 3626231 : LogPrintf("PrioritiseTransaction: %s (%sin mempool) fee += %s, new delta=%s\n",
+ + + - +
- ]
941 : : hash.ToString(),
942 : : it == mapTx.end() ? "not " : "",
943 : : FormatMoney(nFeeDelta),
944 : : FormatMoney(delta));
945 : : }
946 : 1633333 : }
947 : 1633333 : }
948 : :
949 : 1586289 : void CTxMemPool::ApplyDelta(const uint256& hash, CAmount &nFeeDelta) const
950 : : {
951 : 1586289 : AssertLockHeld(cs);
952 : 1586289 : std::map<uint256, CAmount>::const_iterator pos = mapDeltas.find(hash);
953 [ + + ]: 1586289 : if (pos == mapDeltas.end())
954 : : return;
955 : 147171 : const CAmount &delta = pos->second;
956 : 147171 : nFeeDelta += delta;
957 : : }
958 : :
959 : 116079 : void CTxMemPool::ClearPrioritisation(const uint256& hash)
960 : : {
961 : 116079 : AssertLockHeld(cs);
962 : 116079 : mapDeltas.erase(hash);
963 : 116079 : }
964 : :
965 : 17 : std::vector<CTxMemPool::delta_info> CTxMemPool::GetPrioritisedTransactions() const
966 : : {
967 : 17 : AssertLockNotHeld(cs);
968 : 17 : LOCK(cs);
969 : 17 : std::vector<delta_info> result;
970 [ + - ]: 17 : result.reserve(mapDeltas.size());
971 [ + - + + ]: 149 : for (const auto& [txid, delta] : mapDeltas) {
972 [ + - ]: 132 : const auto iter{mapTx.find(txid)};
973 [ - + ]: 132 : const bool in_mempool{iter != mapTx.end()};
974 : 132 : std::optional<CAmount> modified_fee;
975 [ - + ]: 132 : if (in_mempool) modified_fee = iter->GetModifiedFee();
976 [ + - ]: 132 : result.emplace_back(delta_info{in_mempool, delta, modified_fee, txid});
977 : : }
978 [ + - ]: 17 : return result;
979 : 17 : }
980 : :
981 : 7992625 : const CTransaction* CTxMemPool::GetConflictTx(const COutPoint& prevout) const
982 : : {
983 : 7992625 : const auto it = mapNextTx.find(prevout);
984 [ + + ]: 7992625 : return it == mapNextTx.end() ? nullptr : it->second;
985 : : }
986 : :
987 : 10474821 : std::optional<CTxMemPool::txiter> CTxMemPool::GetIter(const uint256& txid) const
988 : : {
989 : 10474821 : auto it = mapTx.find(txid);
990 [ + + ]: 10474821 : if (it != mapTx.end()) return it;
991 : 4844029 : return std::nullopt;
992 : : }
993 : :
994 : 1602492 : CTxMemPool::setEntries CTxMemPool::GetIterSet(const std::set<Txid>& hashes) const
995 : : {
996 : 1602492 : CTxMemPool::setEntries ret;
997 [ + + ]: 3512831 : for (const auto& h : hashes) {
998 [ + - ]: 1910339 : const auto mi = GetIter(h);
999 [ + + + - ]: 1910339 : if (mi) ret.insert(*mi);
1000 : : }
1001 : 1602492 : return ret;
1002 : 0 : }
1003 : :
1004 : 3262 : std::vector<CTxMemPool::txiter> CTxMemPool::GetIterVec(const std::vector<uint256>& txids) const
1005 : : {
1006 : 3262 : AssertLockHeld(cs);
1007 : 3262 : std::vector<txiter> ret;
1008 [ + - ]: 3262 : ret.reserve(txids.size());
1009 [ + + ]: 234662 : for (const auto& txid : txids) {
1010 [ + - ]: 231400 : const auto it{GetIter(txid)};
1011 [ - + ]: 231400 : if (!it) return {};
1012 [ + - ]: 231400 : ret.push_back(*it);
1013 : : }
1014 : 3262 : return ret;
1015 : 3262 : }
1016 : :
1017 : 116929 : bool CTxMemPool::HasNoInputsOf(const CTransaction &tx) const
1018 : : {
1019 [ + + ]: 243222 : for (unsigned int i = 0; i < tx.vin.size(); i++)
1020 [ + + ]: 162608 : if (exists(GenTxid::Txid(tx.vin[i].prevout.hash)))
1021 : : return false;
1022 : : return true;
1023 : : }
1024 : :
1025 [ + - + - ]: 1587126 : CCoinsViewMemPool::CCoinsViewMemPool(CCoinsView* baseIn, const CTxMemPool& mempoolIn) : CCoinsViewBacked(baseIn), mempool(mempoolIn) { }
1026 : :
1027 : 34210383 : std::optional<Coin> CCoinsViewMemPool::GetCoin(const COutPoint& outpoint) const
1028 : : {
1029 : : // Check to see if the inputs are made available by another tx in the package.
1030 : : // These Coins would not be available in the underlying CoinsView.
1031 [ + + ]: 34210383 : if (auto it = m_temp_added.find(outpoint); it != m_temp_added.end()) {
1032 : 59165 : return it->second;
1033 : : }
1034 : :
1035 : : // If an entry in the mempool exists, always return that one, as it's guaranteed to never
1036 : : // conflict with the underlying cache, and it cannot have pruned entries (as it contains full)
1037 : : // transactions. First checking the underlying cache risks returning a pruned entry instead.
1038 : 34151218 : CTransactionRef ptx = mempool.get(outpoint.hash);
1039 [ + + ]: 34151218 : if (ptx) {
1040 [ + + ]: 17565150 : if (outpoint.n < ptx->vout.size()) {
1041 : 17563913 : Coin coin(ptx->vout[outpoint.n], MEMPOOL_HEIGHT, false);
1042 [ + - ]: 17563913 : m_non_base_coins.emplace(outpoint);
1043 : 17563913 : return coin;
1044 : 17563913 : }
1045 : 1237 : return std::nullopt;
1046 : : }
1047 [ + - ]: 16586068 : return base->GetCoin(outpoint);
1048 : 34151218 : }
1049 : :
1050 : 72821 : void CCoinsViewMemPool::PackageAddTransaction(const CTransactionRef& tx)
1051 : : {
1052 [ + + ]: 829610 : for (unsigned int n = 0; n < tx->vout.size(); ++n) {
1053 [ + - ]: 756789 : m_temp_added.emplace(COutPoint(tx->GetHash(), n), Coin(tx->vout[n], MEMPOOL_HEIGHT, false));
1054 : 756789 : m_non_base_coins.emplace(tx->GetHash(), n);
1055 : : }
1056 : 72821 : }
1057 : 266502 : void CCoinsViewMemPool::Reset()
1058 : : {
1059 : 266502 : m_temp_added.clear();
1060 : 266502 : m_non_base_coins.clear();
1061 : 266502 : }
1062 : :
1063 : 2129384 : size_t CTxMemPool::DynamicMemoryUsage() const {
1064 : 2129384 : LOCK(cs);
1065 : : // Estimate the overhead of mapTx to be 15 pointers + an allocation, as no exact formula for boost::multi_index_contained is implemented.
1066 [ + + + - ]: 2985698 : return memusage::MallocUsage(sizeof(CTxMemPoolEntry) + 15 * sizeof(void*)) * mapTx.size() + memusage::DynamicUsage(mapNextTx) + memusage::DynamicUsage(mapDeltas) + memusage::DynamicUsage(txns_randomized) + cachedInnerUsage;
1067 : 2129384 : }
1068 : :
1069 : 68610 : void CTxMemPool::RemoveUnbroadcastTx(const uint256& txid, const bool unchecked) {
1070 : 68610 : LOCK(cs);
1071 : :
1072 [ - + ]: 68610 : if (m_unbroadcast_txids.erase(txid))
1073 : : {
1074 [ # # # # : 0 : LogDebug(BCLog::MEMPOOL, "Removed %i from set of unbroadcast txns%s\n", txid.GetHex(), (unchecked ? " before confirmation that txn was sent out" : ""));
# # # # #
# ]
1075 : : }
1076 : 68610 : }
1077 : :
1078 : 1354190 : void CTxMemPool::RemoveStaged(setEntries &stage, bool updateDescendants, MemPoolRemovalReason reason) {
1079 : 1354190 : AssertLockHeld(cs);
1080 : 1354190 : UpdateForRemoveFromMempool(stage, updateDescendants);
1081 [ + + ]: 1422800 : for (txiter it : stage) {
1082 : 68610 : removeUnchecked(it, reason);
1083 : : }
1084 : 1354190 : }
1085 : :
1086 : 116262 : int CTxMemPool::Expire(std::chrono::seconds time)
1087 : : {
1088 : 116262 : AssertLockHeld(cs);
1089 : 116262 : Assume(!m_have_changeset);
1090 : 116262 : indexed_transaction_set::index<entry_time>::type::iterator it = mapTx.get<entry_time>().begin();
1091 : 116262 : setEntries toremove;
1092 [ + + + + ]: 143510 : while (it != mapTx.get<entry_time>().end() && it->GetTime() < time) {
1093 [ + - ]: 27248 : toremove.insert(mapTx.project<0>(it));
1094 : 27248 : it++;
1095 : : }
1096 : 116262 : setEntries stage;
1097 [ + + ]: 143510 : for (txiter removeit : toremove) {
1098 [ + - ]: 27248 : CalculateDescendants(removeit, stage);
1099 : : }
1100 [ + - ]: 116262 : RemoveStaged(stage, false, MemPoolRemovalReason::EXPIRY);
1101 : 116262 : return stage.size();
1102 : 116262 : }
1103 : :
1104 : 686652 : void CTxMemPool::UpdateChild(txiter entry, txiter child, bool add)
1105 : : {
1106 : 686652 : AssertLockHeld(cs);
1107 [ + + ]: 686652 : CTxMemPoolEntry::Children s;
1108 [ + + + - : 686652 : if (add && entry->GetMemPoolChildren().insert(*child).second) {
+ - ]
1109 : 663737 : cachedInnerUsage += memusage::IncrementalDynamicUsage(s);
1110 [ + - + - ]: 22915 : } else if (!add && entry->GetMemPoolChildren().erase(*child)) {
1111 : 22915 : cachedInnerUsage -= memusage::IncrementalDynamicUsage(s);
1112 : : }
1113 : 686652 : }
1114 : :
1115 : 663737 : void CTxMemPool::UpdateParent(txiter entry, txiter parent, bool add)
1116 : : {
1117 : 663737 : AssertLockHeld(cs);
1118 [ + - ]: 663737 : CTxMemPoolEntry::Parents s;
1119 [ + - + - : 663737 : if (add && entry->GetMemPoolParents().insert(*parent).second) {
+ - ]
1120 : 663737 : cachedInnerUsage += memusage::IncrementalDynamicUsage(s);
1121 [ # # # # ]: 0 : } else if (!add && entry->GetMemPoolParents().erase(*parent)) {
1122 : 0 : cachedInnerUsage -= memusage::IncrementalDynamicUsage(s);
1123 : : }
1124 : 663737 : }
1125 : :
1126 : 1319722 : CFeeRate CTxMemPool::GetMinFee(size_t sizelimit) const {
1127 : 1319722 : LOCK(cs);
1128 [ + + + + ]: 1319722 : if (!blockSinceLastRollingFeeBump || rollingMinimumFeeRate == 0)
1129 : 1301924 : return CFeeRate(llround(rollingMinimumFeeRate));
1130 : :
1131 [ + - ]: 17798 : int64_t time = GetTime();
1132 [ + + ]: 17798 : if (time > lastRollingFeeUpdate + 10) {
1133 : 2092 : double halflife = ROLLING_FEE_HALFLIFE;
1134 [ + - + - ]: 2092 : if (DynamicMemoryUsage() < sizelimit / 4)
1135 : : halflife /= 4;
1136 [ + - - + ]: 2092 : else if (DynamicMemoryUsage() < sizelimit / 2)
1137 : 0 : halflife /= 2;
1138 : :
1139 : 2092 : rollingMinimumFeeRate = rollingMinimumFeeRate / pow(2.0, (time - lastRollingFeeUpdate) / halflife);
1140 : 2092 : lastRollingFeeUpdate = time;
1141 : :
1142 [ + + ]: 2092 : if (rollingMinimumFeeRate < (double)m_opts.incremental_relay_feerate.GetFeePerK() / 2) {
1143 : 1582 : rollingMinimumFeeRate = 0;
1144 : 1582 : return CFeeRate(0);
1145 : : }
1146 : : }
1147 [ + + + - ]: 1335235 : return std::max(CFeeRate(llround(rollingMinimumFeeRate)), m_opts.incremental_relay_feerate);
1148 : 1319722 : }
1149 : :
1150 : 15708 : void CTxMemPool::trackPackageRemoved(const CFeeRate& rate) {
1151 : 15708 : AssertLockHeld(cs);
1152 [ + + ]: 15708 : if (rate.GetFeePerK() > rollingMinimumFeeRate) {
1153 : 7304 : rollingMinimumFeeRate = rate.GetFeePerK();
1154 : 7304 : blockSinceLastRollingFeeBump = false;
1155 : : }
1156 : 15708 : }
1157 : :
1158 : 116262 : void CTxMemPool::TrimToSize(size_t sizelimit, std::vector<COutPoint>* pvNoSpendsRemaining) {
1159 : 116262 : AssertLockHeld(cs);
1160 : 116262 : Assume(!m_have_changeset);
1161 : :
1162 : 116262 : unsigned nTxnRemoved = 0;
1163 : 116262 : CFeeRate maxFeeRateRemoved(0);
1164 [ + + + + ]: 131970 : while (!mapTx.empty() && DynamicMemoryUsage() > sizelimit) {
1165 : 15708 : indexed_transaction_set::index<descendant_score>::type::iterator it = mapTx.get<descendant_score>().begin();
1166 : :
1167 : : // We set the new mempool min fee to the feerate of the removed set, plus the
1168 : : // "minimum reasonable fee rate" (ie some value under which we consider txn
1169 : : // to have 0 fee). This way, we don't allow txn to enter mempool with feerate
1170 : : // equal to txn which were removed with no block in between.
1171 : 15708 : CFeeRate removed(it->GetModFeesWithDescendants(), it->GetSizeWithDescendants());
1172 : 15708 : removed += m_opts.incremental_relay_feerate;
1173 : 15708 : trackPackageRemoved(removed);
1174 [ + + ]: 15708 : maxFeeRateRemoved = std::max(maxFeeRateRemoved, removed);
1175 : :
1176 [ + - ]: 15708 : setEntries stage;
1177 [ + - ]: 15708 : CalculateDescendants(mapTx.project<0>(it), stage);
1178 [ + - ]: 15708 : nTxnRemoved += stage.size();
1179 : :
1180 : 15708 : std::vector<CTransaction> txn;
1181 [ + - ]: 15708 : if (pvNoSpendsRemaining) {
1182 [ + - ]: 15708 : txn.reserve(stage.size());
1183 [ + + ]: 32097 : for (txiter iter : stage)
1184 [ + - ]: 16389 : txn.push_back(iter->GetTx());
1185 : : }
1186 [ + - ]: 15708 : RemoveStaged(stage, false, MemPoolRemovalReason::SIZELIMIT);
1187 [ + - ]: 15708 : if (pvNoSpendsRemaining) {
1188 [ + + ]: 32097 : for (const CTransaction& tx : txn) {
1189 [ + + ]: 41854 : for (const CTxIn& txin : tx.vin) {
1190 [ + - + + ]: 25465 : if (exists(GenTxid::Txid(txin.prevout.hash))) continue;
1191 [ + - ]: 23781 : pvNoSpendsRemaining->push_back(txin.prevout);
1192 : : }
1193 : : }
1194 : : }
1195 : 15708 : }
1196 : :
1197 [ + + ]: 116262 : if (maxFeeRateRemoved > CFeeRate(0)) {
1198 [ - + - - ]: 5109 : LogDebug(BCLog::MEMPOOL, "Removed %u txn, rolling minimum fee bumped to %s\n", nTxnRemoved, maxFeeRateRemoved.ToString());
1199 : : }
1200 : 116262 : }
1201 : :
1202 : 0 : uint64_t CTxMemPool::CalculateDescendantMaximum(txiter entry) const {
1203 : : // find parent with highest descendant count
1204 : 0 : std::vector<txiter> candidates;
1205 [ # # ]: 0 : setEntries counted;
1206 [ # # ]: 0 : candidates.push_back(entry);
1207 : 0 : uint64_t maximum = 0;
1208 [ # # ]: 0 : while (candidates.size()) {
1209 : 0 : txiter candidate = candidates.back();
1210 [ # # ]: 0 : candidates.pop_back();
1211 [ # # # # ]: 0 : if (!counted.insert(candidate).second) continue;
1212 [ # # ]: 0 : const CTxMemPoolEntry::Parents& parents = candidate->GetMemPoolParentsConst();
1213 [ # # ]: 0 : if (parents.size() == 0) {
1214 [ # # ]: 0 : maximum = std::max(maximum, candidate->GetCountWithDescendants());
1215 : : } else {
1216 [ # # # # ]: 0 : for (const CTxMemPoolEntry& i : parents) {
1217 [ # # ]: 0 : candidates.push_back(mapTx.iterator_to(i));
1218 : : }
1219 : : }
1220 : : }
1221 : 0 : return maximum;
1222 : 0 : }
1223 : :
1224 : 1091665 : void CTxMemPool::GetTransactionAncestry(const uint256& txid, size_t& ancestors, size_t& descendants, size_t* const ancestorsize, CAmount* const ancestorfees) const {
1225 : 1091665 : LOCK(cs);
1226 [ + - ]: 1091665 : auto it = mapTx.find(txid);
1227 : 1091665 : ancestors = descendants = 0;
1228 [ - + ]: 1091665 : if (it != mapTx.end()) {
1229 [ # # ]: 0 : ancestors = it->GetCountWithAncestors();
1230 [ # # ]: 0 : if (ancestorsize) *ancestorsize = it->GetSizeWithAncestors();
1231 [ # # ]: 0 : if (ancestorfees) *ancestorfees = it->GetModFeesWithAncestors();
1232 [ # # ]: 0 : descendants = CalculateDescendantMaximum(it);
1233 : : }
1234 : 1091665 : }
1235 : :
1236 : 1 : bool CTxMemPool::GetLoadTried() const
1237 : : {
1238 : 1 : LOCK(cs);
1239 [ + - ]: 1 : return m_load_tried;
1240 : 1 : }
1241 : :
1242 : 1750 : void CTxMemPool::SetLoadTried(bool load_tried)
1243 : : {
1244 : 1750 : LOCK(cs);
1245 [ + - ]: 1750 : m_load_tried = load_tried;
1246 : 1750 : }
1247 : :
1248 : 3262 : std::vector<CTxMemPool::txiter> CTxMemPool::GatherClusters(const std::vector<uint256>& txids) const
1249 : : {
1250 : 3262 : AssertLockHeld(cs);
1251 : 3262 : std::vector<txiter> clustered_txs{GetIterVec(txids)};
1252 : : // Use epoch: visiting an entry means we have added it to the clustered_txs vector. It does not
1253 : : // necessarily mean the entry has been processed.
1254 : 3262 : WITH_FRESH_EPOCH(m_epoch);
1255 [ + + ]: 234662 : for (const auto& it : clustered_txs) {
1256 : 231400 : visited(it);
1257 : : }
1258 : : // i = index of where the list of entries to process starts
1259 [ + + ]: 356875 : for (size_t i{0}; i < clustered_txs.size(); ++i) {
1260 : : // DoS protection: if there are 500 or more entries to process, just quit.
1261 [ - + ]: 353613 : if (clustered_txs.size() > 500) return {};
1262 [ + - ]: 353613 : const txiter& tx_iter = clustered_txs.at(i);
1263 [ + - + - : 1768065 : for (const auto& entries : {tx_iter->GetMemPoolParentsConst(), tx_iter->GetMemPoolChildrenConst()}) {
+ + - - ]
1264 [ + + ]: 1593346 : for (const CTxMemPoolEntry& entry : entries) {
1265 : 886120 : const auto entry_it = mapTx.iterator_to(entry);
1266 [ + + ]: 886120 : if (!visited(entry_it)) {
1267 [ - + ]: 122213 : clustered_txs.push_back(entry_it);
1268 : : }
1269 : : }
1270 [ + + - - ]: 1060839 : }
1271 : : }
1272 : 3262 : return clustered_txs;
1273 : 3262 : }
1274 : :
1275 : 6905 : std::optional<std::string> CTxMemPool::CheckConflictTopology(const setEntries& direct_conflicts)
1276 : : {
1277 [ + + ]: 1169184 : for (const auto& direct_conflict : direct_conflicts) {
1278 : : // Ancestor and descendant counts are inclusive of the tx itself.
1279 [ + - ]: 1163354 : const auto ancestor_count{direct_conflict->GetCountWithAncestors()};
1280 [ + - ]: 1163354 : const auto descendant_count{direct_conflict->GetCountWithDescendants()};
1281 : 1163354 : const bool has_ancestor{ancestor_count > 1};
1282 : 1163354 : const bool has_descendant{descendant_count > 1};
1283 [ + - + - : 2326708 : const auto& txid_string{direct_conflict->GetSharedTx()->GetHash().ToString()};
+ - ]
1284 : : // The only allowed configurations are:
1285 : : // 1 ancestor and 0 descendant
1286 : : // 0 ancestor and 1 descendant
1287 : : // 0 ancestor and 0 descendant
1288 [ + + ]: 1163354 : if (ancestor_count > 2) {
1289 [ + - ]: 570 : return strprintf("%s has %u ancestors, max 1 allowed", txid_string, ancestor_count - 1);
1290 [ + + ]: 1163069 : } else if (descendant_count > 2) {
1291 [ + - ]: 576 : return strprintf("%s has %u descendants, max 1 allowed", txid_string, descendant_count - 1);
1292 [ + + ]: 1162781 : } else if (has_ancestor && has_descendant) {
1293 [ + - ]: 276 : return strprintf("%s has both ancestor and descendant, exceeding cluster limit of 2", txid_string);
1294 : : }
1295 : : // Additionally enforce that:
1296 : : // If we have a child, we are its only parent.
1297 : : // If we have a parent, we are its only child.
1298 [ + + ]: 1162643 : if (has_descendant) {
1299 [ + + ]: 564163 : const auto& our_child = direct_conflict->GetMemPoolChildrenConst().begin();
1300 [ + + ]: 564163 : if (our_child->get().GetCountWithAncestors() > 2) {
1301 [ + - ]: 470 : return strprintf("%s is not the only parent of child %s",
1302 [ + - + - : 1175 : txid_string, our_child->get().GetSharedTx()->GetHash().ToString());
+ - + - ]
1303 : : }
1304 [ + + ]: 598480 : } else if (has_ancestor) {
1305 [ + + ]: 593784 : const auto& our_parent = direct_conflict->GetMemPoolParentsConst().begin();
1306 [ + + ]: 593784 : if (our_parent->get().GetCountWithDescendants() > 2) {
1307 [ + - ]: 258 : return strprintf("%s is not the only child of parent %s",
1308 [ + - + - : 645 : txid_string, our_parent->get().GetSharedTx()->GetHash().ToString());
+ - + - ]
1309 : : }
1310 : : }
1311 : 1163354 : }
1312 : 5830 : return std::nullopt;
1313 : : }
1314 : :
1315 : 6905 : util::Result<std::pair<std::vector<FeeFrac>, std::vector<FeeFrac>>> CTxMemPool::ChangeSet::CalculateChunksForRBF()
1316 : : {
1317 : 6905 : LOCK(m_pool->cs);
1318 : 6905 : FeeFrac replacement_feerate{0, 0};
1319 [ + + ]: 19341 : for (auto it : m_entry_vec) {
1320 [ + - ]: 12436 : replacement_feerate += {it->GetModifiedFee(), it->GetTxSize()};
1321 : : }
1322 : :
1323 [ + - ]: 6905 : auto err_string{m_pool->CheckConflictTopology(m_to_remove)};
1324 [ + + ]: 6905 : if (err_string.has_value()) {
1325 : : // Unsupported topology for calculating a feerate diagram
1326 [ + - + - ]: 3225 : return util::Error{Untranslated(err_string.value())};
1327 : : }
1328 : :
1329 : : // new diagram will have chunks that consist of each ancestor of
1330 : : // direct_conflicts that is at its own fee/size, along with the replacement
1331 : : // tx/package at its own fee/size
1332 : :
1333 : : // old diagram will consist of the ancestors and descendants of each element of
1334 : : // all_conflicts. every such transaction will either be at its own feerate (followed
1335 : : // by any descendant at its own feerate), or as a single chunk at the descendant's
1336 : : // ancestor feerate.
1337 : :
1338 : 5830 : std::vector<FeeFrac> old_chunks;
1339 : : // Step 1: build the old diagram.
1340 : :
1341 : : // The above clusters are all trivially linearized;
1342 : : // they have a strict topology of 1 or two connected transactions.
1343 : :
1344 : : // OLD: Compute existing chunks from all affected clusters
1345 [ + + ]: 1167890 : for (auto txiter : m_to_remove) {
1346 : : // Does this transaction have descendants?
1347 [ + + ]: 1162060 : if (txiter->GetCountWithDescendants() > 1) {
1348 : : // Consider this tx when we consider the descendant.
1349 : 563875 : continue;
1350 : : }
1351 : : // Does this transaction have ancestors?
1352 [ + - + + ]: 598185 : FeeFrac individual{txiter->GetModifiedFee(), txiter->GetTxSize()};
1353 [ + + ]: 598185 : if (txiter->GetCountWithAncestors() > 1) {
1354 : : // We'll add chunks for either the ancestor by itself and this tx
1355 : : // by itself, or for a combined package.
1356 [ + + ]: 593596 : FeeFrac package{txiter->GetModFeesWithAncestors(), static_cast<int32_t>(txiter->GetSizeWithAncestors())};
1357 [ + + ]: 593596 : if (individual >> package) {
1358 : : // The individual feerate is higher than the package, and
1359 : : // therefore higher than the parent's fee. Chunk these
1360 : : // together.
1361 [ + - ]: 392189 : old_chunks.emplace_back(package);
1362 : : } else {
1363 : : // Add two points, one for the parent and one for this child.
1364 [ + - ]: 201407 : old_chunks.emplace_back(package - individual);
1365 [ + - ]: 201407 : old_chunks.emplace_back(individual);
1366 : : }
1367 : : } else {
1368 [ + - ]: 4589 : old_chunks.emplace_back(individual);
1369 : : }
1370 : : }
1371 : :
1372 : : // No topology restrictions post-chunking; sort
1373 : 5830 : std::sort(old_chunks.begin(), old_chunks.end(), std::greater());
1374 : :
1375 : 5830 : std::vector<FeeFrac> new_chunks;
1376 : :
1377 : : /* Step 2: build the NEW diagram
1378 : : * CON = Conflicts of proposed chunk
1379 : : * CNK = Proposed chunk
1380 : : * NEW = OLD - CON + CNK: New diagram includes all chunks in OLD, minus
1381 : : * the conflicts, plus the proposed chunk
1382 : : */
1383 : :
1384 : : // OLD - CON: Add any parents of direct conflicts that are not conflicted themselves
1385 [ + + ]: 1167890 : for (auto direct_conflict : m_to_remove) {
1386 : : // If a direct conflict has an ancestor that is not in all_conflicts,
1387 : : // it can be affected by the replacement of the child.
1388 [ + + ]: 1162060 : if (direct_conflict->GetMemPoolParentsConst().size() > 0) {
1389 : : // Grab the parent.
1390 : 593596 : const CTxMemPoolEntry& parent = direct_conflict->GetMemPoolParentsConst().begin()->get();
1391 [ + + ]: 593596 : if (!m_to_remove.contains(m_pool->mapTx.iterator_to(parent))) {
1392 : : // This transaction would be left over, so add to the NEW
1393 : : // diagram.
1394 [ + - + - ]: 29721 : new_chunks.emplace_back(parent.GetModifiedFee(), parent.GetTxSize());
1395 : : }
1396 : : }
1397 : : }
1398 : : // + CNK: Add the proposed chunk itself
1399 [ + - ]: 5830 : new_chunks.emplace_back(replacement_feerate);
1400 : :
1401 : : // No topology restrictions post-chunking; sort
1402 : 5830 : std::sort(new_chunks.begin(), new_chunks.end(), std::greater());
1403 [ + - ]: 11660 : return std::make_pair(old_chunks, new_chunks);
1404 [ + - ]: 19640 : }
1405 : :
1406 : 1586289 : CTxMemPool::ChangeSet::TxHandle CTxMemPool::ChangeSet::StageAddition(const CTransactionRef& tx, const CAmount fee, int64_t time, unsigned int entry_height, uint64_t entry_sequence, bool spends_coinbase, int64_t sigops_cost, LockPoints lp)
1407 : : {
1408 : 1586289 : LOCK(m_pool->cs);
1409 [ + - + - ]: 1586289 : Assume(m_to_add.find(tx->GetHash()) == m_to_add.end());
1410 [ + - ]: 1586289 : auto newit = m_to_add.emplace(tx, fee, time, entry_height, entry_sequence, spends_coinbase, sigops_cost, lp).first;
1411 : 1586289 : CAmount delta{0};
1412 [ + - ]: 1586289 : m_pool->ApplyDelta(tx->GetHash(), delta);
1413 [ + + + - ]: 1733460 : if (delta) m_to_add.modify(newit, [&delta](CTxMemPoolEntry& e) { e.UpdateModifiedFee(delta); });
1414 : :
1415 [ + - ]: 1586289 : m_entry_vec.push_back(newit);
1416 [ + - ]: 1586289 : return newit;
1417 : 1586289 : }
1418 : :
1419 : 1219057 : void CTxMemPool::ChangeSet::Apply()
1420 : : {
1421 : 1219057 : LOCK(m_pool->cs);
1422 [ + - ]: 1219057 : m_pool->Apply(this);
1423 : 1219057 : m_to_add.clear();
1424 : 1219057 : m_to_remove.clear();
1425 [ + - ]: 1219057 : m_entry_vec.clear();
1426 [ + - ]: 1219057 : m_ancestors.clear();
1427 : 1219057 : }
|