O interior de uma Bolsa de Exploração é realmente um espaço extradimensional?

Sim, o Bags of Holding cria espaço extradimensional

A partir da descrição do Portable Hole:

[snip]...Placing a portable hole inside an extradimensional space created by a bag of holding, Heward's handy haversack, or similar item ...[snip]

(existe uma formulação semelhante para o Bag of Holding e a Handy Haversack de Heward)

Sim, como @goodguy5 mostra. Desde que você demonstrou interesse nisso ...

Comparação de edições: o espaço "extra-dimensional" é mencionado algumas vezes

O item original de OD&D

Bag of Holding: A sack-sized magical bag which will contain 10,000 Gold Pieces as if they were only 300. Objects up to 10' length and 5' width and 3' height may be stuffed into the bag, but the weight equivalent, regardless of the weight of the object, then becomes 600. (Monsters and Treasures, TSR, 1974, p. 36)

Como na maioria dos OD&D, menos detalhes do que a próxima edição, que se referia a algo dimensional

AD&D 1e.

A diferença entre 'extra-dimensional' e 'não-dimensional' não é clara para mim, embora possa ser Gygax usando palavras com um pouco menos de precisão do que escritores e desenvolvedores posteriores usam.

Bag of Holding: As with other magic bags, this one appears to be a common cloth sack of about 2' X 4' size. The bag of holding opens into a non-dimensional space, and its inside is larger than its outside dimensions. Regardless of what is put into this item, the bag of holding always weighs a fixed amount. This weight, the bag's weight limit in contents, (DMG, AD&D 1e, p. 138)

BECMI

Basic tem uma descrição, nenhum de E / C / M / I possui. (Graças a @JohnP)

Bag of Holding: This item looks like a normal small sack, but anything placed within it disappears. Anyone may reach in and find the contents by touch. The bag will actually hold treasures up to 10,000 en in weight, but will only weigh 600 en when full. An item to be placed inside the bag may be no larger than 10' x 5' x 3'. A larger item will not fit inside.

Esta edição teve um delineamento de "max cube" que não está na edição atual. Assim como no OD&D, nenhum termo com "não dimensional" ou "extra dimensional" como descritivo foi usado.

AD&D 2e

O mesmo que AD&D 1e.

D&D 3.5

A descrição inicial é quase idêntica à do AD&D 1e, na medida em que se refere a espaço não dimensional, em vez de espaço extra-dimensional, mas há um tratamento mais detalhado do que acontece depois que a tabela é consultada sobre tamanhos de sacos de espera. (SRD 3.5 é minha fonte)

D&D 4e

Graças a ajuda de @Carcer. É escasso em seus detalhes e não menciona "algo dimensional" na descrição.

Bag of Holding
Level 5
- This item appears to be a simple sack of brown canvas.
- Wondrous Item 1,000 gp
- Property: This bag can hold up to 200 pounds in weight or 20 cubic feet in volume, but it always weighs only 1 pound. Drawing an item from a bag of holding is a minor action. (PHB 1, D&D 4e)

D&D 5e

Bag of Holding (como o 4e) só tem um tamanho (mude de AD & D / 3.x)

This bag has an interior space considerably larger than its outside dimensions, roughly 2 feet in diameter at the mouth and 4 feet deep. The bag can hold up to 500 pounds, not exceeding a volume of 64 cubic feet. The bag weighs 15 pounds, regardless of {snip} Placing a bag of holding inside an extradimensional space created by a handy haversack, portable hole, or similar item instantly destroys ... (SRD, v5.1, p. 210)

As @goodguy5 Como aponta sua resposta concisa e correta, você deve se referir a outro item para obter o texto que aponta para o Saco de Segurar como tendo espaço extradimensional.
(Da descrição do furo portátil)

Placing a portable hole inside an extradimensional space created by a bag of holding, Heward's handy haversack, or similar item (SRD, v5.1, p. 233)