Что такое вложенные теги?
Вложенные теги относятся к элементам HTML или XML, которые иерархически структурированы друг в друге. Например, тег <div>может содержать несколько тегов <p>, а каждый тег <p>может содержать вложенный тег <a>. внутри него. Извлечение данных из вложенных тегов может быть сложной задачей, но при использовании правильных методов это становится проще простого.

Метод 1: find_all()
Метод find_all()в BeautifulSoup позволяет искать все вхождения определенного тега или вложенных тегов в документе. Указав в аргументе нужные теги, вы сможете извлечь все совпадающие элементы.

from bs4 import BeautifulSoup
# Assuming 'html_doc' contains the HTML document
soup = BeautifulSoup(html_doc, 'html.parser')
# Extract all nested <p> tags
nested_tags = soup.find_all('p')

Метод

позволяет извлекать элементы на основе селекторов CSS, включая селекторы-потомки.

# Extract all <a> tags that are descendants of <p> tags
nested_tags = soup.select('p a')

# Extract <a> tags that are direct children of <p> tags
nested_tags = soup.select('p > a')

# Extract all nested tags recursively
def extract_nested_tags(element):
    nested_tags = []
    for child in element.children:
        if child.name:
            nested_tags.append(child)
        nested_tags.extend(extract_nested_tags(child))
    return nested_tags
nested_tags = extract_nested_tags(soup)

Не забывайте использовать эти методы ответственно и соблюдать условия обслуживания веб-сайта. Удачной чистки!