0

0

Python字典多层级数据提取与广度优先搜索(BFS)实现

聖光之護

聖光之護

发布时间:2025-10-05 16:36:01

|

555人浏览过

|

来源于php中文网

原创

Python字典多层级数据提取与广度优先搜索(BFS)实现

本文详细介绍了如何利用Python中的广度优先搜索(BFS)算法,从一个嵌套字典结构中,根据给定的起始列表和目标列表,分层级地提取并组织数据。通过迭代地探索字典中的键值对,直到达到目标值,最终生成一个按迭代层级划分的结果字典,有效解决了复杂数据依赖的遍历问题。

问题场景描述

在处理图结构或层级依赖数据时,我们常会遇到需要从一个字典中,基于一组起始键(source_list)开始,逐步探索其值所对应的键,直到遇到一组目标值(target_list)为止。同时,要求将每层探索到的键值对按其迭代层级(0、1、2...)组织到一个结果字典中。

考虑以下示例数据:

  • source_list:起始节点列表,例如 ['a', 'b']
  • target_list:目标节点列表,例如 ['x', 'y', 'z']
  • my_dict:表示图结构的字典,键是节点,值是其相邻节点列表。
source_list = ['a', 'b']
target_list = ['x', 'y', 'z']
my_dict = {
    'a': ['e'],
    'b': ['f', 'd'],
    'e': ['g'],
    'f': ['t', 'h'],
    'd': ['x'],
    'g': ['x'],
    't': ['y'],
    'h': ['z']
}

期望的输出结果是一个字典,其中键是迭代层级,值是该层级中被探索到的键值对。

{0: {'a': ['e'], 'b': ['f', 'd']},
 1: {'e': ['g'], 'f': ['t', 'h'], 'd': ['x']},
 2: {'g': ['x'], 't': ['y'], 'h': ['z']}}

一个常见的误区是尝试直接迭代,但这可能无法正确处理层级关系,尤其是在 next_dict 的构建逻辑中,若没有正确追踪已访问节点和层级,可能导致结果不完整或不准确,例如只得到第一层的结果:{0: {'a': ['e'], 'b': ['f', 'd']}}。

广度优先搜索(BFS)原理

解决这类分层探索问题的理想算法是广度优先搜索(BFS)。BFS 是一种用于遍历或搜索树或图的算法。它从图的根(或任意给定节点)开始,首先探索所有相邻节点,然后对于每个相邻节点,再探索其所有相邻节点,以此类推。这种“一层一层”向外扩展的特性,使其非常适合按层级收集数据。

立即学习Python免费学习笔记(深入)”;

BFS 的核心思想是使用队列(deque)来管理待访问的节点。每次从队列中取出一个节点,访问其所有未访问的邻居,并将这些邻居加入队列。为了避免重复访问和无限循环(在有环图中),通常会使用一个 seen 集合来记录已访问过的节点。

BFS 解决方案一:基础实现

以下是一个基于 BFS 思想的函数 bfs,它能够根据 source_list 和 target_list 从 graph(即 my_dict)中分层提取数据。

from collections import deque

def bfs(source, target, graph):
    """
    使用广度优先搜索从图中分层提取数据。

    Args:
        source (list): 起始节点列表。
        target (list): 目标节点列表。
        graph (dict): 表示图结构的字典,键为节点,值为其相邻节点列表。

    Returns:
        dict: 按迭代层级组织的字典,键为层级,值为该层级中的键值对。
    """
    # 初始化队列,存储 (层级, 节点) 对
    queue = deque((0, node) for node in source)
    # 将目标列表转换为集合,以便快速查找
    target_set = set(target)
    # 记录已访问过的节点,防止重复和循环
    seen = set(source) # 初始时,source_list中的节点已被“访问”
    result = {}

    while queue:
        level, node = queue.popleft() # 取出当前层级和节点

        # 获取当前节点的邻居,如果节点不在图中,则视为空列表
        neighbors = graph.get(node, []) 

        # 将当前节点及其邻居添加到结果字典的对应层级中
        result.setdefault(level, {})[node] = neighbors.copy()

        for neighbor in neighbors:
            # 如果邻居节点已访问过,或它就是目标节点之一,则跳过
            if neighbor in seen or neighbor in target_set:
                continue
            # 标记邻居节点为已访问
            seen.add(neighbor)
            # 将邻居节点及其下一层级添加到队列
            queue.append((level + 1, neighbor))

    return result

# 示例调用
source_list = ['a', 'b']
target_list = ['x', 'y', 'z']
my_dict = {
    'a': ['e'],
    'b': ['f', 'd'],
    'e': ['g'],
    'f': ['t', 'h'],
    'd': ['x'],
    'g': ['x'],
    't': ['y'],
    'h': ['z']
}

output = bfs(source_list, target_list, my_dict)
print(output)

输出:

MCP Market
MCP Market

MCP Servers集合平台,帮你找到最好的MCP服务器

下载
{0: {'a': ['e'], 'b': ['f', 'd']},
 1: {'e': ['g'], 'f': ['t', 'h'], 'd': ['x']},
 2: {'g': ['x'], 't': ['y'], 'h': ['z']}}

代码解析:

  1. queue 初始化:存储元组 (level, node),level 表示当前节点所在的层级。初始时,source_list 中的所有节点都在第 0 层。
  2. target_set 和 seen:target_set 用于高效判断节点是否为目标节点。seen 集合用于记录所有已入队或已处理的节点,防止重复处理和陷入循环。
  3. while queue 循环:BFS 的主循环,当队列非空时持续进行。
  4. level, node = queue.popleft():从队列头部取出当前待处理的节点及其层级。
  5. result.setdefault(level, {})[node] = neighbors.copy():将当前节点及其邻居添加到 result 字典中对应 level 的子字典里。setdefault 确保 level 键存在。
  6. 遍历 neighbors:对当前节点的所有邻居进行迭代。
  7. if neighbor in seen or neighbor in target_set:如果邻居已访问过,或者它就是 target_list 中的一个值,则不将其加入队列,因为我们不需要继续探索这些路径。
  8. seen.add(neighbor) 和 queue.append((level + 1, neighbor)):将未访问且非目标的邻居标记为已访问,并将其与下一层级 level + 1 一起加入队列。

BFS 解决方案二:优化层级构建

为了更清晰地构建每个层级的结果,可以对 BFS 过程进行优化,将每个层级的节点处理逻辑封装在一个辅助函数中。这种方法通过在一个内部循环中处理完当前层级的所有节点,然后才递增层级计数。

from collections import deque

def solution(source, target, graph):
    """
    使用优化的广度优先搜索从图中分层提取数据。

    Args:
        source (list): 起始节点列表。
        target (list): 目标节点列表。
        graph (dict): 表示图结构的字典,键为节点,值为其相邻节点列表。

    Returns:
        dict: 按迭代层级组织的字典,键为层级,值为该层级中的键值对。
    """
    target_set = set(target)
    result = {}

    # 初始时,将source_list中的所有节点标记为已访问,并加入队列
    seen = set(source)
    queue = deque(source)
    level = 0

    while queue:
        # 构建当前层级的所有键值对
        result[level] = build_level_dict(graph, queue, seen, target_set)
        level += 1 # 进入下一层

    return result


def build_level_dict(graph, queue, seen, target_set):
    """
    辅助函数,用于构建当前BFS层级的字典。
    """
    # 记录当前层级队列的尾部节点,作为当前层级结束的标志
    tail = queue[-1] 
    level_dict = {}

    while True:
        node = queue.popleft() # 取出当前层级的节点

        # 获取当前节点的邻居,如果节点不在图中,则视为空列表
        neighbors = graph.get(node, [])
        level_dict[node] = neighbors.copy() # 添加到当前层级字典

        for neighbor in neighbors:
            # 如果邻居节点已访问过,或它就是目标节点之一,则跳过
            if neighbor in seen or neighbor in target_set:
                continue
            seen.add(neighbor) # 标记邻居节点为已访问
            queue.append(neighbor) # 将邻居节点添加到队列,等待下一层处理

        if node == tail: # 如果当前节点是本层级的最后一个节点,则本层处理完毕
            return level_dict

# 示例调用
source_list = ['a', 'b']
target_list = ['x', 'y', 'z']
my_dict = {
    'a': ['e'],
    'b': ['f', 'd'],
    'e': ['g'],
    'f': ['t', 'h'],
    'd': ['x'],
    'g': ['x'],
    't': ['y'],
    'h': ['z']
}

output_optimized = solution(source_list, target_list, my_dict)
print(output_optimized)

输出:

{0: {'a': ['e'], 'b': ['f', 'd']},
 1: {'e': ['g'], 'f': ['t', 'h'], 'd': ['x']},
 2: {'g': ['x'], 't': ['y'], 'h': ['z']}}

代码解析:

  1. solution 函数:负责初始化 seen、queue 和 level,并主导层级迭代。
  2. build_level_dict 辅助函数
    • 通过 tail = queue[-1] 记录当前层级在队列中的最后一个节点。
    • 内部 while True 循环持续从队列中取出节点,直到遇到 tail 节点,表示当前层级的所有节点都已处理完毕。
    • 处理逻辑与基础 BFS 类似,将节点的邻居加入队列,并更新 seen 集合。
    • 返回构建好的 level_dict。

这种优化版本在某些情况下可能稍微快一些,因为它避免了在队列中存储层级信息(level),而是通过外部循环和 tail 标记来管理层级,从而减少了每次 popleft 和 append 操作的数据量。

注意事项

  • 图的类型:如果 my_dict 保证是一个树结构(无环图),那么 seen 集合可以移除,因为不会有重复访问的节点。但在大多数实际应用中,为了健壮性,保留 seen 是一个好习惯,以应对可能存在的循环引用。
  • 内存消耗:对于非常大的图,seen 集合和 queue 可能会占用大量内存。需要根据实际情况评估内存使用。
  • 目标节点处理:一旦遇到 target_list 中的节点,我们停止沿着该路径继续探索。这意味着 target_list 中的节点本身不会作为键出现在 result 字典的任何层级中,而是作为某个键的“值”出现,并且其子节点不会被进一步探索。
  • 键不存在:在获取 neighbors 时,使用了 graph.get(node, []),这可以优雅地处理 node 不在 graph 中的情况,避免 KeyError。

总结

通过本文的介绍,我们了解了如何利用广度优先搜索(BFS)算法有效地从一个 Python 字典中,根据起始节点和目标节点,分层级地提取和组织数据。无论是基础的 BFS 实现还是通过辅助函数优化层级构建的版本,核心都在于利用队列的先进先出特性和 seen 集合来保证按层级遍历且不重复。这种方法在处理依赖关系、路径查找或层级数据展示等场景中具有广泛的应用价值。

相关专题

更多
python开发工具
python开发工具

php中文网为大家提供各种python开发工具,好的开发工具,可帮助开发者攻克编程学习中的基础障碍,理解每一行源代码在程序执行时在计算机中的过程。php中文网还为大家带来python相关课程以及相关文章等内容,供大家免费下载使用。

771

2023.06.15

python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

661

2023.07.20

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

764

2023.07.25

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

659

2023.07.31

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

1345

2023.08.03

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

549

2023.08.04

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

579

2023.08.04

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

730

2023.08.11

Golang 性能分析与pprof调优实战
Golang 性能分析与pprof调优实战

本专题系统讲解 Golang 应用的性能分析与调优方法,重点覆盖 pprof 的使用方式,包括 CPU、内存、阻塞与 goroutine 分析,火焰图解读,常见性能瓶颈定位思路,以及在真实项目中进行针对性优化的实践技巧。通过案例讲解,帮助开发者掌握 用数据驱动的方式持续提升 Go 程序性能与稳定性。

9

2026.01.22

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
最新Python教程 从入门到精通
最新Python教程 从入门到精通

共4课时 | 11.8万人学习

Django 教程
Django 教程

共28课时 | 3.3万人学习

SciPy 教程
SciPy 教程

共10课时 | 1.2万人学习

关于我们 免责申明 举报中心 意见反馈 讲师合作 广告合作 最新更新
php中文网:公益在线php培训,帮助PHP学习者快速成长!
关注服务号 技术交流群
PHP中文网订阅号
每天精选资源文章推送

Copyright 2014-2026 https://www.php.cn/ All Rights Reserved | php.cn | 湘ICP备2023035733号