《Python大数据可视化方法与实践（微课版）》课件 第8章 知识图谱可视化

第8章知识图谱可视化第8章信息时代的挑战与知识图谱的价值时代背景在当前信息化和数字化时代，面对大数据洪流和信息爆炸的挑战，如何从海量的数据资源中提炼出有价值的知识，是实现信息化和现代化的关键任务之一。知识图谱的角色知识图谱通过独特的结构化知识表示和组织机制，为构建智能系统和实现信息化、现代化提供了强大的支撑和创新框架。第8章知识图谱的核心价值知识网络画卷将实体、关系和属性绘制成反映现实世界的知识网络，有效模拟人类对复杂事物间联系与规律的认知过程。提升数据价值能够高效且精准地进行信息检索、智能决策分析，极大提升了数据资源的价值挖掘效率和利用水平。推动数字经济有力推动了我国数字经济和智慧社会的发展，助力各行各业的智能化升级转型。第8章本章研究内容概览核心概念知识图谱定义与SPO三元组架构表示逻辑架构与体系架构数据抽取非结构化与结构化数据LTP实践分词、词性标注等应用本章旨在深度剖析知识图谱的核心概念、构成要素及其表达方式，并针对非结构化和结构化数据抽取技术展开深入探讨，结合Python编程实践解决实际应用中复杂的知识管理与深度分析问题。第8章8.1知识图谱的概念本质定义知识图谱本质上是一种揭示实体之间关系的语义网络，可以对现实世界的事物及其相互关系进行形式化的描述。核心特征揭示实体之间的关系对现实世界进行形式化描述结构化的知识表示与组织模拟人类认知复杂事物的过程8.1知识图谱的概念Google2012年正式提出知识图谱1提出时间2012年5月17日，谷歌正式提出了知识图谱（KnowledgeGraph）的概念。2初衷目标初衷是优化搜索引擎返回的结果，提高用户的搜索质量及体验。3核心能力搜索引擎能够理解用户意图，而不仅仅是匹配关键词字符串。8.1知识图谱的概念搜索引擎示例：理解用户意图假设我们想知道国色天香的花是什么，在搜索引擎中进行搜索后，搜索引擎会准确返回牡丹这一信息，说明搜索引擎理解了用户的意图，知道我们要找的是牡丹，而不是仅仅返回关键词为国色天香的花的网页。这正是知识图谱的能力体现：从字符串匹配升级为语义理解与知识推理。8.1知识图谱的概念语义网：知识图谱的先驱语义网的提出早在2001年就有文献提出了语义网（SemanticNetwork）的概念，倡导使用本体模型来形式化表达数据中的隐含语义。衍生标准RDF（资源描述框架）：ResourceDescriptionFrameworkOWL（万维网本体语言）：WebOntologyLanguage学界评价知识图谱技术的出现是对语义网标准与技术的一次继承与发展。8.1知识图谱的概念知识图谱将信息转化为知识信息①（客观事实）物体达到某一温度时，由固态变成液态，这个温度称为物体的熔点。信息②（客观事实）冰在常温环境下的熔点是0摄氏度。知识（推理结论）冰在0摄氏度以上会融化。在信息的基础上建立实体之间的联系就能形成知识。知识图谱正是由一条条这样的知识组成的。8.1知识图谱的概念SPO三元组：知识的基本单元知识图谱是由一条条知识组成的，每条知识可表示为一个SPO三元组（Subject主语，Predicate谓语，Object宾语）。8.1知识图谱的概念SPO三元组字段详解S—Subject（主语）知识描述的主体实体，如"冰"、"牡丹"。P—Predicate（谓语）实体之间的关系或属性，如"熔点是"、"别称为"。O—Object（宾语）知识的客体或属性值，如"0摄氏度"、"国色天香的花"。8.1知识图谱的概念SPO三元组图示说明三元组示例①（冰，熔点是，0摄氏度）主语=冰，谓语=熔点是，宾语=0摄氏度三元组示例②（牡丹，别称，国色天香）主语=牡丹，谓语=别称，宾语=国色天香三元组示例③（谷歌，提出，知识图谱）主语=谷歌，谓语=提出，宾语=知识图谱每个SPO三元组对应知识图谱中的一条边：从主语节点（S）经谓语标签（P）指向宾语节点（O）。8.1知识图谱的概念SPO三元组与知识图谱的关系知识图谱多条连接SPO三元组知识图谱是由一条条知识组成的，每条知识可表示为一个SPO三元组。多个三元组相互连接，形成反映实体之间复杂关系的语义网络，即知识图谱。8.1概念小结小结回顾语义网络本质揭示实体之间关系，对现实世界进行形式化描述。Google2012提出优化搜索质量，理解用户意图，继承语义网技术。信息→知识转化在信息基础上建立实体联系，形成可推理的知识。SPO三元组每条知识表示为（主语，谓语，宾语）三元组结构。第8章8.2知识图谱的架构及表示方法模式层（SchemaLayer）构建在数据层之上，通过本体库规范数据层的事实表达，结构层次较强，冗余程度较小。数据层（DataLayer）由一系列的事实组成，知识以事实为单位进行存储，采用三元组形式，可选图数据库作为存储介质。8.2知识图谱的架构及表示方法数据层：事实的存储基础数据层的组成数据层由一系列的事实组成，知识将以事实为单位进行存储。如果用（实体1，关系，实体2）、（实体，属性，属性值）这样的三元组来表示事实，可选择图数据库作为存储介质。推荐存储介质开源图数据库

Neo4j开源图数据库

JanusGraph8.2知识图谱的架构及表示方法模式层：知识库的概念模板模式层的作用模式层构建在数据层之上，主要通过本体库来规范数据层的一系列事实表达。本体的定义本体是结构化知识库的概念模板，通过本体库而形成的知识库不仅层次结构较强，并且冗余程度较小。模式层特点层次结构较强冗余程度较小规范事实表达方式8.2知识图谱的架构及表示方法知识图谱的体系架构与构建过程更新迭代知识融合知识抽取原始数据知识图谱的构建过程需要随人的认知能力发展而不断更新迭代。知识图谱主要有自顶向下（top-down）与自底向上（bottom-up）两种构建方式。8.2知识图谱的架构及表示方法自顶向下vs自底向上构建方式自顶向下（Top-Down）先为知识图谱定义数据模式与本体，再将实体加入知识库。该构建方式需要利用一些现有的结构化知识库作为其基础知识库。典型案例：Freebase—由元数据组成的大型合作知识库，内容主要由社区成员提供。自底向上（Bottom-Up）从开放数据库中提取出实体，将置信度较高的实体加入知识库，再构建顶层的本体模式。典型案例：谷歌知识图谱—目前大多数知识图谱均采用此方式构建。Freebase是一个开放知识库，包含大量的结构化数据，包括人物、地点、事物等实体的信息。8.2知识图谱的架构及表示方法构建方式对比分析选择依据有现成结构化知识库→优先自顶向下面向开放数据环境→优先自底向上大多数实际项目→自底向上8.2知识图谱的架构及表示方法知识图谱的三种表示要素实体（Entity）知识图谱中的具体事物或概念，可以是人、地点、组织、事件等，通常表示为节点。关系（Relationship）描述实体之间的连接、联系或关联，通常由边来表示，连接两个实体节点。属性（Attribute）描述实体或关系的特征或元数据，可作为节点或边的属性存储，丰富图谱信息。8.2知识图谱的架构及表示方法实体（Entity）详解实体的定义实体是知识图谱中的具体事物或概念，可以是人、地点、组织、事件等。实体通常由唯一的标识符来表示，例如一个字符串或数字。实体的表示方式在知识图谱中，实体通常表示为节点节点之间通过边来表示它们之间的关系实体的属性可以作为节点的属性存储属性示例实体的名称、类型、描述等。8.2知识图谱的架构及表示方法关系（Relationship）详解关系的定义关系用于描述实体之间的连接、联系或关联。在知识图谱中，关系通常由边来表示，边连接两个实体节点，并表示它们之间的某种关联关系。关系的特征可以是有向的或无向的可以用标签或属性来描述更多细节例如，父亲关系可以表示为从一个节点指向另一个节点的有向边8.2知识图谱的架构及表示方法属性（Attribute）属性的定义属性用于描述实体或关系的特征或元数据，作为节点或边的属性存储，以丰富知识图谱中的信息。实体属性示例实体的名称、类型、描述、时间戳等信息。关系属性示例关系的强度、权重、时间戳等信息。属性可以作为节点或边的属性存储，进一步丰富知识图谱的信息表达能力，使图谱更接近真实世界的复杂性。8.2知识图谱的架构及表示方法图形化表示：实体、关系与属性的统一知识图谱可以通过图的形式表示，其中实体表示为节点，关系表示为边，而属性则用于存储实体和关系的附加信息。这种图形表示方法使得知识图谱能够直观展示实体之间的关系，便于对知识进行存储、查询和分析。8.2知识图谱的架构及表示方法知识抽取：构建知识图谱的关键技术知识抽取的定义知识抽取是构建知识图谱的关键技术，主要面向开放的链接数据，通过自动化的技术抽取出可用的知识单元。三大知识要素实体：具体事物或概念关系：实体间的连接属性：特征或元数据知识抽取的目的形成一系列高质量的事实表达，为模式层的构建奠定基础。8.2知识图谱的架构及表示方法知识抽取的两大方向非结构化数据抽取针对社交媒体信息、新闻、论文等文本数据，运用分词、词性标注、命名实体识别等NLP技术进行知识抽取。结构化数据抽取针对数据库、表格、知识库等有固定格式的数据，通过映射规则将结构化数据转换为知识图谱的三元组表示。8.2.1非结构化数据的抽取在日常生活中，随处可见非结构化的数据，如社交媒体信息、新闻、论文等。为了从这类数据中提取知识，我们需要对文本进行分句，运用分词技术和词性标注技术等提取出实体、关系、属性信息。本小节将使用Python中的LTP（LanguageTechnologyPlatform，语言技术平台）对非结构化数据进行知识抽取。8.2.1非结构化数据的抽取非结构化数据抽取的处理流程命名实体识别分词与词性标注分句处理原始文本输入为了从非结构化数据中提取知识，需要综合运用多种自然语言处理技术，逐步从原始文本中提炼出结构化的知识单元——实体、关系与属性。8.2.1非结构化数据的抽取LTP：语言技术平台简介LTP全称LTP（LanguageTechnologyPlatform，语言技术平台）是Python中用于中文自然语言处理的综合工具库。核心功能LTP提供了一系列中文自然语言处理工具，用户可以使用这些工具对中文文本进行分词、词性标注、句法分析等工作。8.2.1非结构化数据的抽取LTP提供的组件Trainer针对单一自然语言处理任务，生成统计机器学习模型的工具。调用模型接口针对单一自然语言处理任务，调用模型进行分析的编程接口。WebService针对单一自然语言处理任务，基于RESTfulAPI的云端服务。8.2.1非结构化数据的抽取LTP提供的组件ltp_coreLTP的核心组件，用于对中文文本进行分词、词性标注、句法分析等。torchmetricsPyTorch提供的度量计算库，可以用于计算各种指标。ltp_data_preparationLTP的数据预处理组件，用于数据清洗和格式化。ltp_modelLTP的模型组件，提供了预训练的模型。8.2.1非结构化数据的抽取LTP可调用的模型文件分句模型cws.model用于将文本分割成句子。词性标注模型pos.model用于标注每个词的词性。命名实体识别模型ner.model用于识别文本中的命名实体（如人名、地名、机构名等）。8.2.1非结构化数据的抽取LTP可调用的模型文件依存句法分析模型parser.model用于分析句子中词与词之间的依存关系。语义角色标注模型pisrl.model用于标注句子中每个词的语义角色。8.2.1非结构化数据的抽取步骤1：安装LTP安装命令打开Windows的命令行窗口，输入以下命令并按Enter键：pipinstallltp安装说明该命令将自动从PyPI下载并安装LTP及其依赖项。受到网络稳定性影响，如果下载失败，读者可以尝试使用国内镜像源，如阿里云镜像源、清华大学镜像源等。8.2.1非结构化数据的抽取步骤1：使用国内镜像源安装推荐镜像源阿里云镜像源pipinstallltp-i/pypi/simple/清华大学镜像源pipinstallltp-i/simple/在网络不稳定或访问PyPI速度较慢的环境下，使用国内镜像源可以显著提高下载速度和安装成功率。8.2.1非结构化数据的抽取步骤2：载入模型（默认Small）载入模型代码fromltpimportLTPltp=LTP()#默认加载LTP/Small模型代码说明fromltpimportLTP：从ltp库中导入LTP类ltp=LTP()：实例化LTP对象，不传入参数时默认加载LTP/Small模型LTP设计了LTP/Tiny、LTP/Small和LTP/Base三种不同的版本，模型的大小和复杂性不同，应用场景和功能也各不相同。8.2.1非结构化数据的抽取步骤2：三种模型版本对比LTP/Tiny最小的模型，拥有最小的体积和最简单的结构，适合在资源受限的环境中使用。LTP/Small（默认）比Tiny模型大，复杂性比Tiny模型高，但仍然比Base模型小并且简单，适用于一些需要快速响应的场景。LTP/Base最大的模型，拥有最丰富的特性和最高的准确率，结构复杂，使用时需要更多的计算资源。8.2.1非结构化数据的抽取步骤2：指定模型路径载入指定其他版本模型如果需要加载其他版本的模型，可以使用以下方式实现：ltp=LTP(path="指定模型的路径")使用场景建议资源受限、嵌入式环境→选择Tiny模型一般应用、快速响应需求→选择Small模型（默认推荐）高精度要求、充足算力→选择Base模型8.2.1非结构化数据的抽取步骤3：分句——StnSplit()函数说明分句功能可以使用LTP的StnSplit()函数进行分句。两种调用方式StnSplit().split()：需要传入一个字符串类型的对象，用于处理单条文本。StnSplit().batch_split()：需要传入一个列表对象，可以用来解析多个句子。8.2.1非结构化数据的抽取步骤3：split()单条分句代码示例代码fromltpimportStnSplitsents=StnSplit().split("汤姆生病了。他去了医院。")代码说明导入StnSplit类调用split()方法传入字符串函数将字符串按句子边界切分为列表输出结果"汤姆生病了。""他去了医院。"8.2.1非结构化数据的抽取步骤3：batch_split()批量分句代码示例代码sents=StnSplit().batch_split(["他叫汤姆去拿外衣。","汤姆生病了。他去了医院。"])代码说明调用batch_split()方法，传入包含多个字符串的列表对象函数将列表中每个字符串分别按句子边界切分适合批量处理多条文本，提升处理效率输出结果"他叫汤姆去拿外衣。""汤姆生病了。""他去了医院。"8.2.1非结构化数据的抽取步骤3：split()与batch_split()对比split()方法输入：单个字符串适用：处理单条文本示例：split("汤姆生病了。他去了医院。")batch_split()方法输入：字符串列表适用：批量处理多条文本示例：batch_split(["句子1","句子2"])8.2.1非结构化数据的抽取步骤3：分句输出结果解读1输入文本汤姆生病了。他去了医院。2分句处理StnSplit()按句子边界自动识别切分点3句子①汤姆生病了。4句子②他去了医院。分句是后续分词、词性标注等所有NLP任务的基础步骤，确保每条处理单元为独立、完整的语义单位。8.2.1非结构化数据的抽取步骤4：用户自定义词典——add_words()函数作用add_words()函数可以用于添加程序需要的自定义词语，从而避免分词错误。参数说明参数freq：表示该词语在语料中出现的频率freq值越高，分词时越优先识别为整体8.2.1非结构化数据的抽取步骤4：add_words()示例代码示例代码fromltpimportLTPltp.add_words(["自定义词"],freq=10)代码说明调用ltp.add_words()方法，传入自定义词语列表参数freq=10指定该词语在语料中出现的频率为10可同时添加多个自定义词语在LTP中，用户自定义词典功能只能自定义新词，不能为自定义的词语添加词性，否则可能导致该词词性错误。8.2.1非结构化数据的抽取步骤4：自定义词典使用注意事项可以做使用add_words()添加新词，帮助分词器正确识别专有名词、新词、领域术语等。❌不能做的在LTP中，用户自定义词典功能只能自定义新词，不能为自定义的词语添加词性，否则可能导致该词词性错误。8.2.1非结构化数据的抽取步骤5：分词——pipeline(cws)参数解释函数说明LTP的ltp.pipeline()函数可以用于分词，其中：参数tasks：将要执行的任务列表"cws"：表示进行中文分词return_dict=False：返回结果为列表格式，而非字典格式8.2.1非结构化数据的抽取步骤5：分词示例代码示例代码fromltpimportLTPltp=LTP()words=ltp.pipeline(["他叫汤姆去拿外衣。"],tasks=["cws"],return_dict=False)代码说明传入待分词的文本列表tasks=["cws"]：指定执行中文分词任务return_dict=False：以列表格式返回结果输出结果[['他','叫','汤姆','去','拿','外衣','。']]8.2.1非结构化数据的抽取步骤5：分词输出结果解读7分词结果数他/叫/汤姆/去/拿/外衣/。1输入句子数一条输入句子对应一个分词列表输出结果为嵌套列表格式：外层列表对应输入的句子数量，内层列表为每个句子的分词序列。8.2.1非结构化数据的抽取步骤5：为何"cws"参数至关重要执行分词任务的参数cws很重要。中文分词（cws）是自然语言处理中的一项重要任务，旨在将连续的文本划分为有意义的词汇单元。在进行其他自然语言处理任务，如词性标注、命名实体识别、依存句法分析等时，通常需要先进行中文分词，以提供更准确的基础数据。因此，在利用LTP进行这些任务的处理时，cws参数是必不可少的。8.2.1非结构化数据的抽取步骤6：词性标注——任务说明词性标注的目标LTP的ltp.pipeline()函数可以用于标注词性，执行任务的参数选择"pos"，表示对传入语料进行词性标注。输出格式输出结果为每一个分词的词性标签。前提条件词性标注需要在分词（cws）的基础上进行，因此tasks参数中必须同时包含"cws"和"pos"。8.2.1非结构化数据的抽取步骤6：词性标注示例代码示例代码fromltpimportLTPltp=LTP()result=ltp.pipeline(["他叫汤姆去拿外衣。"],tasks=["cws","pos"])print(result.pos)代码说明tasks=["cws","pos"]：同时执行分词和词性标注两个任务result.pos：访问词性标注结果8.2.1非结构化数据的抽取步骤6：词性标注输出结果输出结果['他','叫','汤姆','去','拿','外衣','。']['r','v','nh','v','v','n','wp']结果解读第一行为分词序列，第二行为对应的词性标签序列，两者一一对应。8.2.1非结构化数据的抽取步骤6：词性标签含义详解r—代词示例：他代替名词或名词短语的词。v—动词示例：叫、去、拿表示动作或状态的词。nh—人名示例：汤姆命名实体中的人物名称。n—名词示例：外衣表示人、事、物、地点等的词。wp—标点符号示例：。各类标点符号的统一标签。8.2.1非结构化数据的抽取步骤6：分词与词性标注对照表词语他叫汤姆去词性标签rvnhv词性含义代词动词人名动词词语拿外衣。词性标签vnwp词性含义动词名词标点符号8.2.1非结构化数据的抽取步骤6：词性标注在知识抽取中的作用实体关系抽取命名实体识别词性标注分词词性标注为后续命名实体识别（NER）和依存句法分析提供重要的语法特征，是从非结构化文本中准确提取实体和关系的关键基础步骤。LTP实践总结LTP六大步骤完整流程01安装LTPpipinstallltp，可使用国内镜像加速02载入模型ltp=LTP()，默认Small模型，支持指定路径03分句StnSplit().split()/batch_split()04自定义词典ltp.add_words()，避免分词错误05分词ltp.pipeline(tasks=["cws"])06词性标注ltp.pipeline(tasks=["cws","pos"])步骤7：命名实体识别（NER）LTP的ltp.pipeline()函数通过设置参数tasks=["ner"]，可对输入语料进行命名实体识别，自动定位并分类文本中的关键实体。NER·可识别实体类型七类可识别实体Nh人名Ns地名Ni机构名T时间D日期M货币P百分比NER·OSBIE标注体系OSBIE标注规范LTP的命名实体识别使用OSBIE标注体系，对实体边界进行精确标注：O非实体，普通词汇S单字实体，整个实体由单个字构成B实体开始，多字实体的第一个字I实体中间，多字实体的中间字E实体结束，多字实体的最后一个字NER·示例代码NER代码示例以下代码调用LTP对句子进行分词与命名实体识别：fromltpimportLTPltp=LTP()result=ltp.pipeline(["在武汉，他叫汤姆去拿外衣。"],tasks=["cws","ner"])print(result.ner)tasks参数同时传入cws（分词）和ner（实体识别），保证识别结果与词语边界对齐。NER·输出结果NER输出解析输出结果如下：[('Ns','武汉'),('Nh','汤姆')]结果说明('Ns','武汉')：武汉被识别为地名（Ns）('Nh','汤姆')：汤姆被识别为人名（Nh）每个识别结果以(类型,实体文本)的元组形式返回NER·要点回顾命名实体识别小结函数调用使用ltp.pipeline()，参数tasks包含ner七类实体Nh/Ns/Ni/T/D/M/P，覆盖常见命名实体OSBIE体系O-S-B-I-E五种标签，精准标注实体边界输出格式列表嵌套元组：(实体类型,实体文本)步骤8：语义角色标注（SRL）语义角色标注的任务是找到句子中每个谓语成分的论元，然后为它们标注相应的语义角色。SRL·任务说明SRL核心概念聚焦谓词—论元结构这项任务并未深入分析句子包含的所有语义信息，仅专注于句子的谓词—论元结构，并用语义角色来描述这些结构关系。函数与参数语义角色标注需要使用ltp.pipeline()函数，并设置参数为srl，表示对传入语料进行语义角色标注。任务目标找到句子中每个谓语成分的论元，然后为它们标注相应的语义角色。SRL·示例代码SRL代码示例fromltpimportLTPltp=LTP()result=ltp.pipeline(["他叫汤姆去拿外衣。"],tasks=["cws","srl"])print(result.srl)tasks参数传入cws与srl，对句子同时完成分词和语义角色标注。SRL·输出结果SRL输出解析{'predicate':'叫','arguments':[('A0','他'),('A1','汤姆'),('A2','去拿外衣')]}{'predicate':'拿','arguments':[('A0','汤姆'),('A1','外衣')]}句子含两个谓语：叫和拿，各自带有不同论元；每个结果字典包含predicate（谓语）和arguments（论元列表）两个键。SRL·输出详解谓语"叫"的论元分析predicate:叫arguments:A0→他A1→汤姆A2→去拿外衣角色说明A0：施事者——他（发出叫的人）A1：受事者——汤姆（被叫的人）A2：工具或次要受事——去拿外衣（被叫去做的事）SRL·输出详解谓语"拿"的论元分析predicate:拿arguments:A0→汤姆A1→外衣角色说明A0：施事者——汤姆（执行拿动作的人）A1：受事者——外衣（被拿的物品）一个句子可识别出多个谓词及其各自的论元结构表8-1·语义角色类型-1核心论元角色A0–A4标签英文名含义示例ARG0causer/experiencer施事者或触发者[医生ARG0]鼓励病人ARG1patient受事者医生鼓励[病人ARG1]ARG2instrument/attribute工具或次要受事用[听诊器ARG2]检查ARG3source来源或依据小明[根据报告ARG3]决定ARG4goal目标或结果时间缩短到[三天ARG4]表8-1·语义角色类型-2附加论元角色ADV–EXT标签英文名含义示例ADVadverbial状语我们[即将ADV]出发BNFbeneficiary受益者为[学生BNF]提供帮助CNDcondition条件[如果下雨CND]，活动取消CRDcoordinated并列成分小明[和小芳CRD]吃饭DGRdegree程度价格高了[三倍DGR]DIRdirection方向向[东DIR]移动DISdiscoursemarker话语标记他来了，[但是DIS]不说话EXTextent范围持续[三天EXT]表8-1·语义角色类型-3附加论元角色FRQ–TMP标签英文名含义示例FRQfrequency频率每天[两次FRQ]LOClocative地点放在[桌子LOC]上MNRmanner方式以[认真MNR]的态度PRPpurpose目的[为了健康PRP]锻炼QTYquantity数量买了[五斤QTY]TMPtemporal时间[明天TMP]开会TPCtopic话题[关于会议TPC]，大家意见不一表8-1·语义角色类型-4谓语与领属类角色PRD–PSE标签英文名含义示例PRDpredicate谓语动词他[跑步PRD]很快PSRpossessor领属者[小明PSR]的书PSEpossessee被领属对象小明的[书PSE]语义角色标签体系覆盖核心论元（ARG0-ARG4）和多种附加角色，能够细致描述句中谓词与论元的语义关系。步骤9：依存句法分析（DEP）依存句法分析是一种用于确定句子中各个词之间的依赖关系的方法，分析结果以字典形式呈现，包含两个键值对。DEP·任务说明DEP核心机制函数与参数分析依存句法需要使用ltp.pipeline()函数，执行任务的参数选择dep，表示对传入语料进行依存句法分析。输出结构分析结果以字典形式呈现，包含两个键值对：head键和label键。索引规则索引从1开始，0表示虚拟根节点（整个句子的核心起点）。DEP·HEAD键详解head键：依存头部索引head键对应一个列表，列表中的每个元素表示输入句子中每个词依存头部（父节点）的索引。索引从1开始，0表示虚拟根节点。例如，[2,0,2,5,2,5,2]表示第1个词的依存头部是第2个词，第2个词依存于虚拟根节点，第3个词的依存头部仍是第2个词，依此类推。DEP·LABEL键详解label键：关系标签列表label键对应一个列表，表示句子中每个词与其依存头部之间的关系标签。例如，['SBV','HED','DBL','ADV','VOB','VOB','WP']表示第1个词与其依存头部之间的关系标签为SBV（主谓关系），第2个词是句子的核心成分（HED），第3个词与其依存头部之间的关系标签为DBL（兼语关系），以此类推。DEP·示例代码DEP代码示例fromltpimportLTPltp=LTP()result=ltp.pipeline(["他叫汤姆去拿外衣。"],tasks=["cws","dep"])print(result.dep)tasks参数传入cws与dep，确保分词结果与依存分析对齐输出。DEP·输出结果DEP输出解析{'head':[2,0,2,5,2,5,2],'label':['SBV','HED','DBL','ADV','VOB','VOB','WP']}词序词语headlabel1他2（叫）SBV主谓关系2叫0（根节点）HED核心3汤姆2（叫）DBL兼语4去5（拿）ADV状中5拿2（叫）VOB动宾6外衣5（拿）VOB动宾7。2（叫）WP标点表8-2·依存句法关系-1主谓、动宾与间宾关系标签英文名含义示例SBVsubject-verb主谓语关系我送她一束花（我→送）VOBverb-object动宾关系我送她一束花（送→花）IOBindirect-object间宾关系我借他一本书（借→他）FOBfronting-object前置宾语什么书他都读（书←读）DBLdouble兼语他请我吃饭（请→我，我→吃饭）表8-2·依存句法关系-2定中、状中与动补关系标签英文名含义示例ATTattribute定中关系红苹果（红←苹果）ADVadverbial状中结构非常美丽（非常←美丽）CMPcomplement动补结构做完了作业（做→完）COOcoordinate并列关系大山和大海（大山→大海）POBpreposition-object介宾关系在贸易区内（在→内）表8-2·依存句法关系-3附加与核心关系标签英文名含义示例LADleftadjunct左附加关系大山和大海（和←大海）RADrightadjunct右附加关系孩子们（孩子←们）ISindependentstructure独立结构[天气很好]，[但是我不出门]HEDhead核心关系[下雨]了HED标记句子的核心谓词，即head列表中索引为0（虚拟根节点）所指向的词。步骤10：语义依存分析·树（SDP）基于树结构的语义依存分析需要使用ltp.pipeline()函数完成，执行任务的参数选择sdp。结果是一个包含字典的列表，字典中有两个键：head和label。SDP·任务说明SDP与DEP的异同相似点与依存句法类似，SDP结果也以包含head和label两键的字典列表返回，下标同样从1开始。不同点SDP捕捉的是语义层面的依存关系，而非句法层面，标签含义不同（如AGT、PAT、DATV等语义角色标签）。SDP·示例代码SDP代码示例fromltpimportLTPltp=LTP()result=ltp.pipeline(["他叫汤姆去拿外衣。"],tasks=["cws","sdp"])print(result.sdp)tasks参数传入sdp，对句子进行基于树结构的语义依存分析。SDP·输出结果SDP输出解析{'head':[2,0,2,2,4,5,2],'label':['AGT','Root','DATV','eSUCC','eSUCC','PAT','mPUNC']}词序词语headlabel1他2（叫）AGT施事2叫0（根节点）Root根3汤姆2（叫）DATV涉事4去2（叫）eSUCC后继5拿4（去）eSUCC后继6外衣5（拿）PAT受事7。2（叫）mPUNC标点SDP·要点小结SDP要点回顾1参数选择sdp在ltp.pipeline()的tasks中传入sdp执行树结构语义依存分析2输出格式一致结果为包含head和label两键的字典，下标从1开始，0为虚拟根节点3语义标签不同使用AGT、PAT、DATV、eSUCC、mPUNC等语义角色标签，语义粒度更细步骤11：语义依存分析·图（SDPG）基于图结构的语义依存分析需要使用ltp.pipeline()函数完成，执行任务的参数选择sdpg。SDPG·任务说明SDPG输出结构列表嵌套元组输出结果是一个包含列表的列表。列表中的每个元素都是一个元组，表示一个词的语法信息。元组三要素元组的第一个元素是词在句子中的索引，第二个元素是词的词性标签，第三个元素是词的依存关系。索引从1开始。图vs树图结构允许一个词拥有多个父节点，比树结构能表达更丰富的语义关系。SDPG·虚拟根节点Root与虚拟根节点(2,0,'Root')这里的索引0代表一个虚拟根节点，因此，(2,0,'Root')表示叫是整个句子的根节点和语义中心。元组含义解读第1元素2：当前词在句中的索引（词语为叫）第2元素0：依存头部为虚拟根节点第3元素Root：关系标签，表示句子语义中心SDPG·元组含义元组结构说明第一个元组(1,2,'AGT')表示索引为1的词语他与索引为2的词语叫之间，存在施事（AGT）关系。第1元素当前词在句子中的索引（从1开始）第2元素依存头部词的索引（0=虚拟根节点）第3元素两词之间的语义依存关系标签SDPG·示例代码SDPG代码示例fromltpimportLTPltp=LTP()result=ltp.pipeline(["他叫汤姆去拿外衣。"],tasks=["cws","sdpg"])print(result.sdpg)tasks参数传入sdpg，执行基于图结构的语义依存分析，允许一词多父节点。SDPG·输出结果SDPG输出解析[(1,2,'AGT'),(2,0,'Root'),(3,2,'DATV'),(3,4,'AGT'),(3,5,'AGT'),(4,2,'eSUCC'),(5,2,'eSUCC'),(5,4,'eSUCC'),(6,5,'PAT'),(7,2,'mPUNC')]注意词语3（汤姆）同时出现在(3,2,'DATV')、(3,4,'AGT')、(3,5,'AGT')三个元组中，体现了图结构支持一词多父节点的特性。SDPG·输出详解各元组逐一解读元组词（索引）头部词（索引）关系(1,2,'AGT')他（1）叫（2）施事AGT(2,0,'Root')叫（2）虚拟根（0）根节点Root(3,2,'DATV')汤姆（3）叫（2）涉事DATV(3,4,'AGT')汤姆（3）去（4）施事AGT(3,5,'AGT')汤姆（3）拿（5）施事AGT(4,2,'eSUCC')去（4）叫（2）后继eSUCC(5,2,'eSUCC')拿（5）叫（2）后继eSUCC(5,4,'eSUCC')拿（5）去（4）后继eSUCC(6,5,'PAT')外衣（6）拿（5）受事PAT(7,2,'mPUNC')。（7）叫（2）标点mPUNC表8-3·语义依存关系-1施事、当事与受事角色标签含义说明示例AGT施事做出具体行为动作、持续动作以及表现心理活动的有意识的主体，具有主观能动性明天我将去看他（看，我，施事AGT）EXP当事非行为动作的执行者，不具有主观能动性，包括无意识运动的主体、非可控运动的主体以及各种关系的主体宝塔很高（高，宝塔，当事EXP）PAT受事受主体的行为动作所改变的直接客体从桌子上把书拿走（拿走，书，受事PAT）表8-3·语义依存关系-2客事、涉事与系事角色标签含义说明示例CONT客事事件所涉及但是并未改变的客体以及动作行为产生的新事物或结果我相信苏珊的话（相信，话，客事CONT）DATV涉事也称与事，是动作行为的非主动参与者班长给他一套工具（给，他，涉事DATV）LINK系事跟事件的参与者有关系的客体弟弟是中学生（是，中学生，系事LINK）表8-3·语义依存关系-3事件关系：并列与先行标签含义说明示例eCOO并列关系两个或多个平行的语义事件兄弟俩边走边说（走，说，并列eCOO）ePREC先行关系在时间、空间上发生有序的事件要想成功，就要努力（成功，努力，先行ePREC）eSUCC后继关系描述语义上更进一步的结果类事件他穿好衣服，走出门去（穿，走，后继eSUCC）表8-3·语义依存关系-4标记类关系：mPUNC/mNEG/mRELA标签含义说明示例mPUNC标点标记对语义事件中出现的标点符号的标注他喜欢音乐。（喜欢，句号，mPUNC）mNEG否定标记对事件中否定关系的标记她不像她母亲（像，不，mNEG）mRELA关系标记对句法事件中各种关系的标记但是我没有放弃看书（放弃，但是，mRELA）表8-3·语义依存关系-5标记类关系：mDEPD标签含义说明示例mDEPD依附标记概念或事件的语义依附的形式标记他在这里住了三十年（住，了，mDEPD）m系列标记（mPUNC/mNEG/mRELA/mDEPD）专门用于标注标点、否定词、关系词和语气词等附着性成分，不具独立语义，但对完整表达句义至关重要。表8-3·语义依存关系-6语义依存关系分类总览参与者角色AGT/EXP/PAT/CONT/DATV/LINK事件关系eCOO/ePREC/eSUCC标记类mPUNC/mNEG/mRELA/mDEPD根节点Root—指向虚拟根节点，标识句子语义中心SDPG·图结构优势图结构的核心优势一词多父节点在SDPG输出中，汤姆（索引3）同时作为叫（DATV）、去（AGT）、拿（AGT）三个词的关系对象，体现图结构相比树结构更强的语义表达能力。更完整的语义网络图结构输出的元组列表可以还原句子中所有词对之间的语义关系，为知识抽取提供更全面的信息基础。NER/SRL/DEP/SDP/SDPG横向对比任务参数输出格式核心用途NERner列表嵌套元组(类型,文本)识别人名/地名/机构名等实体SRLsrl字典{predicate,arguments}谓词—论元结构标注DEPdep字典{head,label}句法依存关系分析SDPsdp字典{head,label}基于树的语义依存分析SDPGsdpg列表嵌套元组(词,头,关系)基于图的语义依存分析从非结构化文本到知识图谱利用LTP可以将需要的主体和关系还有属性按照一定规则提取出来，如此就完成了对非结构化数据的知识抽取。小结·知识抽取链路非结构化文本→知识抽取构建知识图谱抽取实体/关系LTP分析原始文本通过五大任务的协同作用，LTP将原始文本逐步转化为结构化的知识表示，为知识图谱的自动构建提供技术支撑。小结·实体与关系抽取三类抽取目标实体（节点）通过命名实体识别（NER）抽取人名、地名、机构名等，作为知识图谱中的节点。关系（边）通过依存句法分析（DEP）与语义依存分析（SDP/SDPG）抽取词语间的依存与语义关系，作为图谱的边。属性通过语义角色标注（SRL）抽取谓词论元结构，丰富实体的属性信息。小结·知识图谱示例知识图谱示例（图8-5）图谱构成要素节点中的属性即需要抽取的实体边上的属性是需要抽取的关系对非结构化数据进行知识抽取并建立知识图谱，节点与边共同构成语义网络从非结构化抽取到结构化抽取两类抽取对象的区别非结构化抽取面向自由文本、网页、PDF等，依赖NLP技术识别实体与关系结构化抽取面向数据库、Excel、CSV、JSON等，依据数据格式制定规则为什么结构化数据更易抽取？结构化数据具备明确的格式规范与字段定义，抽取时只需根据目标数据制定规则，即可高效、准确地提取所需知识，为后续知识图谱构建提供可靠基础。8.2.2结构化数据的抽取什么是结构化数据？关系数据库MySQL、PostgreSQL等，以表格形式组织数据规范的Excel/CSV行列明确、字段固定的电子表格数据JSON/XML具有层级结构的标准化数据格式关系数据库、规范的Excel、CSV、JSON、XML等属于结构化数据。8.2.2结构化数据的抽取制定规则：结构化抽取的核心要求关键原则面向结构化数据进行抽取需要根据目标数据制定规则规则需与数据字段定义保持一致本节以从关系数据库中抽取知识为例进行说明8.2.2结构化数据的抽取结构化数据抽取的一般步骤输出知识结果执行查询/读取连接数据源确定数据源本小节将以从关系数据库中抽取知识为例，说明面向结构化数据抽取的完整过程。8.2.2结构化数据的抽取学生数据表说明本节使用的示例数据表如图8-6所示。student列对应学生的名字，major列对应学生的专业。该表存储于名为test的数据库中，表名为test。8.2.2结构化数据的抽取学生数据表的字段结构student列存储学生的姓名major列存储学生所学专业数据表位置信息数据库名称：test数据表名称：test主机地址：（本地）用户名：root此为演示用示例，实际应用中请根据真实数据库配置填写相应参数。安装依赖库安装mysql-connector-python首先需要下载并安装Python的mysql-connector库。打开Windows的命令行窗口，输入以下命令并按Enter键。pipinstallmysql-connector-python安装依赖库pipinstall命令说明pipPython包管理工具，用于安装第三方库install指定执行安装操作mysql-connector-pythonMySQL官方提供的Python连接驱动包名执行步骤打开Windows命令行窗口（Win+R输入cmd）输入完整命令按Enter键确认执行等待下载与安装完成安装依赖库安装过程图示说明等待安装完成输入pip命令打开终端安装成功后，命令行窗口会显示Successfullyinstalledmysql-connector-python的提示信息，表明库已正确安装，可在Python脚本中导入使用。安装依赖库安装完成后的验证安装完成后，可在Python交互式环境中输入importmysql.connector验证是否安装成功。若无报错，则说明库已可正常使用，后续可直接调用connect()方法建立数据库连接。连接数据库步骤1：导入库并调用connect()导入mysql.connector库，然后使用connect()方法连接到数据库。这需要输入数据库的主机名、用户名、密码和名称。importmysql.connectorcnx=mysql.connector.connect(host='',user='root',password='12345',database='test')连接数据库·参数解析参数一：host（主机地址）参数名host示例值''含义数据库服务器的主机名或IP地址说明表示本地主机（localhost），即数据库与Python脚本运行在同一台机器上。若数据库部署于远程服务器，则填写对应的IP地址或域名。host=''连接数据库·参数解析参数二：user（用户名）参数名user示例值'root'含义登录MySQL数据库所使用的用户名说明root是MySQL安装后默认创建的超级管理员账户，拥有最高权限。在生产环境中建议使用权限受限的专用账户，避免安全风险。user='root'连接数据库·参数解析参数三：password（密码）参数名password示例值'12345'含义对应用户名的登录密码说明此处填写MySQL用户对应的密码字符串。示例中使用'12345'仅为演示目的。实际使用时应填写真实密码，并注意保密，不要将密码硬编码在公开代码中。password='12345'连接数据库·参数解析参数四：database（数据库名称）参数名database示例值'test'含义要连接的目标数据库的名称说明指定连接成功后默认使用的数据库。此处连接名为test的数据库，该库中包含本节示例所用的学生数据表。若该数据库不存在，连接将报错。database='test'connect()参数汇总四个连接参数一览1host数据库主机名或IP地址，本地为2user登录数据库的用户名，默认管理员为root3password对应用户名的登录密码字符串4database目标数据库名称，此处为test游标查询步骤2：创建游标对象cursor代码cursor=cnx.cursor()说明创建一个游标对象，用于后续执行SQL查询语句并获取结果。游标是数据库操作的核心接口，所有查询均通过游标发起。游标查询执行SQL查询：cursor.execute()代码query1='SELECT*FROMtest'cursor.execute(query1)说明定义查询语句字符串，赋值给变量query1SQL语句SELECT*FROMtest表示查询test表中的全部数据execute()方法将SQL语句发送至数据库并执行执行后结果暂存于游标中，需通过fetchall()获取游标查询获取全部结果：cursor.fetchall()代码result=cursor.fetchall()说明fetchall()方法从游标中一次性获取全部查询结果返回值result是一个列表，每个元素对应数据表中的一行记录每行记录以元组（tuple）形式存储各字段的值对于数据量较大的表，fetchall()会将全部数据加载至内存，需注意内存占用。游标查询获取列名：cursor.description代码col_name=[col[0]forcolincursor.description]print(col_name)说明cursor.description是一个元组列表，包含每列的元数据信息每个元素的第0项（col[0]）即为该列的列名列表推导式提取所有列名，赋值给col_nameprint(col_name)输出列名列表，例如['student','major']游标查询遍历输出查询结果代码forrowinresult:print(row)说明使用for循环遍历result列表中的每一行数据变量row依次取每行的元组值print(row)将每行数据打印输出至控制台例如输出格式：('张三','计算机科学')等游标查询·完整代码步骤2完整代码汇总cursor=cnx.cursor()query1='SELECT*FROMtest'cursor.execute(query1)result=cursor.fetchall()col_name=[col[0]forcolincursor.description]print(col_name)forrowinresult:print(row)创建游标对象，执行SQL查询语句SELECT*FROMtest，查询test表中的全部数据，并输出查询结果。游标查询·代码逻辑梳理五行代码的执行逻辑遍历打印fetchall获取execute执行定义SQL创建游标每一步操作均有明确的功能定位，按顺序执行可完整实现从数据库中读取并展示结构化数据的目标。关闭连接步骤3：关闭游标与数据库连接关闭游标和数据库连接。cursor.close()cnx.close()关闭连接为什么必须关闭连接？释放资源关闭游标和连接可释放数据库服务器分配的内存与连接资源保障安全及时关闭防止连接被未授权访问，降低数据泄露风险提升稳定性避免连接数超出数据库上限导致后续连接请求失败注意事项重要提示：前提条件注意：对于已经存在的数据库和表，可以用Python建立连接，再进行知识抽取。在运行连接代码之前，必须确保目标数据库和数据表已在MySQL中提前创建完毕，否则连接或查询将报错。Python仅负责连接与查询，不会自动创建数据库或表。注意事项常见错误与排查要点连接失败检查host、user、password、database四个参数是否与实际数据库配置一致表不存在确认数据库中已存在名为test的数据表，否则execute()会抛出异常库未安装若importmysql.connector报错，说明未正确安装mysql-connector-python，需重新执行pipinstall小结用Python连接数据库进行知识抽取（一）核心步骤回顾01安装驱动库pipinstallmysql-connector-python02导入并连接importmysql.connector，调用connect()传入四个参数03创建游标cnx.cursor()创建游标对象小结用Python连接数据库进行知识抽取（二）01执行查询定义SQL语句，调用cursor.execute()发送查询02获取结果fetchall()获取全部行，description获取列名03遍历输出for循环遍历结果列表，print()输出每行数据04关闭连接cursor.close()与cnx.close()释放资源小结完整代码汇总importmysql.connectorcnx=mysql.connector.connect(host='',user='root',password='12345',database='test')cursor=cnx.cursor()query1='SELECT*FROMtest'cursor.execute(query1)result=cursor.fetchall()col_name=[col[0]forcolincursor.description]print(col_name)forrowinresult:print(row)cursor.close()cnx.close()结构化数据抽取的价值通过Python连接关系数据库，可以系统性地将数据库中的实体与关系提取出来，为后续构建知识图谱提供结构化的知识来源。对于已经存在的数据库和表，可以用Python建立连接，再进行知识抽取。8.2小结知识图谱整体框架与表示分层架构数据层存储事实三元组，模式层规范知识表达，提升层次与减少冗余。构建方式自顶向下先定义模式，自底向上从数据抽取实体，实现迭代更新。核心表示实体为节点，关系为边，属性补充信息，以图形式存储与分析知识。知识图谱通过明确的逻辑与体系架构，将海量事实结构化，为高级知识应用奠定基础。8.3知识图谱构建工具简介从数据抽取到图谱构建——掌握四大主流工具四大主流知识图谱工具总览如今，知识图谱已被广泛应用于推荐系统、语义搜索、智能决策支持等领域。Neo4j、NetworkX、igraph、Gephi是4种各具特色且广泛应用的知识图谱构建与分析工具。8.3知识图谱构建工具简介四大工具各有侧重Neo4j原生图数据库，适合企业级复杂关联查询与存储NetworkXPython图论工具包，适合学术研究与中小规模网络分析igraph高性能图分析库，支持C/Python/R多语言接口Gephi专业图可视化软件，适合交互式探索与发布级图谱展示8.3.1Neo4j核心定义Neo4j是一款先进的原生图数据库管理系统，专为处理高度互联的数据而设计。它采用了非关系型数据模型，即基于图的数据模型，通过节点（Node）、关系（Relationship）和属性（Property）来表示和存储复杂的数据网络。8.3.1Neo4jNeo4j的数据模型这种结构特别适合那些强调实体间关联、多对多关系以及需要快速遍历和查询路径的应用场景。8.3.1Neo4jNeo4j的应用场景随着近年来大数据和人工智能的发展，Neo4j在社交网络分析、欺诈检测、主数据管理、供应链可视化等诸多领域得到了广泛应用，特别是在处理复杂关联问题时展现出了显著优势。Neo4j·核心概念概念一：节点（Node）定义每个节点代表一个实体或对象携带信息可以携带一组键值对形式的属性示例一个节点可以代表一个人，其中包含姓名、年龄等属性信息Neo4j·核心概念概念一：节点（Node）示例解析人物节点姓名：张三年龄：25职业：工程师公司节点名称：科技有限公司行业：软件开发规模：中型课程节点名称：知识图谱学分：3难度：中级Neo4j·核心概念概念二：关系（Relationship）关系的定义关系用来连接两个节点，表示它们之间的联系。关系是有向且可以命名的，也可以携带属性。例如，朋友、工作于这样的关系可以描述人与人之间或者人与公司之间的具体联系。有向性从源节点指向目标节点，方向不可逆可命名关系类型需明确命名，如FRIENDS_WITHNeo4j·核心概念概念二：关系（Relationship）示例节点A：张三人物实体关系：工作于有向命名关系，可携带属性如入职日期节点B：科技公司组织实体关系是有向且可以命名的，也可以携带属性，完整描述实体间的具体联系。Neo4j·核心概念概念三：属性（Property）定义属性用于提供关于节点或关系的附加信息形式键值对的形式（Key-ValuePair）作用允许用户以灵活的方式丰富数据内容属性示例属性键属性值示例name张三age25since2020-01-01weight0.8Neo4j·特点特点一：Cypher查询语言介绍Neo4j提供了一种声明式图查询语言Cypher，语法直观易读，支持对图数据进行创建、读取、更新和删除等操作，并能执行复杂的图模式匹配查询。创建CREATE节点和关系读取MATCH查询图模式更新SET修改属性删除DELETE移除节点或关系Neo4j·特点特点二：索引与性能优化Neo4j支持对节点和关系建立索引以提升查询效率，其内置查询优化器能够自动选择最优执行策略，保障高并发场景下的性能表现。Neo4j·特点特点三：集群与高可用性说明Neo4j企业版支持集群部署，具备横向扩展能力，可实现负载均衡与高可用性；同时提供数据备份恢复与故障转移机制，保障系统稳定运行。Neo4j·特点特点四：集成可视化工具两大可视化工具Neo4jBrowserNeo4jDesktop集成图形化查询工具，用户可通过界面直接执行Cypher查询并进行结果可视化Bloom专业级的图谱探索与可视化工具，适合业务人员进行交互式图谱分析Neo4j·特点特点五：多语言驱动与APIRESTAPI提供标准HTTP接口，支持各类语言通过REST调用Java驱动官方提供Java语言驱动程序Python驱动官方提供Python语言驱动程序JavaScript驱动官方提供JavaScript语言驱动程序除RESTAPI外，Neo4j还提供Java、Python、JavaScript等语言的官方驱动程序，便于开发者将图数据库功能集成至各类应用系统中。Neo4j·特点特点六：企业级安全特性安全功能用户认证验证用户身份，防止未经授权的访问权限管理精细化控制不同用户对数据的读写权限操作审计记录所有操作日志，满足合规要求8.3.1Neo4j·小结Neo4j六大特点一览Cypher查询语言声明式语法，直观易读索引与性能优化自动选择最优执行策略集群与高可用企业版支持负载均衡与故障转移可视化工具Browser+Bloom双工具多语言驱动Java/Python/JavaScript官方支持企业级安全认证/权限/审计全覆盖8.3.2NetworkXNetworkX是一个用Python编写的开源图论与复杂网络建模工具包，主要用于创建、操作和研究复杂的网络结构。8.3.2NetworkXNetworkX的定义与用途核心用途使得研究者和开发者能够在Python环境中高效地实现对复杂网络结构的探索和分析，在学术界和工业界中得到了广泛应用，特别是在计算机科学、社会学、物理学、生物学以及其他涉及复杂系统分析的领域。计算机科学网络拓扑分析社会学社交网络建模物理学复杂系统仿真生物学生物网络研究8.3.2NetworkX支持的图类型NetworkX支持多种类型的图，包括无向图、有向图和多重图（即允许多条边连接相同节点对的图）。用户可以轻松地添加、删除节点和边，并为它们分配任意属性。8.3.2NetworkX节点与边的定义节点（Node）每个节点都可以是一个唯一的标识符或带有多个属性的对象。节点可以承载任意自定义属性，灵活表达现实世界中的各类实体。边（Edge）边可以是无向的、有向的，也可以具有权重或其他属性，例如成本、距离等。边的多样化属性使其能够精确描述实体间关系的强弱与类型。8.3.2NetworkX·特点特点一：内置丰富算法NetworkX内置了丰富的图论算法，如最短路径搜索、社区检测、中心性度量（如度中心性、接近中心性、特征向量中心性等）、聚类系数、PageRank等多种经典算法。8.3.2NetworkX·特点特点二：图形可视化与数据导入图形可视化虽然NetworkX本身并不具备高级的图形渲染功能，但它能够与Matplotlib、Plotly、Graphviz等第三方库结合实现网络的可视化展示。数据导入NetworkX可以方便地从多种格式的数据文件中读取或写入图数据，支持的常见格式有GML、GraphML、JSON、CSV等。8.3.2NetworkX·特点特点三：灵活性与大规模网络处理灵活性与扩展性由于NetworkX基于Python，因此其具备高度的灵活性和可扩展性，用户可以根据需求定制新的算法和功能。大规模网络处理虽然NetworkX主要面向中小规模网络数据集，但通过合理的内存管理策略以及与分布式计算框架（如Dask）的集成，它可以处理较大的网络数据集。8.3.2NetworkX·应用场景NetworkX的实际应用社交网络构建和分析人与人之间的关系网络生物网络蛋白质相互作用、基因调控网络分析交通网络城市道路、航线等交通系统建模信息网络网页链接、知识图谱等信息关联分析8.3.3igraphigraph是一个高性能、开源的图论与复杂网络分析库，常用于学术研究和工业领域。学术研究社交网络分析、生物学通路分析工业领域信息传播建模等复杂网络问题8.3.3IGRAPH支持语言与核心用途R统计分析与网络建模首选Python数据科学生态无缝集成C/C++底层高性能计算支持三种语言接口使用户能够方便地进行图形数据结构的创建、操作以及各种复杂的网络分析。8.3.3IGRAPH·数据结构灵活的图数据结构图类型支持无向图有向图多重图自定义属性允许用户为节点和边添加自定义属性，满足多样化的数据建模需求。底层存储方式邻接矩阵邻接列表底层架构在存储效率和运算效率之间取得平衡，适应不同规模和类型的网络数据。8.3.3IGRAPH·算法实现内置经典图论算法最短路径Dijkstra、Floyd-Warshall等最小生成树Prim、Kruskal算法社区检测Louvain、LabelPropagation等网络中心性度量度中心性、接近中心性、特征向量中心性高级功能聚类系数计算、环路检测、子图匹配、网络演化模型8.3.3IGRAPH·算法实现算法分类一览8.3.3IGRAPH·算法实现中心性度量方法度中心性节点连接边数衡量重要性接近中心性到所有节点平均距离特征向量中心性考虑邻居节点重要性8.