Logo
☆☆☆☆☆
0.0
Advanced
8h

Python中的实体消歧简介

典型的业务系统会将数据分散存储在多个系统中,包括用于运营的ERP系统、用于营销的CRM系统,以及用于其他用途的文件、笔记和商业智能(BI)应用。同一客户(实体)的信息可能存在于多个地方,这些信息在不同系统之间可能不同步,且在各数据源中也不一定唯一。这种不一致的情况为我们提供了通过实体识别进行跨系统比对和去重的机会,从而创造业务价值。 本课程涵盖商业洞察力与动手编码实践。课程从多个实际业务案例出发,快速介绍Python中的实体识别技术。随后深入探讨语义保留的预处理、相似性特征工程、图聚类、弱监督、置信学习及系统集成等关键技术。 作为开发者,你将通过构建和部署实体识别流程,提升公司业务价值;作为决策者,你将了解哪种解决方案最适合你的业务场景,并掌握如何以最优性价比获得最佳成果。

10 Lessons
Included in Subscription Plan
Personalized Learning
Powered by AI
Python中的实体消歧简介
典型的业务系统会将数据分散存储在多个系统中,包括用于运营的ERP系统、用于营销的CRM系统,以及用于其他用途的文件、笔记和商业智能(BI)应用。同一客户(实体)的信息可能存在于多个地方,这些信息在不同系统之间可能不同步,且在各数据源中也不一定唯一。这种不一致的情况为我们提供了通过实体识别进行跨系统比...

WHAT YOU'LL LEARN

使用 Python 去重记录的能力

Content

10 Lessons • 0 Quizzes • 0 Challenges

实体消歧与应用简介
  1. 1

    课程简介

  2. 2

    去重与关联

  3. 3

    位置解析:地理编码

  4. 4

    主数据管理

  5. 5

    在分散的数据环境中进行分析

  6. 6

    直接解决支付问题

  7. 7

    实时实体消歧

使用 RecordLinkage 包的快速入门指南
  1. 1

    Solver's Kitchen:餐厅的安装与服务

  2. 2

    有效的文本预处理

  3. 3

    相似性特征

  4. 4

    匹配 vs. 不匹配

  5. 5

    评估匹配质量

  6. 6

    地理编码器用于位置解析

  7. 7

    以洞察力销售

  8. 8

    实体解析基础测验

结论
  1. 1

    总结

预处理
  1. 1

    为什么预处理很重要

  2. 2

    使用 pandas 进行数据预处理

  3. 3

    删除和替换标记

  4. 4

    音近算法

  5. 5

    使用开放数据预处理位置信息

  6. 6

    从非结构化文本中提取类别

  7. 7

    预处理测验

附录
  1. 1

    使用 Geoapify 和 Python 批量地理编码

  2. 2

    使用 LanceDB 的嵌入和向量搜索

  3. 3

    实体消解的关键资源

索引
  1. 1

    索引的重要性

  2. 2

    基于相等性的索引

  3. 3

    基于排序的索引

  4. 4

    结合索引技术

  5. 5

    K-最近邻嵌入阻断

  6. 6

    索引测验

特征工程
  1. 1

    相似性介绍

  2. 2

    数值属性的相似性

  3. 3

    编辑距离和子串相似性

  4. 4

    基于嵌入的相似性

  5. 5

    相似性特征测验

成对匹配
  1. 1

    实体消歧中的二分类

  2. 2

    从带标签的示例中学习

  3. 3

    通过主动学习应对不确定性

  4. 4

    对抗标签错误

  5. 5

    程序化标注

  6. 6

    使用NearMiss进行欠采样

  7. 7

    文本增强的过采样

  8. 8

    可解释的匹配

  9. 9

    深度匹配

  10. 10

    练习:欠采样

  11. 11

    解决方案:欠采样

  12. 12

    配对匹配测验

聚类
  1. 1

    聚类的动机

  2. 2

    传递聚类

  3. 3

    合并中心聚类(MCC)

  4. 4

    马尔可夫聚类

  5. 5

    手动审查与标注

  6. 6

    聚类测验

集成
  1. 1

    集成动机

  2. 2

    本地堆栈使用 DuckDB 和 dbt

  3. 3

    在云端使用 Snowflake 和 dbt

  4. 4

    基于SQL的实体消歧与链接(Splink)

  5. 5

    实体消歧服务

  6. 6

    练习:使用 Splink 进行索引

  7. 7

    解决方案:使用 Splink 进行索引

  8. 8

    集成测验

Certificate of Completion

Showcase your accomplishment by sharing your certificate of completion.

Course Author:Anonymous User

Reviews

Read reviews from students who have taken this course and share your own experience.

Reviews & Comments (0)