2026年11月上海大数据分析挖掘建模实战训练营—从数据分析到人工智能

  • 课程详情

一、课程简介:

近些年,随着数据中台、大数据、机器学习、人工智能等高科技技术的不断发展,越来越多的企业开始着眼于整理自己的数据资产、挖掘自身的数据业务、开拓自己的数据产品。然而,由于各个企业自身的起点不同,有的是从开展简单的分析任务开始,有的是如何建设自己的数据中台,有的已经开始深度数据挖掘与智能应。同时,这个过程中也遇到了诸多的难题与困惑,不知道如何更加有效地开展工作,未来的发展方向又在哪里。

本课程从实战的角度,讲解了不同阶段数据应用的建设思路,规划未来发展的路线图。最初,如何开展简单的数据分析任务,确定问题→数据清洗→数据建模→数据验证的设计套路,以及由粗到细挖掘有价值的数据的分析思路。然后,为了长期持久地分析应用数据,如何建设数据中台,开展数据资产治理的工作,包括数据资产管理、建立元数据和主数据、数据质量管理等。接着,在这样的基础上如何数据挖掘、价值变现、形成数据产品。更进一步的,开展用户画像、机器学习、智能业务,等等。

二、主办单位:

北京中际孚歌科技有限公司

北京中际赛威文化发展有限公司

三、协办单位:

中国高科技产业化研究会智能信息处理分会  

四、研修时间/地点:2026年11月27-28日  上海  

五、培训对象:

1、系统架构师、系统分析师、高级程序员、资深开发人员。

2、牵涉数据分析处理的运营、规划、设计负责人。

六、培训特色:

本课程注重实战,范老师在数据分析与建设相关领域从业多年,收集了大量的真实案例,会针对项目过程中常见的问题进行汇总、研讨,并最终形成培训教程。通过大量的真实案例,详细地介绍了数据分析与建设过程中需要注意的要点以及难点,这些知识都是讲师十几年经验的总结。

七、课程大纲:

第一章  数据分析

一、数据分析的本质

二、数据分析的方法

1)建立数据思维:用客观数据分析问题

2)掌握分析技能:软技能 vs. 硬技能

三、数据分析的角色:数据经理、业务专家、数据分析师

四、数据分析的套路:

确定问题→数据采集→数据清洗→数据建模→数据分析→模型验证

企业数字化转型

案例:某制造企业数字化转型分析设计过程

1)核心价值流的分析与业务能力主线

2)业务能力的PDCA分析与智能化改进

3)通过数字化建设提示企业产品交付能力

数据风控系统

案例:税务系统虚开发票风险监控系统建设过程

1)风控指标的设计思路与分析过程

2)建立风控系统的大数据架构体系

数字化运营

案例:滴滴打车的数字化运营与产品创新过程

1)基于数据的分析开展运营决策

2)滴滴优享的用户数据分析与产品设计过程

3)花小猪的用户数据分析与下沉市场挖掘

用户画像与打标签

案例:企业征信大数据平台的建设

1)用户画像与标签管理

2)数据标签的分类:属性标签、统计标签、算法标签

3)数据标签的设计过程:确定对象、打通关系、设计类目、标签融合表

4)数据标签融合表的设计

第二章  数据治理

数据资产管理

1.数据资产管理的概念与内容

2.数据资产的构成:业务数据、分析数据、主数据

3.数据资产管理的挑战

数据资产管理的核心是数据治理

数据治理面临的难题

1. 杂乱无章的数据来源

2. 晦涩难懂的数据语义

3. 千差万别的数据格式

4. 无处不在的数据问题

数据治理的核心:数据质量管理

数据质量管理的挑战

1.获取大量准确数据非常困难,不能满足分析需求

2.获取大量、丰富但不太准确的数据(大数据时代特征)

建立数据质量管理体系:

1.事前:数据质量评估

2.事中:建立ETL过程

3.事后:数据质量报告

数据质量管理的过程:ETL过程

1.数据清洗及其实战举例

2.数据转换及其实战举例

3.数据集成及其实战举例

数据治理落地:数据仓库

1. 主题数据模型(主题域划分)

2. 多维数据模型(事实表、维度表)

3. 数据仓库分层:ODS, DWD, MID, DM, ADS

4. 数据仓库设计与运维

主数据管理

主数据建设的过程

1.没有主数据的数据治理:成本非常高

2.开始建设主数据:数据治理与主数据建设并行开展

3.建立起主数据系统:数据质量大幅度提高

主数据的范围:

1.基础数据、组织机构、财务类数据

2.物资设备、知识数据、客户/供应商

元数据管理

元数据治理面临的挑战:

数据找不到、读不懂、不可信

元数据的概念与分类

1. 业务元数据、技术元数据、操作元数据

2. 消费侧、服务侧、数据主题侧、数据湖侧、数据源侧

案例:基于元数据的AI智能数据分析

1. 数据资产的整理与规范

2. 将元数据整理形成知识库

3. 搭建AI智能体数据分析系统

基于DDD的数据治理实战

1.通过领域模型梳理业务系统的数据

2.基于领域模型建立多维数据模型

3.探查数据质量,建立ETL过程

4.导入数据仓库,建立数据中台

案例:智慧远程大数据平台的建设过程

将领域模型转换成多维数据模型

1.建立多维数据模型

a)动态数据:核心业务数据,有业务发生时间,最终形成事实表

b)静态数据:相关的档案、信息表、数据字典,最终形成维度表

2.多维数据模型优化

a)雪花模型转换为星型模型

b)日期维、组合维、层级维

c)一对多、多对多的模型转换

3.数据主题域的划分

4.数据中台的分层:

原始数据层、细节数据层、轻度综合层、数据集市层

5.数据集市与数据分析挖掘

实战演练:AI辅助的数据治理过程

1.AI辅助对数据字典进行分类梳理

2.AI辅助对业务系统建立领域模型

3.AI辅助将领域模型转换成多维模型

4.AI辅助形成数据仓库设计

第三章  数据挖掘

一、数据挖掘的本质:挖掘数据中潜藏的规律

二、基于大数据平台的数据挖掘过程

1)经验模型 vs. 数据模型

2)不是随机样本,而是全体数据

3)不是精确而是混杂

跨行业数据挖掘标准流程(CRISP-DM)

1.理解业务:理解业务场景、理解业务需求

2.理解数据:数据来源、数据含义、数据量、数据质量

3.准备数据:采集数据、探索数据、数据清洗

4.数据建模:关联分析、分类问题、预测模型、聚类算法

5.模型评估:准确率、精确率、召回率、过度拟合

6.部署应用:大数据开发、分布式部署

分类算法的原理及其应用

1.决策树算法的原理与应用

2.案例:预测女神“约”还是“不约”

a)算法原理与动手设计

b)算法评估与模型优化

预测问题的原理及其应用

1.逻辑回归算法的原理与应用

2.案例:市场营销与广告投入的分析

3.案例:企业成长性预测模型的设计过程

聚类算法的原理及其应用

1.K-means算法的原理与应用

第四章  人工智能

人工智能如何识别图像

1.深度学习与神经网络

2.神经网络算法的原理

3.案例:演练神经网络识别图像的过程

人工智能与聊天机器人

1.什么是LLM大语言模型

2.深度剖析GPT算法

a)什么是生成式预训练AI模型

b)Transformer语言模型的架构与原理

3.大语言模型的智能化应用

1)提示词工程与智能体

2)搭建知识库与RAG

3)模型微调

国内外主流大语言模型

1.OpenAI与ChatGPT的发展历程

ChatGPT的前世今生与发展趋势

浅析GPT算法的原理与特点

聊天机器人与多模态应用

2.DeepSeek 的发展历程和对行业的影响

DeepSeek V3 通用模型与 R1 推理模型

DeepSeek 的不同版本:满血版、蒸馏版及其差别

3.其它大语言模型及其技术选型

如何开展人工智能业务

案例分析:远程智慧诊疗大数据平台的人工智能建设

1.项目建设思路与规划

1)项目背景与系统规划

2)经验模型+数据模型的建设思路

2.医生对患者诊断与治疗的业务梳理过程

3.多模态的数据建模过程

1)通过推荐算法为患者推荐医生的建模过程

2)通过ChatGPT模拟医生问诊的数据建模过程

3)通过深度神经网络模拟医生诊断的机器学习过程

4)通过深度神经网络模拟医生开药的机器学习过程

4.大数据采集、大数据中台建设与建立人工智能算法闭环

5.设计智能前端、架构智能业务系统与基于SaaS的云服务

6.项目踩坑与经验教训分享

八、培训费用及注意事宜:

1. 培训费:3980元/人(含培训费、午餐费、讲义资料费等)

2. 培训期间食宿统一安排,费用自理。

3. 收款、开发票、培训会务工作由北京中际孚歌科技有限公司负责。

九、证书颁发:培训结束后由主办单位向参会单位学员颁发结业证书。

十、咨询联系:010-64113137