大数据技术及数据分析培训师伟老师.ppt

《大数据技术及数据分析培训师伟老师.ppt》由会员分享，可在线阅读，更多相关《大数据技术及数据分析培训师伟老师.ppt（49页珍藏版）》请在装配图网上搜索。

1、大 数 据 技 术 及 数 据 分 析 主 讲 人 ： 师 伟 2 师 伟 老 师 个 人 简 介师 老 师 是 实 战 型 的 咨 询 与 培 训 专 家 ， 常 年 以 专 业 咨 询 顾 问 和 专 业 培 训 师 身份 进 入 国 内 众 多 行 业 的 代 表 企 业 ， 开 展 企 业 的 管 理 咨 询 和 员 工 培 训 项 目 ，具 有 广 泛 的 行 业 基 础 和 培 训 经 验 。师 老 师 长 期 从 事 质 量 工 作 ， 职 业 发 展 经 历 了 从 质 量 专 家 到 资 深 质 量 经 理 人转 换 ， 体 验 了 从 国 有 企 业 到 外 资 企 业 再

2、 到 合 资 企 业 的 文 化 差 异 ， 具 有 丰 富的 服 务 性 、 制 造 性 企 业 质 量 管 理 及 实 务 经 验 ， 尤 其 在 质 量 整 合 、 流 程 管 理 领 域 的 研 究 受 到 国 内 外 人 士 的 推 崇 。上 世 纪 九 十 年 代 末 进 入 管 理 咨 询 和 培 训 行 业 ， 技 术 专 长 主 要 在 质 量 管 理 、质 量 改 进 领 等 域 ， 同 时 对 利 用 Office软 件 提 高 管 理 绩 效 也 颇 有 心 得 质量 的 本 质 其 实 是 管 理 的 整 合 ， Office软 件 的 实 质 其 实 是 管 理 工

3、 具 。 3 十 年 工 厂 审 核 、 咨 询 和 培 训 的 经 验 使 师 老 师 对 各 行 业 的 运 作 过 程 和 产品 特 征 有 深 入 的 了 解 ， 并 成 功 辅 导 了 十 几 家 跨 领 域 企 业 的 质 量 改 善 项目 。 其 结 合 现 场 的 工 作 坊 及 互 动 教 学 培 训 方 式 深 受 学 员 的 欢 迎 。 师 老师 多 年 来 担 任 质 量 管 理 及 现 场 改 进 领 域 的 讲 师 ， 擅 长 內 部 培 训 ， 拥 用现 场 教 学 及 实 际 案 例 ， 加 上 互 动 教 学 方 法 ， 使 学 员 能 学 以 致 用 。 课

4、 程包 括 高 级 质 量 管 理 、 流 程 优 化 、 质 量 工 具 、 人 员 管 理 、 办 公 软 件 综 合 应 用 等 . 4 课程收益 01 学 习 数 理 统 计 的 理 念02 熟 悉 常 见 的 处 理 套 路03 掌 握 常 用 软 件 的 使 用04 解 决 学 员 的 具 体 问 题 5 目录 m 数 理 统 计 常 识 量 化 的 重 要 性 统 计 基 础 知 识 数 据 挖 掘 简 介m 数 理 统 计 技 术 6 案例 （ 武 汉 晨 报 3月 31日 报 道 ） 经 过 三 天 两 夜 长 途 跋 涉 ， 5万 多 瓶 武 汉 救 命 水 昨 日 运 抵

5、 干 旱 重灾 区 云 南 省 禄 劝 县 ， 就 在 大 家 准 备 换 小 货 车 进 山 送 水 时 ， 却 遇 到 了 “ 天 价 运 费 ” 的 梗 阻 ， 140公 里 山 路 ， 两 名 当 地 司 机 要 价 6000元 。昨 日 下 午 ， 晨 报 记 者 与 林 厚 凯 押 运 的 5万 多 瓶 武 汉 救 命 水 一 到 禄 劝 县 城 ， 就 受 到 了 该 县 团 委 热 情 地 接 待 。 团 委 书 记 夏 飞 表 示 ， 他 们 接 到 团 省 委 的 通 知 后 ， 按 照 武 汉 送 水 人 的 要求 ， 对 全 县 数 十 家 小 学 进 行 了 摸 底

6、， 确 定 了 两 个 最 需 要 水 的 小 学 ： 离 县 城 最 远 的 大 松 树 乡 小 学 和 雪 山 乡 小 学 。 据 了 解 ， 从 县 城 过 去 要 走 140多 公 里 盘 山 路 ， 大 车 根 本 无 法 行 驶 ，必 须 换 乘 小 货 车 才 行 。 可 禄 劝 县 城 小 货 车 稀 少 ， 在 禄 劝 县 团 委 的 帮 助 下 ， 林 厚 凯 好 不 容 易 找 到 了 2辆 小 货 车 ， 谁 知 车 主 一 见 是 外 地 人 ， 报 出 天 价 运 费 ， 两 台 车 运 水 ， 运 费 6000元 。 5万 瓶 水 从 武 汉 运 到 云 南 禄

7、劝 ， 武 汉 的 两 个 司 机 也 只 是 收 了 5000元 运 费 。 知 情 者 透 露 ， 在 禄 劝 像 这 样 的 运 输 ， 费 用 最 多 不 超 过 2000元 。 有 人 劝 林 厚 凯 不 如 将 水 就 近 发 放 ，可 他 坚 持 要 把 水 送 到 最 需 要 的 地 方 。 林 厚 凯 说 ， 这 个 价 格 虽 然 远 超 出 他 的 预 期 ， 但 为 了 尽 早 把 水 送 到 孩 子 们 手 上 ， 他 不 会 计 较 。昨 晚 ， 在 当 地 交 警 部 门 协 调 下 ， 两 位 禄 劝 货 车 司 机 松 口 ， 将 车 费 降 到 5000元

8、。 为 了 尽 早 完 成 送 水 心 愿 ， 昨 晚 ， 记 者 和 林 厚 凯 连 夜 进 山 送 水 。 7 案例m 记 者 在 短 时 间 内 发 生 这 么 多 起 跳 楼 的 事 件 ， 如 果 站 在理 论 角 度 上 ， 发 生 率 算 不 算 高 ？m 樊 富 珉 按 卫 生 部 统 计 ， 目 前 中 国 自 杀 率 大 概 是 十 万 分 之十 六 左 右 。 而 富 士 康 40多 万 人 ， 约 十 万 分 之 二 三 左 右 ，大 学 生 我 们 也 做 过 统 计 ， 大 概 十 万 分 之 二 到 三 左 右 。如 果 从 全 国 的 自 杀 率 来 比 的 话

9、 ， 应 该 还 是 低 的 8 案例m 世 界 银 行 发 展 委 员 会 25日 通 过了 发 达 国 家 向 发 展 中 国 家 转 移投 票 权 的 改 革 方 案 ， 这 一 改 革从 一 个 侧 面 反 映 了 世 界 经 济 版图 的 变 化m 本 次 改 革 中 ， 发 达 国 家 向 发 展中 国 家 共 转 移 了 3.13个 百 分 点的 投 票 权 。 中 国 在 世 行 的 投 票权 从 目 前 的 2.77%提 高 到 4.42%，成 为 世 界 银 行 第 三 大 股 东 国 ，仅 次 于 美 国 和 日 本 m 世 界 银 行 规 则 ： 任 何 重 要 的 决

10、议 必 须 由 85%以 上 的 表 决 权 决 定 名 次 国 家 改 革 后 投 票 权 改 革 前 投 票 权1 美 国 15.85% 15.85%2 日 本 6.84% 7.62%3 中 国 4.42% 2.77%4 德 国 4.00% 4.35%5 法 国 3.75% 4.17%5 英 国 3.75% 4.17%7 印 度 2.91% 2.77%8 俄 罗 斯 2.77% 2.77%8 沙 特 2.77% 2.77%10 意 大 利 2.64% 2.71% 9 案例m 在 一 次 海 难 中 ， 统 计 数 据 为 头 等 舱 乘 客 319人 ， 200人 幸 存 二 等 舱 乘

11、客 269人 ， 117人 幸 存 三 等 舱 乘 客 699人 ， 172人 幸 存m 从 以 上 数 据 你 可 以 发 现 什 么 ？ 10 误差（波动） 系统误差偶然误差可减小但不可消除 可消除 11 抽样样 本 大 小 AQL 0.010 0.015 0.025 0.040 0.065 0.1 0.15 0.25 0.40 0.65 1.0 1.5 2.5 4.0 6.5 10抽 样 数 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退 收 /退18 2 0/1 915 3 0/1 1

12、625 5 0/1 1/2 2650 8 0/1 1/2 2/35190 13 0/1 1/2 2/3 3/491150 20 0/1 1/2 2/3 3/4 5/6151280 32 0/1 1/2 2/3 3/4 5/6 7/8281500 50 0/1 1/2 2/3 3/4 5/6 7/8 10/115011200 80 0/1 1/2 2/3 3/4 5/6 7/8 10/11 14/1512013200 125 0/1 1/2 2/3 3/4 5/6 7/8 10/11 14/15 21/22 320110000 200 0/1 1/2 2/3 3/4 5/6 7/8 10/11

13、14/15 21/22 1000135000 315 0/1 1/2 2/3 3/4 5/6 7/8 10/11 14/15 21/22 35001150000 500 0/1 1/2 2/3 3/4 5/6 7/8 10/11 14/15 21/22 150001500000 800 0/1 1/2 2/3 3/4 5/6 7/8 10/11 14/15 21/22 500001 1250 0/1 1/2 2/3 3/4 5/6 7/8 10/11 14/15 21/22 12 连续数据和离散数据定 性 信 息 含 量 小离散数据 定 量信 息 含 量 大连续数据 13 判断数据属性1. 销

14、 售 订 单 准 确 度2. 数 据 输 入 准 确 度3. 销 售 地 区4. 用 通 规 测 量 得 到 的 孔 径5. 用 卡 尺 测 量 得 到 的 孔 径 6. 客 户 热 线 对 话 时 间 7. 空 调 制 冷 剂 的 重 量8. 一 批 顾 客 中 不 满 意 的 人 数9. 一 批 顾 客 中 不 满 意 的 比 例 14 数据的居中程度和离散程度m 主 要 的 居 中 指 标 平 均 值 数 据 集 的 平 均 值 中 位 数 数 据 排 序 后 得 到 的 中 间 数 众 数 数 据 集 中 最 频 繁 出 现 的 值m 主 要 的 离 散 指 标 极 差 数 据 集 中

15、 最 大 值 与 最 小 值 的 差 值 方 差 与 平 均 值 间 距 的 平 方 和 的 平 均 值 标 准 偏 差 方 差 的 平 方 根 15 正态曲线m 大 多 数 （ 但 不 是 所 有 ） 数 据 符 合 正 态 分 布 16 数据挖掘简介m 数 据 挖 掘 （ Data Mining） 的 概 念 从 数 据 库 数 据 中 揭 示 出 隐 含 的 、 未 知 的 并 有 潜 在 价 值 的 信 息 决 策 支 持 ， 基 于 人 工 智 能 、 机 器 学 习 、 模 式 识 别 、 统 计 学 、 数 据 库 、 可 视 化 技 术 等 ，高 度 自 动 化 地 分 析 企

16、 业 的 数 据 ， 做 出 归 纳 性 的 推 理 ， 从 中 挖 掘 出 潜 在 的 模 式 ， 帮 助 做出 正 确 的 决 策 17 数据挖掘主要动作m 分 类m 估 值 m 预 测m 关 联 m 聚 集m 可 视 化 描 述 18 案例m 第 一 次 战 役 1950年 10月 26日 1950年 11月 02日m 第 二 次 战 役 1950年 11月 25日 1950年 12月 02日m 第 三 次 战 役 1950年 12月 31日 1951年 01月 08日 19 案例m 丰 田 大 规 模 召 回 事 件 引 起 全 球 强 烈 反 响 ， 引 发 丰 田 信 誉 危机 2

17、0 基础动作 m 搜 集m 整 理m 分 析m 评 估 m 展 示 21 图表类型m 数 字 型m 逻 辑 型 22 图表的注意事项m 选 取 适 当 的 图 表 类 型m 数 量 图 表 应 写 清 单 位m 引 用 资 料 应 说 明 出 处m 不 要 妄 图 表 达 过 多 的 信 息m 图 例 一 般 控 制 在 五 个 以 下 m 尽 量 简 单 明 了 、 利 于 理 解 23 动态图表 24 报告制作原则m 提 案 型 报 告m 说 明 型 报 告 25 文档制作原则 m 逻 辑 清 晰m 方 案 多 选m 文 字 精 炼m 内 容 可 视m 恰 当 修 饰 m 体 积 小 巧m

18、 制 作 迅 速 26 报告的需求管理m报 告 的 客 户 谁 在 看 报 告 ？ 希 望 看 什 么 ？ 希 望 的 频 率 ？ 希 望 的 详 略 ？ m相 关 的 技 巧 买 点 和 卖 点 金 字 塔 原 理 27 报告的素材准则m 中 肯m 可 比m 准 确m 时 效m 可 靠m 清 晰 28 素材组织的FAB技巧m Feature 特 点m Advantage 优 点m Benefit 利 益 BenefitAdvantageFeature客 户 关 注 点 29 规范处理数据和数据有效性m 数 据 处 理 的 良 好 习 惯m Excel数 据 有 效 性 30 层别法、聚类和表

19、格维度m 层 别 法 、 聚 类m 一 维 表 和 二 维 表 31 数据透视表 32 m 将 数 据 按 顺 序 等 距 分 组 ， 体 现 各 组 内 频 数 的 柱 状 图m 轮 廓 符 合 正 态 分 布 曲 线 说 明 处 于 稳 定 状 态m 通 过 异 常 轮 廓 形 状 分 析 可 定 位 异 常 的 原 因直方图 33 案例 m 174m 185m 189m 196m 208 m 190m 178m 184m 190m 205m 184m 185 m 194m 191 m 205m 205m 207m 207m 207m 206m 210 m 209m 217m 214m 2

20、14m 206m 209m 210 34 10203040506070 20406080100A B C D E 其 他0 累積比例缺點數 缺 點 項 目 m 表 现 各 项 目 频 度 降 序 排 列 及 累 积 比 例m 二 八 原 则m 大 问 题 优 先柏拉图 35 ABC分析法m A类 070%， 主 要 影 响 因 素m B类 7090%， 次 要 影 响 因 素m C类 90100%， 一 般 影 响 因 素m ABC的 划 分 不 是 绝 对 的 330 因 素超差 差超 差超度内径 外径 平面22033 200 90100缩水 毛刺60 其它C类帕 累 托 曲 线75A类50

21、0频数（件） 551000 B类 85 50 累积百分数（%）91 100 36 练习m 张 女 士 结 婚 五 年 以 来 与 丈 夫 发 生 纠 纷 如 下 不 做 家 务 28次 深 夜 不 归 5次 不 良 嗜 好 5次 没 送 礼 物 1次 胡 乱 花 钱 3次 婆 媳 关 系 50次 异 性 交 往 8次m 请 制 作 柏 拉 图 并 用 ABC法 分 析 37 散布图、关联规则和预测m 研 究 两 个 特 性 之 的 内 在 关 系m 坐 标 轴 分 别 表 示 结 果 特 性 和 原 因 特 性m 使 得 解 决 问 题 时 找 出 强 相 关 的 原 因 38 常见类型 m

22、正 相 关 强 X的 增 加 导 致 Y的 明 显 增 加 m 正 相 关 弱 X的 增 加 导 致 Y的 略 微 增 加因 变 量 自 变 量强 正 相 关弱 正 相 关因 变 量 自 变 量 39 常见类型 m 负 相 关 强 X的 增 加 导 致 Y的 明 显 减 少 m 负 相 关 弱 X的 增 加 导 致 Y的 略 微 减 少因 变 量 自 变 量强 负 相 关 自 变 量弱 负 相 关因 变 量 40 常见类型 m 无 相 关 Y的 变 化 与 X的 变 化 毫 无 关 系 m 曲 线 关 系 X与 Y之 间 无 线 性 关 系 但 符 合 某 种 曲 线 变 化 规 律曲 线 相

23、 关因 变 量 自 变 量不 相 关 自 变 量因 变 量 41 预测 mForecast法m趋 势 线 法 42 单变量求解 43 规划求解 44 矩阵数据分析法m 矩 阵 数 据 分 析 法 （ Matrix Data Analysis Chart）m 用 于 排 定 优 先 级 、 做 多 目 标 决 策m 量 化 表 示 各 元 素 的 关 系 ， 更 准 确 地 整 理 和 分 析 结 果 45 案例 易 于 控 制 易 于 使 用 网 络 性 能 软 件 兼 容 便 于 维 护 总 分 权 重 易 于 控 制 0 4 1 3 1 9.00 26.2%易 于 使 用 0.25 0 0

24、.2 0.33 0.25 1.03 3.0%网 络 性 能 1 5 0 3 3 12.00 34.9%软 件 兼 容 0.33 3 0.33 0 0.33 4.00 11.6%便 于 维 护 1 4 0.33 3 0 8.33 24.2% 总 分 之 和 34.37 46 练习 单 价 面 积 地 段 户 型 发 展 商 物 业 教 育 总 分 权 重单 价 0面 积 0地 段 0户 型 0发 展 商 0 物 业 0教 育 0 47 服务客户 中 兴 通 讯 、 中 国 移 动 、 中 国 电 信 、 中 国 联 通 、 海 尔 、 美 的 、 长虹 、 创 维 、 TCL、 美 赞 臣 、

25、富 士 康 、 哈 工 大 、 长 安 汽 车 、 交 通银 行 、 农 业 银 行 、 湖 北 银 行 、 天 津 滨 海 新 区 政 府 、 大 亚 湾 核 电站 、 吉 林 省 质 监 局 、 中 建 三 局 、 德 阳 电 业 局 、 南 车 集 团 、 电 波22所 、 镇 海 电 厂 、 马 瑞 利 汽 车 电 子 、 中 兴 新 、 中 兴 移 动 、 星 辰律 师 事 务 所 、 力 维 电 子 、 宇 龙 通 讯 、 A8音 乐 、 兴 意 达 电 子 、 吉欧 电 子 、 信 达 澳 银 、 比 克 电 池 、 浙 能 集 团 、 安 利 、 思 源 电 气 、新 国 都 、 东 阳 光 铝 业 、 华 凌 涟 源 钢 铁 、 百 仕 达 、 云 南 夜 视 集 团 、长 安 标 志 雪 铁 龙 、 铭 利 达 精 密 铸 造 、 红 玫 瑰 食 品 、 金 域 医 疗 检验 、 双 登 电 池 、 啄 木 鸟 医 疗 器 械 、 嘉 信 装 饰 、 南 方 航 空 等 48 培训合影： 49 谢 谢 观 看扫 二 维 码 有 更 多 惊 喜 哟