高教社高职电子商务数据分析基础(第二版)教学课件2-1
合集下载
- 1、下载文档前请自行甄别文档内容的完整性，平台不提供额外的编辑、内容补充、找答案等附加服务。
- 2、"仅部分预览"的文档,不可在线预览部分如存在完整性等问题,可反馈申请退款(可完整预览的文档不适用该条件!)。
- 3、如文档侵犯您的权益，请联系客服反馈,我们会尽快为您处理(人工客服工作时间：9:00-18:30)。
电子商务数据分析基础
模块二 基础数据采集
目录
CONTENT
单元一 数据采集认知
单元二 数据采集的渠道及工具
单元三 市场数据采集
单元四 运营数据采集 单元五 产品数据采集
学习目标
知识目标
1. 了解数据采集的概念 2. 熟悉数据采集的原则 3. 掌握数据采集的方法和
步骤
技能目标
1. 能够熟练使用数据采集 工具
过对这些日志信息进行采集、分析，可以挖掘电子商务企业业务平台日志数据中的潜在价值。 数据库采集 通过数据库采集系统直接与企业业务后台服务器结合，将企业业务后台每时每刻产生的大
量业务记录到数据库中，最后由特定的处理系统进行数据分析。
单元一 数据采集认知
报表采集
一些独立站点可能没有 如每天咨询客户数、订单数 等数据指标统计功能，在进 行数据采集时可以通过每日、 每周的工作报表进行相应的 数据采集。
单元一 数据采集认知
某电子商务企业为了能够让更多的客户了解并浏览自己 的网店，通过第三方渠道购买客户资料获取客户联系信息， 并通过短信、邮件等方式向客户进行营销。请问，这种数据 采集方式会不会受到法律保护？请说明原因。
单元一 数据采集认知
三、数据采集的方法
网页数据 系统 采集
版权声明
本课件版权归属北京博导前程信息技术股份有限公司，仅允许1+X试点院校和相关 院校教师用于学生培训使用。未途，否则我公司有权追究一切版权法律责任。
谢谢观看
THANK YOU FOR WATCHING
完整性 检查
准确性 检查
规范性 检查
完成数据采集后对数据进行复查或计算 合计数据，将其和历史数据进行比较。 同时还要检查字段的完整性，保证核心 指标数据完整。
在进行数据采集录入的过程中，可能会 有个别数据出现录入错误，可以通过平 均、求和等操作与原始数据进行比对， 如发现比对结果不匹配，则需要检查出 相应的错误数据。
引导案例
某品牌是一家专注于健康饮食电器的研发、生产和销售的现代化企业，多年来一直保持着健康、稳 定、快速的增长，现已成为小家电行业的著名企业，规模位居行业前列。
随着电子商务的快速发展，该品牌在各大电商平台（如天猫、京东等）均开设了旗舰店，并且有多 家授权店铺。近期，该品牌发现授权店铺向非授权店铺窜货、低价出售的现象时有发生，导致销售价格 不统一、市场混乱，严重影响该品牌新品的市场销售。
单元一 数据采集认知
2 建立必要的数据指标规范，并完成数据采集
在进行数据采集前，还需要用数 据指标对数据进行唯一性标识，并且 贯穿在之后的数据查询、分析和应用 过程中。建立数据指标规范是为了使 后续工作有可以遵循的原则，也为庞 杂的数据分析工作确定了可以识别的 唯一标识。
单元一 数据采集认知
3
数据检查
准确性
在数据分析过程中，每个指标的数据可能需要参与各种计算，有些数 据的数值本身比较大，一旦出错，参与计算之后就可能出现较大的偏 差。在进行数据采集时，需要确保所摘录的数据准确无误，避免数据 分析时出现较大偏差。
合法性
数据采集还需要注意合法性。比如在进行竞争对手数据采集过程中， 只能采集相关机构已经公布的公开数据，或是在对方同意的情况下获 取的数据，而不能采用商业间谍或不正当窃取等非法手段获取的数据。
2. 能够独立完成电子商务 市场、运营、产品数据 采集
素养目标
1. 在数据采集的过程中能够严 格遵守《中华人民共和国个 人信息保护法》和《中华人 民共和国数据安全法》等相 关法律法规
2. 通过学习、积累自身的信息 安全知识，遵守职业道德， 尊重公民稳私，具备数据保 密意识
知识导图
单元一 数据采集认知
单元一 数据采集认知
二、数据采集的原则
及时性
有效性
合法性 准确性
单元一 数据采集认知
及时性
进行数据采集需要尽可能地获取到电子商务平台最新数据，只有最新 的数据与往期数据进行比，对才能更好地发现当前的问题并预测变化 趋势。
有效性
在进行数据采集过程中，需要注意数值期限的有效性。
单元一 数据采集认知
报表采集
调查问卷 采集
单元一 数据采集认知
网页数据采集 在采集行业及竞争对手数据时，在电商平台上的一些数据，诸如商品属性数据（商品结构
和标题、品牌、价格、销量、评价），可以直接进行摘录或使用火车采集器、八爪鱼采集器等 爬虫采集工具进行采集。
单元一 数据采集认知
系统日志数据采集 在网站日志中记录了访客IP地址、访问时间、访问次数、停留时间、访客来源等数据。通
结合案例，思考并回答以下问题: (1）该案例中进行数据采集的原因是什么? (2）该案例中数据采集经历了哪几个步骤?
单元一 数据采集认知
一、数据采集的概念
数据采集也叫数据获取，是指通 过在平台源程序中预设工具或程序代码， 获取商品状态变化、资金状态变化、流 量状态变化、用户行为和信息等数据内 容的过程，为后续进行数据分析提供数 据准备。
检查采集的数据中是否存在有 多个商品标识编码相同或同一 数据出现多个数据指标等。
单元一 数据采集认知
本单元需重点理解与掌握的内容
（1）数据采集的原则:及时性、有效性、准确性、合法性。 （2）数据采集的方法:网页数据采集；系统日志数据采集；数据库采集;报表采集；调查问卷 采集。 （3）数据采集的步骤:确定采集范围及人员分工；建立必要的数据指标规范，并完成数据采集； 数据检查（完整性检查、准确性检查、规范性检查)。
为此，该品牌决定采集各大电商平台的相关数据，通过采集的数据甄别非授权店铺，筛选低价店铺， 惩治电商平台的价格混乱现象。
引导案例
在采集数据前，需要结合数据分析的需求确定采集范围和采集指标，该品牌计划采集淘宝、天猫、 京东、苏宁易购等主流电商平台卖家及销售价格。因要采集的数据量大，该品牌与提供数据采集服务的 第三方公司合作，合法采集有效数据，并对采集的数据按照平台进行归类、检查和分析，第一时间筛选 低价、禁售店铺和电子商务网站，通过通知调整、知识产权维权、行政千预等手段整治渠道乱价。
单元一 数据采集认知
调查问卷采集 在对用户需求、习惯、喜好、产品使用反馈等数据进行采集时，常常会用到调查问卷，数
据采集人员通过设计具有针对性的问卷，采用实地走访、电话沟通、网络填表等方式进行信息 采集。
单元一 数据采集认知
四、数据采集的步骤
1
确定采集范围及人员分工
进行数据采集前首先需要根据数 据采集目标进行分析，明确数据采集 的指标范围和时间范围。接着明确这 些数据需要从哪些途径及部门采集， 最后确定参与部门和人员配备。
模块二 基础数据采集
目录
CONTENT
单元一 数据采集认知
单元二 数据采集的渠道及工具
单元三 市场数据采集
单元四 运营数据采集 单元五 产品数据采集
学习目标
知识目标
1. 了解数据采集的概念 2. 熟悉数据采集的原则 3. 掌握数据采集的方法和
步骤
技能目标
1. 能够熟练使用数据采集 工具
过对这些日志信息进行采集、分析，可以挖掘电子商务企业业务平台日志数据中的潜在价值。 数据库采集 通过数据库采集系统直接与企业业务后台服务器结合，将企业业务后台每时每刻产生的大
量业务记录到数据库中，最后由特定的处理系统进行数据分析。
单元一 数据采集认知
报表采集
一些独立站点可能没有 如每天咨询客户数、订单数 等数据指标统计功能，在进 行数据采集时可以通过每日、 每周的工作报表进行相应的 数据采集。
单元一 数据采集认知
某电子商务企业为了能够让更多的客户了解并浏览自己 的网店，通过第三方渠道购买客户资料获取客户联系信息， 并通过短信、邮件等方式向客户进行营销。请问，这种数据 采集方式会不会受到法律保护？请说明原因。
单元一 数据采集认知
三、数据采集的方法
网页数据 系统 采集
版权声明
本课件版权归属北京博导前程信息技术股份有限公司，仅允许1+X试点院校和相关 院校教师用于学生培训使用。未途，否则我公司有权追究一切版权法律责任。
谢谢观看
THANK YOU FOR WATCHING
完整性 检查
准确性 检查
规范性 检查
完成数据采集后对数据进行复查或计算 合计数据，将其和历史数据进行比较。 同时还要检查字段的完整性，保证核心 指标数据完整。
在进行数据采集录入的过程中，可能会 有个别数据出现录入错误，可以通过平 均、求和等操作与原始数据进行比对， 如发现比对结果不匹配，则需要检查出 相应的错误数据。
引导案例
某品牌是一家专注于健康饮食电器的研发、生产和销售的现代化企业，多年来一直保持着健康、稳 定、快速的增长，现已成为小家电行业的著名企业，规模位居行业前列。
随着电子商务的快速发展，该品牌在各大电商平台（如天猫、京东等）均开设了旗舰店，并且有多 家授权店铺。近期，该品牌发现授权店铺向非授权店铺窜货、低价出售的现象时有发生，导致销售价格 不统一、市场混乱，严重影响该品牌新品的市场销售。
单元一 数据采集认知
2 建立必要的数据指标规范，并完成数据采集
在进行数据采集前，还需要用数 据指标对数据进行唯一性标识，并且 贯穿在之后的数据查询、分析和应用 过程中。建立数据指标规范是为了使 后续工作有可以遵循的原则，也为庞 杂的数据分析工作确定了可以识别的 唯一标识。
单元一 数据采集认知
3
数据检查
准确性
在数据分析过程中，每个指标的数据可能需要参与各种计算，有些数 据的数值本身比较大，一旦出错，参与计算之后就可能出现较大的偏 差。在进行数据采集时，需要确保所摘录的数据准确无误，避免数据 分析时出现较大偏差。
合法性
数据采集还需要注意合法性。比如在进行竞争对手数据采集过程中， 只能采集相关机构已经公布的公开数据，或是在对方同意的情况下获 取的数据，而不能采用商业间谍或不正当窃取等非法手段获取的数据。
2. 能够独立完成电子商务 市场、运营、产品数据 采集
素养目标
1. 在数据采集的过程中能够严 格遵守《中华人民共和国个 人信息保护法》和《中华人 民共和国数据安全法》等相 关法律法规
2. 通过学习、积累自身的信息 安全知识，遵守职业道德， 尊重公民稳私，具备数据保 密意识
知识导图
单元一 数据采集认知
单元一 数据采集认知
二、数据采集的原则
及时性
有效性
合法性 准确性
单元一 数据采集认知
及时性
进行数据采集需要尽可能地获取到电子商务平台最新数据，只有最新 的数据与往期数据进行比，对才能更好地发现当前的问题并预测变化 趋势。
有效性
在进行数据采集过程中，需要注意数值期限的有效性。
单元一 数据采集认知
报表采集
调查问卷 采集
单元一 数据采集认知
网页数据采集 在采集行业及竞争对手数据时，在电商平台上的一些数据，诸如商品属性数据（商品结构
和标题、品牌、价格、销量、评价），可以直接进行摘录或使用火车采集器、八爪鱼采集器等 爬虫采集工具进行采集。
单元一 数据采集认知
系统日志数据采集 在网站日志中记录了访客IP地址、访问时间、访问次数、停留时间、访客来源等数据。通
结合案例，思考并回答以下问题: (1）该案例中进行数据采集的原因是什么? (2）该案例中数据采集经历了哪几个步骤?
单元一 数据采集认知
一、数据采集的概念
数据采集也叫数据获取，是指通 过在平台源程序中预设工具或程序代码， 获取商品状态变化、资金状态变化、流 量状态变化、用户行为和信息等数据内 容的过程，为后续进行数据分析提供数 据准备。
检查采集的数据中是否存在有 多个商品标识编码相同或同一 数据出现多个数据指标等。
单元一 数据采集认知
本单元需重点理解与掌握的内容
（1）数据采集的原则:及时性、有效性、准确性、合法性。 （2）数据采集的方法:网页数据采集；系统日志数据采集；数据库采集;报表采集；调查问卷 采集。 （3）数据采集的步骤:确定采集范围及人员分工；建立必要的数据指标规范，并完成数据采集； 数据检查（完整性检查、准确性检查、规范性检查)。
为此，该品牌决定采集各大电商平台的相关数据，通过采集的数据甄别非授权店铺，筛选低价店铺， 惩治电商平台的价格混乱现象。
引导案例
在采集数据前，需要结合数据分析的需求确定采集范围和采集指标，该品牌计划采集淘宝、天猫、 京东、苏宁易购等主流电商平台卖家及销售价格。因要采集的数据量大，该品牌与提供数据采集服务的 第三方公司合作，合法采集有效数据，并对采集的数据按照平台进行归类、检查和分析，第一时间筛选 低价、禁售店铺和电子商务网站，通过通知调整、知识产权维权、行政千预等手段整治渠道乱价。
单元一 数据采集认知
调查问卷采集 在对用户需求、习惯、喜好、产品使用反馈等数据进行采集时，常常会用到调查问卷，数
据采集人员通过设计具有针对性的问卷，采用实地走访、电话沟通、网络填表等方式进行信息 采集。
单元一 数据采集认知
四、数据采集的步骤
1
确定采集范围及人员分工
进行数据采集前首先需要根据数 据采集目标进行分析，明确数据采集 的指标范围和时间范围。接着明确这 些数据需要从哪些途径及部门采集， 最后确定参与部门和人员配备。