《人民大2023《跨境电商数据分析与应用》 PPT课件项目2：跨境电商数据采集整理》由会员分享，可在线阅读，更多相关《人民大2023《跨境电商数据分析与应用》 PPT课件项目2：跨境电商数据采集整理（105页珍藏版）》请在金锄头文库上搜索。
1、跨境电子商务数据分析项目项目2 2 跨境电子商务数据采集整理跨境电子商务数据采集整理熟悉数据采集、整理的基本内涵与目标；熟悉跨境电子商务数据采集基本方法；熟悉跨境电子商务数据采集渠道及数据类型；熟悉常用跨境电子商务数据整理的适用范围及方法。知识目标知识目标技能目标技能目标能够明确数据采集任务及目标；能够合理选择数据采集工具及确定数据采集渠道；能够选择合适方法整理数据；能够撰写数据采集与处理方案。学 习 目 标学 习 目 标思政目标思政目标熟悉计算机信息技术相关法律法规，合规合法地开展数据采集活动；在数据采集整理工作中培养严谨、细致的职业素养。案 例 引 入：跨 境 电 商 运 营 的 数 据
2、采 集 渠 道 与 工 具案 例 引 入：跨 境 电 商 运 营 的 数 据 采 集 渠 道 与 工 具沃金网络科技有限公司主营产品以外贸婚纱;婚纱礼服;晚会礼服;小礼服;新娘婚纱等服装类产品为主。沃金公司早期以自创婚纱礼服品牌自运营为主，并取得了非常好的成绩。但随着东南亚等一些国家的婚纱礼服品牌进入到跨境电商领域，对沃金公司的婚纱品牌形成了一定冲击。沃金决定开发新的婚纱礼服国际品牌。图1 Google Trend 搜索指数案 例 引 入案 例 引 入要面向海外市场开发新的婚纱礼服品牌，已在跨境电商领域深耕多年的沃金公司知道首先需要对婚纱礼服的目标市场、客户群体进行定位，同时，要对市面上成功的
3、婚纱礼服产品做一个深度的产品画像，运营部门立即开始投入相关的数据调查和准备工作中。其中，在市场趋势判断过程中，通过“Google Trend”采集婚纱礼服行业数据，把握搜索热度，沃金对计划新开发的婚纱礼服品牌有了初步的判断。思 考 与 讨 论思 考 与 讨 论【案例思考】【案例思考】通过阅读案例，请同学们围绕以下问题思考并分组讨论分组讨论该数据分析任务中的采集工作如何开展：（1）除了本案例中提到的“Google Trends”(谷歌趋势）外，你还知道哪些数据采集渠道？（2）沃金公司想要开发全新的受欢迎的婚纱礼服产品，你认为需要调查和收集哪些方面的数据？请同学们按照请同学们按照3人一组，组成课程
4、小组。分组原则：长期稳定、优势互补。人一组，组成课程小组。分组原则：长期稳定、优势互补。任务一任务一 认识数据采集渠道认识数据采集渠道一、数据采集认知一、数据采集认知 进行跨境电子商务数据分析与采集时常用的数据采集渠道有跨境电子商务网站、店铺后台或平台提供的数据工具、政府部门、机构协会、媒体、权威网站数据机构、跨境电子商务平台、指数工具等。面对多样的数据采集渠道，数据分析人员如何从中选择适合自身数据分析需求的数据采集渠道？1、什么是数据采集？数据采集就是搜集符合数据分析要求的原始数据。数据采集既可以从现有、可用的无尽数据中搜集提取需要的二手数据，也可以通过问卷调查、采访、沟通等方式获得一手资料
5、。数据采集是数据分析的基础。通过数据采集，可以将大量离散的数据整合在一起，通过统计分析和数据可视化发现数据背后隐藏的规律与逻辑。2 2、跨境电商数据采集、跨境电商数据采集 跨境电商数据采集是指采用由预先设计的采集平台与系统程序自动采集跨境电商平台上的数据或与跨境电商有关的数据。在跨境电商数据分析的工作流程中，数据采集是整个数据分析工作开展的基础。跨境电商数据伴随用户和店铺的行为实时产生，广泛分布于跨境电商平台、社交媒体、智能终端、店铺内部系统和第三方服务平台，因此，跨境电商数据采集渠道众多。涉及的数据类型多种多样，既包括客户的消费信息与基本信息，也包括店铺的产品信息与交易信息，以及客户对店铺或
6、产品的评价信息等。合法性及时性准确性有效性3、跨境电商数据采集原则数据采集需尽可能获取平台最新数据，确保时效性。商业市场变化迅速，只有将最新的数据与历史数据进行对比，才能更快更好地发现问题及预测未来变化趋势。数据采集过程中需注意数据期限。例如，在做市场数据调研时采集行业研报数据，由于市场行情变化，行业研报都有一定的时间节点，对行业发展趋势的预判已经落后于当前市场风向，将会对企业带来严重的风险。数据分析过程涉及数据的各类统计和计算，数据采集如果出现错误，在后续统计运算时将可能导致较大偏差。因此，数据采集时需保持严谨细致，确保采集的数据准确无误，尽可能地避免数据分析时出现偏差。互联网为数据采集和分
7、析带来极大便利，同时也带来一定的信息安全风险和权益保护风险。例如，在采集竞争对手数据时，只能采集相关机构已经公布的公开数据或对方同意提供的数据，不能采用非法手段获取数据。导出及保存数据制订采集任务采集数据确定采集渠道及方法4、跨境电商数据采集流程数据采集前首先要根据数据分析目标和需求进行任务分析，明确数据采集的指标范围和时间范围，确定数据采集的渠道、途径或部门，数据采集任务较大的还需要确定采集的部门及人员配备。包括明确数据分析所涉及的关键指标，确定对应的数据类型、所需数据、数据采集渠道，并据此选择合适的采集方法及工具。明确数据采集渠道及采集方法后，根据具体需求和分析目标进行数据采集。数据采集如
8、果是人工采集需要选择合适的格式导出和存放数据，常见的导出格式包括EXCEL、CSV等。二、数据分析指标二、数据分析指标确定数据采集渠道及方法确定数据采集渠道及方法流量流量数据数据企业在销售过程中产生的数据，如销售额、订单量等交易数据，响应时长、询单转化率等服务数据；销售销售数据数据产品在采购、物流、库存过程中产生的数据，如采购数量、采购单价等采购数据，物流时效、库存周转率、残次库存比等仓储数据。供应供应数据数据例：运营例：运营数据数据UV（独立访客数）、PV（页面浏览量），平均访问时长、页面跳失率等反映店铺吸引流量的数量和质量；二、数据分析指标二、数据分析指标确定数据采集渠道及方法确定数据采集
9、渠道及方法例：运营例：运营数据数据店铺访客数、浏览量生意参谋【流量看板】二、数据分析指标二、数据分析指标确定数据采集渠道及方法确定数据采集渠道及方法例：市场例：市场数据数据访客指数、供需指数生意参谋【市场大盘】二、数据分析指标二、数据分析指标确定数据采集渠道及方法确定数据采集渠道及方法例：市场例：市场数据数据搜索热度Google trends二、数据分析指标二、数据分析指标确定数据采集渠道及方法确定数据采集渠道及方法例：市场例：市场数据数据行业趋势咨询研究机构/平台三、跨境电商数据采集渠道三、跨境电商数据采集渠道数据分析人员需要明确以上几类数据源所能获取到的数据指标。数据分析人员需要对数据源按
10、照所提供数据的精准度为其划分等级，优先获取等级更高的数据源。数据采集渠道数据类型典型代表跨境电子商务网站、店铺后台或平台提供的数据工具市场数据、产品数据、市场数据、运营数据、人群数据等速卖通店铺后台及所提供的数据工具如生意参谋等政府部门、机构协会、媒体行业数据、产品数据各类协会、电视台、报刊、杂志等；等社交媒体权威网站数据机构行业数据、产品数据艾瑞咨询、199IT等跨境电子商务平台行业数据亚马逊、Shoppe等指数工具行业数据、人群数据Google Trends-数据采集渠道数据采集渠道 -三、数据采集渠道选择三、数据采集渠道选择适用范围 数据类型功能需求三、数据采集渠道选择三、数据采集渠道选
11、择数据类型数据类型很多电商类数据采集工具所提供的数据并非项目运营实际数据，而是对实际数据进行转化后的展现，比如百度指数显示的数据并非是真实的客户搜索数量，而是将真实的搜索数量进行了转化，转化为指数数据进行呈现。04其他网站问卷调查0302卖家工具数据纵横01Google TrendsGoogle NewsGoogle Analytics三、数据采集渠道选择三、数据采集渠道选择三、数据采集渠道三、数据采集渠道问卷调查。线上线下调研，收集调研数据和信息资料，通过整理分析，为企业产品开发和运营策略优化提供依据。展会集中调研。通过前沿产品集中展示的平台，可以快速熟悉行业最新发展趋势，获取畅销产品咨询，
12、直观体验产品。供应商调研。联系合作的产品供应商，了解新产品和新的市场信息。行业论坛和网站调研。包括产品行业和跨境电商行业，如数据脉、雨果网、鹰熊汇、海贸会、亿邦动力等。最前沿最新最热的行业趋势和动态，关注产品行业动态及平台动态。三、数据采集渠道三、数据采集渠道行业论坛和网站调研。包括产品行业和跨境电商行业，如数据脉、雨果网、鹰熊汇、海贸会、亿邦动力等。最前沿最新最热的行业趋势和动态，关注产品行业动态及平台动态。三、数据采集渠道三、数据采集渠道行业论坛和网站调研。包括产品行业和跨境电商行业，如数据脉、雨果网、鹰熊汇、海贸会、亿邦动力等。最前沿最新最热的行业趋势和动态，关注产品行业动态及平台动态。
13、任务二任务二 数据采集方法与工具数据采集方法与工具1人工采集2报表采集3自动抓取采集人工采集报表采集自动抓取采集数据采集方式人工采集人工采集人工采集是指运人工采集是指运营营者从各种跨境者从各种跨境电电商平台上通商平台上通过过“复制粘复制粘贴贴”的方式采集数据，的方式采集数据，一般平台的前台数据可以通一般平台的前台数据可以通过这过这种方式种方式获获取。取。数据采集方式数据采集方式人工采集人工采集采集竞争对手的竞品信息数据时，可以进入竞品详情页，人工采集方式获取竞品的标题、关键词、主图、采集竞争对手的竞品信息数据时，可以进入竞品详情页，人工采集方式获取竞品的标题、关键词、主图、款式、价格、评价等详
14、细信息，复制到表格中进行整理和对比分析款式、价格、评价等详细信息，复制到表格中进行整理和对比分析人工采集的人工采集的优优点是点是简单简单易上手；缺点是效率低下。但人工采集方式在易上手；缺点是效率低下。但人工采集方式在跨境跨境电电商平台商平台应应用得却比用得却比较较普遍普遍。例如，通。例如，通过过人工采集方式采集人工采集方式采集竞竞争争对对手的手的产产品数品数据，可以据，可以对产对产品有很好的把握，品有很好的把握，对样对样品品评评估、采估、采购购、改、改进进等后等后续续开开发环节发环节将将会有很大帮助，会有很大帮助，如下图所示，如下图所示，人工采集的人工采集的产产品品调调研信息研信息汇总汇总。人
15、工采集的产品调研信息汇总数据采集方式人工采集人工采集人工采集人工采集数据采集方式 调查问卷。在进行用户需求、习惯、喜好、产品使用反馈等数据进行采集时常常会用到调查问卷，数据采集人员通过设计具有针对性的问卷，采用实地走访、电话沟通、邮件访问、网络填表、线上调研问卷等方式进行信息采集。报报表采集表采集报表采集是指通过下载店铺后台的数据报表完成的数据采集。这种采集方式主要针对店铺的后台数据，如店铺流量数据、订单数据、广告数据等，如图所示，是后台生成的产品展位报告报表数据。后台生成产品展位报告报表数据数据采集方式报报表采集表采集数据采集方式报报表采集是指通表采集是指通过过下下载载数据数据报报表完成数据
16、采集，主要用于下表完成数据采集，主要用于下载载店店铺铺后台数据后台数据或独立站点数据采集。如速或独立站点数据采集。如速卖卖通店通店铺铺可以通可以通过过后台工具生意参后台工具生意参谋实现谋实现数据数据报报表的采集，如店表的采集，如店铺铺的的订单订单数据、流量数据、数据、流量数据、销销售数据等。售数据等。报报表采集表采集数据采集方式自自动动抓取采集抓取采集自动抓取采集是指通过爬虫工具或程序自动抓取平台数据，属于技术性的数据采集方式。自动抓取采集主要应用于数据数据量极大、重复性高的采集任量极大、重复性高的采集任务务，例如，竞争对手的listing数据监控等。自动抓取采集实现方式有多种：自主编写采集程序、使用第三方数据抓取工具（如“八爪鱼”等第三方爬虫软件）、使用平台第三方数据插件。运营者可以根据自己的需求选择数据采集方式，体量较大的卖家建议组建自己的数据化团队，尝试自己根据需求编写采集程序；体量较小的卖家可以尝试第三方数据抓取工具或平台第三方数据插件。数据采集方式火车采集器 火车采集器（http:/ 后羿采集器（https:/ 后羿采集器（https:/ 芒果店长 芒果店长是一款多平台多网店
