烟草工业营销数据采集分析

近期，云南中烟合并了红塔集团和红云红河集团（以下简称“两红”集团）的烟草营销业务，“两红”集团的营销体系是各自完全独立系统，没有一个整体的统一再利用的集成环境，难以利用这些现有营销数据资源挖掘更有价值的信息，无法对云南中烟领导层的决策起到有效的支持作用。这些问题妨碍了企业的发展，因此为了充分利用这些营销数据资源，整合“两红”集团的营销体系多年积累下来的海量营销数据，应对不断变化的烟草营销业务需求，就成为了亟待解决的问题。随着云计算技术的日趋成熟，作为重要分支技术的私有云技术，国内外各大IT企业都在积极开发自己的云计算系统［1］。鉴于目前现状，云南中烟建设了满足自身需求的烟草工业营销数据采集与分析系统。本系统利用较为成熟的私有云平台，构建企业专用的数据中心，在充分利用现有网络设施的条件下，完成对海量烟草营销数据的整合与利用，使烟草工业营销数据收集分析能力得到较大提高。

1系统目标与处理过程

1．1系统设计目标

本系统通过私有云平台的搭建，实现如下目标：1）建立一套完善的营销数据分析机制，设定各个方面的KPI（KeyPerformanceIndication）指标，从卷烟的销售渠道、货源投放、卷烟厂家、卷烟品牌、市场行情、销量、价格走势、价量对比、购销存等各个方面来进行实时监控和销售分析，并提供一系列的分析报表和多种图形的智能化展现形式。2）根据信息采集数据及营销分析，结合生产能力和库存，对未来的营销和生产决策提供精确量化预测，实现产销衔接。3）基于云南中烟现有网络硬件设施，实现对各类数据的整合利用，保障数据安全，有效降低数据中心运维成本和总体拥有成本，提高资源利用率，节能降耗。

1．2系统数据采集与处理过程

给出了云南中烟营销信息采集与分析平台数据的处理过程，具体介绍如下：

（1）数据采集与加工

本系统的数据来源总的来说可以分为内部数据源和外部数据源。外部数据包括国家烟草总局一号工程的下行数据，国家烟草总局电子交易平台获取的烟草交易数据，还有部分烟草商业公司数据。其中，一号工程提供了全国16家烟草工业公司的相关生产、销售数据；部分与云南中烟销售业务联系紧密的烟草商业公司提供的卷烟零售数据。内部数据源包括ERP系统提供的数据，“两红”集团历年积累的烟草销售数据以及由数据管理员手工输入的部分数据。对于外部数据。本系统设计了业务服务采集总线，并提供与对应数据源相匹配的传输接口，实现数据的获取。而内部数据主要通过数据加工模块（ELT）的采集，实现数据的规范化和统一。

（2）数据存储与管理

对经过加工整合后的数据，首先存储在操作型存储数据库中。然后通过建立数据仓库和数据集市，对数据资源提供统一、规范的存储与管理。在确保数据安全的前提下，针对性地提高数据集市的访问速率。

（3）BI（BusinessIntelligence）分析

BI分析模块基于数据集市提供的各类数据，对云南中烟的卷烟生产、营销进行全面的分析与预测。通过对统计分析平台的系统访问，为市场部和品牌部的决策分析提供强有力地情报支持。

1．3营销分析应用系统业务流程

通过动态分析市场信息，准确分析和预测市场需求的变化趋势。并以此为主要依据，进行编排滚动生产计划，实现滚动生产，合理配置资源，确保产品工业存货资源不断档，最大限度保证商业客户企业的需要。此外通过结合客户数据，以及动态市场分析，对营销方案做出及时准确地调整，以便公司一线营销人员根据不同的客户类型采取不同的个性化营销方案，提升客户的价值、提高营销成本的回报率、开拓市场、增加利润，巩固并完善长期的客户关系。某卷烟品牌产品生产下线后，营销分析应用系统采集产品下线信息，商业销售信息以及市场分析信息，将这些信息汇总到品牌部和市场部。品牌部客户经理通过汇总信息进行分析，然后报送到市场经理进行审核。市场经理做出审核调整后，发送到市场部计划管理员。市场部根据计划管理员的分析结果，做出最后的总预测。生产计划部根据报送的市场部总预测，综合外加工到货计划、工业库存等信息，计算出该产品的最迟投产时间、最大生产批量等数据；继而结合产能、维修计划、资源利用效率等各种因素，初步编制短期内的滚动生产计划表。通知下属卷烟工厂按计划有序生产，供应科依据滚动生产计划表，制定出匹配的物料采购计划，确保供应商有序供货。品牌部根据市场部报送的分析数据与总预测结果，结合以往营销经验等因数，确定对应的营销方案，并对不同客户群，制定有差异的个性化营销方案，一线营销人员负责执行。生产计划部跟踪实际生产与计划的差异，市场部跟踪预测与实际销售情况的差异。两个部门经过汇总协商后最终做出是否发出预警，如果不发出预警，则按原生产和营销计划进行；如果确定发出预警，则做出相应调整计划，整合相关信息，启动下一轮分析预测。

2系统架构设计及实现

2．1系统设计原则

1）兼容性原则。在实现本系统的过程中，需要考虑到整个云平台及其他相关的一些模块，特别是“两红”集团的数据模块的整合，从而减少以后与其他模块冲突的可能，使整个系统运行流畅。

2）安全性原则。任何计算机软件系统的新技术，都必须建立在安全稳定的前体下。对于本文所涉及的私有云平台，我们不仅要重视其使用效率，更应该注意其使用的安全性。虽然影响系统安全性的因素很多，但是本系统应当尽量避免由于系统设计方法与结构的不足，而带来的安全隐忧。同时尽量选择业界比较成熟的应用软件及技术，并做好相关测试工作，保障本系统的稳定性。

3）集约化原则。由于云南中烟的营销业务是基于“两红”集团原有的业务上，为了降低部署成本和加快开发速度，必须充分利用现有软件和硬件资源。这样将有效地提高企业的硬件和软件资源的利用率，降低企业的运营成本。

2．2系统架构

目前，市场上有很多私有云的设计框架和软件，提供企业需要的多种服务。作为在业界使用范围较广和成熟度较高的私有云计算软件之一的Eucalyptus，采用模块化设计，它的组件可以方便的进行替换和升级，容易扩展、安装和维护。Eucalyptus最大特点是利用软件来实现局域网硬件资源的虚拟化管理、调度及应用［2］。为此，本系统采用Eucalyptus设计框架和相关开源软件实现，构建适应云南中烟特点的私有云计算与存储环境。基于Eucalyptus2．0，本系统的私有云平台共有5个组件，它们分别是：云控制器（CloudController，CLC）、集群控制器（ClusterController，CC）、存储控制器（StorageController，SC）、存储服务组件（Walrus）、节点控制器（NodeController，NC）。云控制器是整个云平台的核心，负责处理由客户端发出的请求，做出最高级的虚拟机实例调度决定，并将云南中烟网络中心服务器集群的计算和存储整合到一起，实现数据在计算和存储之间的高效传输。存储服务组件管理对本私有云平台内存储服务的访问。集群控制器负责管理本集群内的所有虚拟机实例网络。存储控制器实现Amazon的S3接口，它与存储服务组件协同工作，用于获取用户数据、存储系统数据以及虚拟机映像文件等。节点控制器通过管理程序（hypervisor）控制本节点上部署的所有虚拟机实例，其自身通过虚拟化管理软件执行、监督和虚拟机实例的终止［3］。每个虚拟机在一个节点控制器上是作为一个独立的实例存在的，每个节点控制器可以根据功能的不同同时部署多个虚拟机。在这5个组件中，存储控制器和存储服务组件实现云存储的功能，云控制器、集群控制器和节点控制器实现云计算的功能，它们相互密切配合，为企业各个部门，及分散在全国各地的市场部提供云服务。

2．3私有云环境实现

本系统私有云网络硬件与软件配置如下：1）2台配备有8核CUP的IBM高性能服务器，作为控制器服务器。每台服务器均配置双网卡，与内外网联通，互为热备份。CLC通讯、CC集群、Walrus（镜像）和SC在控制服务器A、B上均进行相同部署。负载均衡主机通过应用HAProxy1．4．21实现A、B服务器的负载均衡。2）2个私有云集群，每个集群配备4台应用服务器主机，每个主机配置一个节点控制器与6个VMware虚拟机。数据库服务器和应用服务器主机最低配置采用IBMPCSERVER，也可以采用IBM小型机。磁盘阵列一台：EMC，配备10块600G硬盘，支持iSCSI和SAS混编。3）考虑到构建的便捷性，本系统使用Linux操作系统，具体版本为Ubuntu＿10．10＿Server＿X86＿64。数据库选择的是IBMDB2数据库。私有云平台选择为：Eucalyptus2．0。由于本系统采用开源的Eucalyptus，可以从官方网站上获取Eucalyptus2．0版本及其相关组件。在Linux系统上通过apt－getinstall或者yuminstall的方式分别对上述Eucalyptus的5个组件在对应物理机上直接进行安装。在每个NC主机上，根据功能的需要，分别安装若干个VMware虚拟机。但一个物理主机上，只能安装一个NC，且此物理主机必须支持虚拟化技术（优选为多核CPU主机）。除NC外的4个组件均安装在两台控制服务器上安装（服务器A／B互为热备份）。最后在系统中分别对Eu-calyptus的各个节点控制器按照官方文档设置后便可正常使用。接下来就是在虚拟机上部署相关的应用。本系统通过Puppet框架自动化生成所需要应用的黄金镜像（GoldenImage），这些操作步骤是将基本的操作系统镜像定制为包含特殊应用的镜像的过程。这一过程的基本流程是：在云平台上使用基本OS镜像启动虚拟机，升级内核以满足所有应用的需求，之后生成、上传、注册新内核文件和启动引导文件；升级完操作系统内核后，就可以直接安装所需应用软件的安装包；然后通过配置文件对应用软件的环境进行配置，生成应用软件的黄金镜像文件，并将生成的黄金镜像上传给Walrus；最后在Eucalyptus平台上注册新生成的黄金镜像［4］。此时黄金镜像生成完毕，用户可以通过基于WebGUI的Hybridfox插件直接部署所需的黄金镜像应用。

3结束语

本系统现在已正式投入使用了一段时间，各虚拟机上部署的应用都能稳定运行，下一步将会集成云南中烟烟草物流系统。系统总体运行状况良好，各项指标均表现优秀，取得了用户的充分肯定，达到了预定目标，产生了预期的经济效益。

作者：陈力 何利力 单位：浙江理工大学信息学院