浙报集团选择了以网易猛犸和网易有数为主的大数据解决方案
业务背景
互联网时代,新媒介层出不穷,自媒体发展速度极快,用户需求变化频繁,浙报集团作为国内领先的传媒集团,主要关注以下4个技术内容: 1、实时数据分析。媒体融合对新闻生产和分发的时效性要求很高,对用户行为数据的实时采集和分析需求显为重要。 2、数据统一管理。实现多数据系统的统一存储、管理和业务系统数据的统一。不再需要从多个业务系统数据库中提取数据再进行整合。 3、平台易用,提高效率。减少开发和运维平台的精力,专注于业务数据处理、分析和相关应用开发。 4、数据安全,私有应用。党政媒体新闻信息敏感,通过网络传输到云上分析,具有数据泄露的风险,且大规模分析速度受到限制。希望保证数据安全,并建立数据权限体系。
解决方案
在对自身状况和需求进行分析以后,浙报集团选择了以网易猛犸和网易有数为主的大数据解决方案。 首先,通过网易猛犸建立数据平台。网易猛犸提供HDFS、Hbase、Kudu 等从 GB 到 PB 级别的存储方案,提供全量离线接入,将业务数据从各类数据源离线导入数据仓库以及其他相关大数据环境,提供关系型数据库和日志的增量实时/准实时接入,将业务库中增量数据和APP日志实时导入到大数据环境,并且延迟可控制在秒级。 其次,实现用户行为数据实时采集、实时分析和全网媒体内容监测分析。网易猛犸可实时分析访问数据,展示流量变化和用户分布情况,满足高可用(分布式),高吞吐(1000w/s),低延迟(毫秒级),精准计算(Exactly-once)等需求。同时,在猛犸平台上调试和提交流SQL任务,无需增加组件,无需增加硬件投入,大大降低技术方面的投入。 同时,通过网易有数进行数据可视化分析,对全网内容和媒体行业云的运营状况进行实时监测,为集团内容创作优化、集团运营重大决策提供直观、科学的依据。 此外,针对安全方面的顾虑,网易猛犸通过认证、授权、审计三个方面来保证数据安全。平台采用Kerberos做用户级别的认证,针对角色授权数据访问,利用审计实现事件跟踪,包括实时监测对系统敏感信息的访问和操作行为,根据规则设定报警并及时阻断违规操作,收集并记录用户行为。
网易云带来的收益
1、建立统一的数据中枢,提供平台支持,帮助集团理解用户、内容以及二者的关系,理解媒体革新趋势,保证媒体融合战略的先进性和执行效果,建立行业领先优势。 2、实现智能可视化分析,让集团管理层和员工能够快速、直观地了解不同环节的状况,提升运营数据统计分析的工作效率。 3、 将数据中枢部署在内网环境,严格保障数据处理和分析过程中的数据安全性。 4、降低平台建设和运维成本,以及数据分析成本。
客户评价
网易猛犸场景丰富、性能好、易用性强的特点,给我们留下了深刻的印象。在我们以“数据驱动传播,智能重构媒体”的理念,构建以数据和AI赋能的“媒立方”技术支撑平台的同时,借助网易大数据技术打造传媒的数据中枢平台,建立智能融合型的信息服务体系,理解用户及其与内容的关系,使提供个性化服务成为可能。未来,我们会加强与网易云的合作,为媒体融合发展提供示范经验,促进新闻出版业转型升级。