1、数据库:精通 Mysql、Oracle、Teradata,熟悉TDH、Hive,Kingbase等 ;
2、数据仓库:熟悉数仓建设方法论,具备必要的数据仓库理论知识,制定数据标准,数据
规范,数仓规范的经验,实现数据资产沉淀;
3、编程语言:精通Python ,熟悉C语言,VBA,java;
4、熟悉 Linux 常用命令以及编写 Shell 脚本;
6、具有成功设计,构建,优化完整数据体系和数据链路的能力和经验;
数据资产是指由企业拥有或者控制的,能够为企业带来未来经济利益的,以物理或电子的方式记录的数据资源,如文件资料,电子数据等。随着行业的不断演进发展,数据逐步由资源转化为资产,目前业界头部单位均已从数据资源向数据资产化转变。数据管理上由关注内容转变为关注价值,在数据资产的过程中,使数据的使用过程更加人性化,易用,快捷,智能。
从数据资产管理活动职能分析,在数据模型管理、元数据管理、数据标准管理、数据质量管理、数据安全管理和数据价值评估等方面开展。为了更好的支撑资产管理活动,需搭建数据资产运营门户,在数据资产设计阶段和上线后,均做好运营管控工作。
通过python代码,引入Xpath模块,解析网页代码,获取网页数据。第一段,获取数据页码列表,第二段,获取每页字网页链接,第三段,访问字网页,获取数据
通过python代码,引入re模块,解析网页代码,获取网页数据。第一段,获取数据页码列表,第二段,获取每页字网页链接,第三段,访问字网页,获取数据