今日看点

大数据怎样发现正在恶化的中国人口结构的_大数据_数据分析_数据结构_课课家

发表于话题:第七次人口普查数据结构
发布时间:2021-05-12

近些年来,总有媒体报道,中国在养老、医疗、教育各个行业出现的巨大的人力需求缺口,2017年左右,中国的“光棍危机”开始爆发,小编希望能够通过数据分析的方式搞清楚产生这系列问题的原因。

小编作为亿信华辰一家知名的BI产商的数据分析师,手边正好有很多可以利用的资源,数据全生命周期的产品均是唾手可得。

我先利用亿信i@Report的“数据抓取”功能,从国家统计局公开的数据中抓取了“全国分年龄、性别的人口”数据。

i@Report数据抓取方案

有了这份数据,离真相又近了一步,小编甚是开心~

数据抓取完成后全部存放在数据库中了。

i@Report数据抓取结果图

虽然从统计局抓取过来的数据信息非常完整,但我发现,抓取过来的数据包含特殊字符,比如空格;或者含有多余的信息,比如总计行,0-4岁,5-9岁等。这样的数据是一个汇总数据,而我需要的是明细数据,我需要对这份数据进行清洗、过滤。

我选择了亿信数据工厂产品,它是一款敏捷型数据处理工具,可以快速帮助用户处理、整合数据。

现在需要将特殊字符和合计行数据处理掉,数据工厂清洗、过滤组件正好可以利用上。

先新建一个ETL过程

数据工厂中的组件多达几十种,完全可以满足我的清洗、处理数据的需求。

再添加清洗、过滤规则

将“总 计”及“x-x岁”中的特殊字符清理。

处理规则也非常多,设置方式也很简单,还蛮容易上手的!

最后预览处理结果

数据工厂数据处理结果与源数据对比

看得出来A3字段的数据被处理干净,正是我想要的效果。

由于数据工厂和亿信BI进行过高度集成,数据工厂处理好数据可以直接输出一份方便亿信BI进行分析的模型,小编可以直接使用这份模型进行分析啦~

亿信BI是亿信华辰在多年数据分析挖掘、报表处理的技术经验基础上,运用先进的数据仓库、商务智能核心理论,经过多年的潜心研发而推出的商务智能产品软件。

它可视化展示效果是蛮强大的,内置几十种统计图、每种统计图又有很多种效果,通过组合设计可以搭配出上千种视觉效果,小编此次通过亿信BI的人口金字塔图分析了中国第四次、第五次、第六次人口普查的数据。(不理解金字塔图请查看文章结尾附录)

利用亿信BI制作的人口金字塔图

从左往右对比查看,可以发现三次人口普查新生儿出生数量占人口总数的比例每次都在缩减,而60岁以上的人口比例越来越大,人才主力军20-~40岁的壮年比例不够大,人口老龄化比较严重,这样一分析,就可以解释为啥当今社会存在人力需求缺口的现象,当然也应该还有其他的原因。

不过近两年,国家也开放了二胎政策,越来越多的家庭选择再生一个宝宝,也许对人口老龄化会起到一定的缓冲作用。

今年七夕节,公司有一批同事加班,一下子暴露了不少同事的单身狗属性,一些还是大龄男青年,是不是真的如报道中所说的“中国男性比女性要多很多”,一些男青年真的就找不到对象,于是,小编选取第六次人口普查数据做了一个对比。

亿信BI多系列线状图

蓝线表示男性各年龄段占总人口的比例,红线表示女性的占比,可以发现,年纪越小,男性比女性人数越多,看来“光棍危机”爆发是必然的,小编真是为男同志们捏一把汗!

结束语

有关人口的问题小编也仅分析了冰山一角,不过只要有数据作为支撑,结合亿信全面的产品线,也完全可以剖析出我们生活中各种现象背后的原因哒~

附录:

人口金字塔解释

大数据需要特殊的技术,以有效地处理大量的容忍经过时间内的数据。适用于大数据的技术,包括大规模并行处理(MPP)数据库、数据挖掘、分布式文件系统、分布式数据库、云计算平台、互联网和可扩展的存储系统。

标签组:[科技新闻] [大数据] [数据分析

本文来源:https://www.kandian5.com/articles/13481.html

相关阅读

曹无伤左司马职务解析:汉朝中央官制中的重要角色

在中国古代历史的长河中,汉朝以其完备的官制和繁荣的文化著称于世。其中,左司马这一职务在汉朝中央官制中占据着重要的地位。而曹无伤,作为秦汉之际刘邦麾下的一位将领,就曾担任过左司马这一职务。 一、汉朝中...

2025-04-03

汉明帝刘庄并未被杀:一位英明君主的传奇一生

在中国历史上,汉明帝刘庄是一位备受赞誉的君主。然而,关于“汉明帝刘庄为什么被杀”的疑问,实际上是一个基于误解的问题。根据真实的历史资料,汉明帝刘庄并未被杀,他是一位在位期间政治清明、经济繁荣、文化昌盛...

2025-04-03

三国第一毒士之争:李儒与贾诩的较量

在三国时期,谋士辈出,他们以其卓越的智谋和深邃的算计,在历史的舞台上留下了浓墨重彩的一笔。其中,李儒与贾诩两位谋士,因其毒辣的手段和深沉的心机,被后人并称为“三国第一毒士”。然而,关于这一称号究竟应归...

2025-04-03

孙恩与孙权:血缘关系的探寻

在中国历史上,孙恩与孙权都是极具影响力的人物。他们分别活跃在不同的历史时期,各自在各自的时代留下了深刻的印记。然而,近年来,关于孙恩是否是孙权后代的问题,引起了人们的广泛关注和讨论。 一、孙恩与孙权...

2025-04-03

澶渊惊雷:寇准力挽狂澜的孤勇与智慧

公元1004年的深秋,北风裹挟着辽军铁蹄的震颤,黄河岸边的澶州城笼罩在战争的阴云之下。北宋朝廷内,主和派大臣们如惊弓之鸟,或主张南迁金陵,或建议西逃蜀地。在这历史抉择的十字路口,一位目光如炬的政治家挺...

2025-04-03

杜甫的代表作:千年传颂的文学瑰宝

在中国古代文学的璀璨星河中,杜甫无疑是最耀眼的星辰之一。作为唐代伟大的现实主义诗人,杜甫以其深沉的情感、卓越的艺术成就和广泛的社会关怀,被后世尊称为“诗圣”。他的代表作不仅在当时广为流传,历经千年仍被...

2025-04-03

寒门诗魂:鲍照诗歌的刚健风骨与形式突围

在南朝绮靡文风中,鲍照如同一把淬火而出的利剑,以寒门之躯劈开时代的脂粉气。他的诗歌既是对门阀制度的血性呐喊,更是中国古典诗歌美学的一次惊险飞跃。这位被杜甫赞为"俊逸鲍参军"的诗人,用充满棱角的文字构建...

2025-04-03

盛彦师之死:李渊的权谋棋局与功臣末路

在唐朝开国功臣的星空中,盛彦师的名字曾如流星般划过,留下短暂而耀眼的光芒。他斩李密、平王世充、拒降徐圆朗,以骁勇善战著称,最终却落得被唐高祖李渊赐死的结局。这场看似悖理的历史悲剧,实则暗含李渊巩固皇权...

2025-04-03

唐朝统一战争:十年烽火铸就大一统伟业

唐朝,作为中国历史上最为辉煌灿烂的王朝之一,其统一之路却并非一帆风顺。在隋末天下大乱、群雄并起的背景下,唐高祖李渊于公元618年建立唐朝,但此时的新王朝仅占据关中、河东一隅,天下仍处于四分五裂之中。为...

2025-04-03

刘唐:梁山泊中的赤发鬼杰

在《水浒传》这部描绘北宋末年农民起义的鸿篇巨制中,刘唐以其独特的形象和鲜明的性格,成为了梁山泊一百零八将中不可忽视的一员。他绰号“赤发鬼”,紫黑阔脸,鬓边一搭朱砂记,上生一片黑黄毛,形象威猛而独特。那...

2025-04-03