新用户注册入口 老用户登录入口

[转载]【金猿技术展】SSNG多源数据处理技术——运营商手机信令处理系统及平台

文章作者:转载 更新时间:2023-07-01 09:57:01 阅读数量:342
文章标签:联通智慧足迹位置数据处理行为矩阵行为集成实时人口监测数据处理能力
本文摘要:中国联通智慧足迹开发的SSNG多源数据处理平台,利用行为矩阵、行为集成等技术创新,实现了对全国长时序人口流动的高效监测与预测。通过实时人口监测技术,该平台能够实时分析手机信令数据,提供准确的人口数量、结构和迁徙信息。其超强的数据处理及AI能力,日处理量可达1000亿条,大幅提升了位置数据计算精度。此项目已荣获多项科技进步奖,并拥有出行统计等相关专利,服务于国家治理现代化和企业数字化转型,是大数据领域的重要创新突破。
转载文章

本篇文章为转载内容。原文链接:https://blog.csdn.net/YMPzUELX3AIAp7Q/article/details/122314407。

该文由互联网用户投稿提供,文中观点代表作者本人意见,并不代表本站的立场。

作为信息平台,本站仅提供文章转载服务,并不拥有其所有权,也不对文章内容的真实性、准确性和合法性承担责任。

如发现本文存在侵权、违法、违规或事实不符的情况,请及时联系我们,我们将第一时间进行核实并删除相应内容。

bfee1369034b237beea9801bf5a1acf0.png

联通智慧足迹技术

本项目由联通智慧足迹投递并参与“数据猿年度金猿策划活动——2021大数据产业创新技术突破榜单及奖项”评选。

63211136bfbf3e0d5184b504cce31d05.png




数据智能产业创新服务媒体

——聚焦数智 · 改变商业



中国联通智慧足迹开发的SSNG多源数据处理平台,是完全自研的新一代面向行为集成位置数据处理系统。平台沉淀海量信令处理过程中的长期经验,着力解决影响数据输出质量的核心堵点,可兼容类似信令的多种LBS数据源接入并实现自动化、标准化输出数据结果。

技术说明

SSNG多源数据处理平台技术创新部分包括:

行为矩阵将离散的驻留信息,转化为用户的时空矩阵,通过机器学习模式识别,提取出用户的LBS行为特征。

行为集成:将用户的行为矩阵,结合搜集沉淀的土地利用&地物POI数据,为用户的驻留、出行信息赋予具体的目的,便于后续的场景化分析。

人车匹配:结合车联网LBS数据,将轨迹重合度高的“人-车”用户对,通过轨迹伴随算法识别出来,可用于判断用户的车辆保有情况。

路径拟合:解决信令数据定位不连续和受限基站布设密度等问题,引入路网拓扑数据,将用户出行链还原至真实道路上,并确定流向及关键转折点,以便于判断出行方式。

出行洞察:利用信令数据、基站数据,匹配地铁网络、高铁网络,通过机器学习算法,判定用户出行时使用的出行方式。

基于SSNG多源数据处理平台,可实现的技术突破包括:

1)全国长时序人口流动监测技术

针对运营商信令数据以及spark分布式计算平台的特点,独创了处理运营商信令数据的双层计算框架,填补了分布式机器学习方法处理运营商信令数据的空白,实现了大规模高效治理运营商大数据的愿景;研发了人口流动与现代大数据技术相结合的宏观监测仿真模型。

基于以上技术构建了就业、交通、疫情、春运等一系列场景模型,并开发了响应决策平台,实现了对我国人口就业、流动及疫情影响的全域实时监测。

2)全国长时序人口流动预测技术

即人口流动的大尺度OD预测技术,研发了人口跨区域流动OD预测模型,解决了信令大数据在量化模拟大尺度人口流动中的技术难题,形成了对全国人口流动在日、周、月不同时间段和社区、乡镇、县市不同地理尺度进行预测的先进技术,实现了2020年新冠疫情后全国返城返岗和2021年全国春节期间人口流动的高精度预测。

3)实时人口监测

实时人口监测是通过对用户手机信令进行实时处理、计算和分析,得出指定区域的实时人口数量、特征和迁徙情况。包括区域人口密度、人口数量、人口结构、人口来源、人口画像、人口迁徙、职住分析、人口预测等信息。

4)超强数据处理及AI能力

引入Bitmap大数据处理算法及Pilosa数据库集群,采用实时流式计算,集成Kafka、redis、RabbitMQ等分布式大数据处理组件,搭建自有信令大数据处理平台,使用百亿计算go-kite架构,实现毫秒级响应,实时批量处理数据达500000条 /秒,每天可处理1000亿条数据。集成AI分析能力(A/B轨),有效避免了运营商数据采集及传输过程中的时延及中断情况,大幅提高数据结果的实时性。

已获专利情况:

专利名称 专利号

出行统计方法、装置、计算机设备和可读存储介质 ZL 2020 1 0908424.3

信令数据匹配方法、装置及电子设备 ZL 2019 1 1298869.8

轨道交通用户识别方法和装置 ZL 2019 1 0755903.3

公共聚集事件识别方法、装置、计算机设备及存储介质 ZL 2020 1 1191917.6

广域高铁基站识别方法、装置、服务器及存储介质 ZL 2020 1 1325543.2

相关荣誉:

2021地理信息科技进步奖一等奖、中国测绘学会科技进步奖特等奖、2021数博会领先科技成果奖、兼容系统创新应用大赛大数据专项赛优秀奖。

开发团队

·带队负责人:陶周天

公司CTO,北京大学理学学士。长期任职于微软等世界500强企业,曾任上市公司优炫软件VP,具备丰富的IT架构、数据安全、数据分析建模、机器学习、项目管理经验。牵头组织突破多个技术难题(人地匹配、人车匹配、室内基站优化、行为集成AI等),研发一系列技术专利。

·团队其他重要成员:刘祖军

高级算法工程师,美国爱荷华大学计算机科学本硕,曾任职于美国俄亥俄州立大学研究院。

·隶属机构:智慧足迹

智慧足迹数据科技有限公司是中国联通控股,京东科技参股的专业大数据及智能科技公司。公司依托中国联通卓越的数据资源和5G能力,京东科技强大的人工智能、物联网等技术和“产业X科技”能力,聚焦“人口+”大数据,连接人-物-企,成为全域数据智能科技领先服务商。

公司以P·A·Dt为核心能力,面向数字政府、智慧城市、企业数字化转型广大市场主体,专注经济治理、社会治理和企业数字化服务,构建“人口+”七大多源数据主题库,提供“人口+” 就业、经济、消费、民生、城市、企业等大数据产品平台,服务支撑国家治理现代化和国家战略,推动经济社会发展。

目前,公司已服务国家二十多个部委及众多省市政府、300+城市规划、知名企业和高校等智库、国有及股份制银行等数百家头部客户,已建成全球最强大的手机信令处理平台,是中国就业、城规、统计等领域大数据领先服务商。

相关评价

新一代SSNG多源大数据处理平台,提升了手机信令数据在空间数据计算的精度,信令处理结果对室内场景更具敏锐性,在区域范围的职住人群空间分布更加接近实际情况。

——某央企大数据部技术负责人

新一代SSNG多源大数据处理平台,可处理实时及历史信令数据,应对不同客户应用场景。并且根据长时间序列历史数据实现人口预测,为提高数据精度可对接室内基站数据,从而提供更加准确的人员定位。

——某企业政府事业部总监

提示:了解更多相关内容,点击文末左下角“阅读原文”链接可直达该机构官网。

ae4fb60d905cb9c60a51d2e67ad6fd6c.png

d2b6bf560a5155d546378ff630e70d35.png

《2021企业数智化转型升级服务全景图/产业图谱1.0版》

8a348c4d04a13bf98b799246996fa79d.png

《2021中国数据智能产业图谱3.0升级版》

ea5b7a1b57a073b3ff20b46e5fe7c091.png

《2021中国企业数智化转型升级发展研究报告》

a1cd5423930f0296dd1a75429d098e30.png

《2021中国数据智能产业发展研究报告》

8fb4681c86ca76db53c13698847b78da.png

❷ 创新服务企业榜 

❸ 创新服务产品榜

❸ 最具投资价值榜 

❺ 创新技术突破榜

f69eedb9ce596a1eb30b04ccaefd30fe.png

条漫:《看过大佬们发的朋友圈之后,我相信:明天会更好!》

联系数据猿

北京区负责人:Summer

电话:18500447861(微信)

邮箱:summer@datayuan.cn

全国区负责人:Yaphet

电话:18600591561(微信)

邮箱:yaphet@datayuan.cn

本篇文章为转载内容。原文链接:https://blog.csdn.net/YMPzUELX3AIAp7Q/article/details/122314407。

该文由互联网用户投稿提供,文中观点代表作者本人意见,并不代表本站的立场。

作为信息平台,本站仅提供文章转载服务,并不拥有其所有权,也不对文章内容的真实性、准确性和合法性承担责任。

如发现本文存在侵权、违法、违规或事实不符的情况,请及时联系我们,我们将第一时间进行核实并删除相应内容。

相关阅读
文章标题:[转载][洛谷P1082]同余方程

更新时间:2023-02-18
[转载][洛谷P1082]同余方程
文章标题:[转载]webpack优化之HappyPack实战

更新时间:2023-08-07
[转载]webpack优化之HappyPack实战
文章标题:[转载]oracle 同时更新多表,在Oracle数据库中同时更新两张表的简单方法

更新时间:2023-09-10
[转载]oracle 同时更新多表,在Oracle数据库中同时更新两张表的简单方法
文章标题:[转载][Unity] 包括场景互动与射击要素的俯视角闯关游戏Demo

更新时间:2024-03-11
[转载][Unity] 包括场景互动与射击要素的俯视角闯关游戏Demo
文章标题:[转载]程序员也分三六九等?等级差异,一个看不起一个!

更新时间:2024-05-10
[转载]程序员也分三六九等?等级差异,一个看不起一个!
文章标题:[转载]海贼王 动漫 全集目录 分章节 精彩打斗剧集

更新时间:2024-01-12
[转载]海贼王 动漫 全集目录 分章节 精彩打斗剧集
名词解释
作为当前文章的名词解释,仅对当前文章有效。
SSNG多源数据处理平台SSNG多源数据处理平台是中国联通智慧足迹开发的一种新一代面向行为集成的位置数据处理系统,它能够兼容多种基于位置服务(LBS)的数据源,并实现自动化、标准化的数据输出。该平台通过技术创新如行为矩阵、行为集成等手段,对海量信令数据进行深度处理和分析,以解决影响数据质量的关键问题,从而提升对用户时空行为特征的识别能力以及对人口流动、出行方式等场景化分析的准确性。
人车匹配在本文语境中,人车匹配是指通过对车联网LBS数据与手机信令数据进行深度融合与分析,将轨迹高度重合的“人-车”用户配对识别出来。这一技术通过轨迹伴随算法实现,有助于判断用户的车辆保有情况,为后续交通规划、保险业风险评估等应用场景提供精确的数据支持。
路径拟合路径拟合是在移动通信环境下针对用户出行链路的一种优化技术。由于信令数据定位可能出现不连续及受限于基站布设密度的问题,引入路网拓扑数据后,路径拟合可以将用户在真实道路上的出行过程还原并确定其准确的流向和关键转折点,进而有效判断用户的实际出行方式,例如步行、骑行、自驾或公共交通等。这对于城市交通规划、商业布局优化等领域具有重要意义。
延伸阅读
作为当前文章的延伸阅读,仅对当前文章有效。
随着大数据、人工智能和5G技术的快速发展,中国联通智慧足迹数据科技有限公司在数据智能领域取得了一系列突破性成果。近期,其自主研发的SSNG多源数据处理平台因其在人口流动监测与预测方面的卓越表现,在2021年荣获多项国家级及行业大奖,并成功应用于数字政府、智慧城市以及企业数字化转型等多个领域。
当前,全球正面临疫情常态化防控、经济复苏、社会治理精细化等多重挑战,实时准确的人口流动数据对于决策制定至关重要。联通智慧足迹通过技术创新,不仅实现了全国长时序人口流动的精确监测,还在出行方式识别、人车匹配、路径拟合等方面取得了实质性进展,极大地提升了数据分析的深度和精度。
值得关注的是,该平台引入了Bitmap大数据处理算法及Pilosa数据库集群,结合Kafka、redis、RabbitMQ等分布式计算组件,搭建了高效的大数据处理体系,能够实现日处理数据量高达1000亿条的惊人能力。此外,AI分析能力的集成有效避免了数据采集和传输过程中的时延问题,确保了数据结果的实时性和准确性。
这一系列的技术创新和服务实践,充分展示了我国在大数据和人工智能领域的先进技术实力,也为推动国家治理体系和治理能力现代化提供了有力的数据支撑和技术保障。未来,中国联通智慧足迹将继续依托强大的数据资源和先进的技术手段,深化“人口+”大数据的应用场景,为国家和社会发展贡献更多力量。
知识学习
实践的时候请根据实际情况谨慎操作。
随机学习一条linux命令:
env | sort - 列出并排序所有环境变量及其值。
随便看看
拉到页底了吧,随便看看还有哪些文章你可能感兴趣。
基于Redis的分布式锁互斥性与可靠性实现及命名空间与原子性保障 04-22 可自定义刻度动画的jQuery进度条插件 02-07 jQuery和css3网站操作提示向导插件 12-28 jQuery创意响应式两栏滚动幻灯片特效 11-30 带视频播放的全屏轮播图布局特效 09-07 黑色炫酷个人摄影师网站通用模板下载 01-20 Cassandra中哈希分区与范围分区策略:数据分布、Murmur3Partitioner与负载均衡实践 11-17 [转载]java培训后好找工作吗 11-13 响应式环保包装盒设计公司网站静态模板 11-04 本次刷新还10个文章未展示,点击 更多查看。
中文建筑工程公司静态html网站模板下载 07-03 红色大气高端特色餐厅加盟网站模板 06-21 Vue.js 中的数据绑定与取消绑定:事件监听器、$destroy() 方法及 v-model 指令的运用与虚拟DOM、组件销毁的关系解析 06-20 响应式游戏应用商店单页网站html模板 06-15 自考大学通用模板下载 06-13 jqtimeline.js-简单又好用的jquery时间轴插件 06-04 [转载]Java Work 05-26 红色简洁电影售票平台网站html模板 05-02 投资集团项目展示页面网站HTML5模板 03-22 soulmate粉色干净浪漫唯美婚礼单页响应式网站模板 03-07 页面滚动时动态为元素添加class的jQuery插件 03-05
时光飞逝
"流光容易把人抛,红了樱桃,绿了芭蕉。"