当前位置:首页 > 物联网 > 智能应用
[导读] 2015年国务院印发《促进大数据发展行动纲要》,首次从国家信息化发展的战略层面认定数据是国家的基础性战略资源,大数据成为提升政府治理能力的新途径。2016年生态环境部(原环境保护部)印发《生态环境大数据建设总体方案》,开启“互联网+生态环境”战略,推动政府环境治理创新。因此,大数据逐步成为环境治理的重要战略资源和政府提升环境治理能力的重要手段,发展数字经济也成为可持续发展的重要方向,同时,对于推动生态环境治理能力现代化和加快生态文明建设进程具有重要意义。

 2015年国务院印发《促进大数据发展行动纲要》,首次从国家信息化发展的战略层面认定数据是国家的基础性战略资源,大数据成为提升政府治理能力的新途径。2016年生态环境部(原环境保护部)印发《生态环境大数据建设总体方案》,开启“互联网+生态环境”战略,推动政府环境治理创新。因此,大数据逐步成为环境治理的重要战略资源和政府提升环境治理能力的重要手段,发展数字经济也成为可持续发展的重要方向,同时,对于推动生态环境治理能力现代化和加快生态文明建设进程具有重要意义。

近年来,随着互联网、计算机的飞速发展和技术进步以及人工智能软硬件技术的发展和广泛应用,数据作为记录各种人类活动的一种重要资源而呈现出爆发式增长,而从海量的、非结构化的数据中获取、处理、分析、挖掘其中有价值的信息成为国内外政府、企业以及学术界的关注焦点。其中,非结构化的文本大数据作为一种新的数据源,也是最重要的信息载体之一,往往带有明显的领域特征和独特的语言模式,也常常包含大量的专业词汇,能够为环境治理问题提供有效的信息和独特的分析视角。例如,文本大数据可以用于测度环境政策的不确定性、量化媒体关注度以及舆论导向、不同环境治理主体的情绪对相应问题解决方式的影响、基于新闻的隐含波动因素等。

一、文本大数据的主要特征

传统的数据收集往往借助于纸质媒介,体量较小,数据获取成本高,获取时间相对滞后;而通过互联网媒介进行文本数据收集和处理,不仅成本大幅降低,数据的可得性大幅增加,数据的体量也呈现几何级数增长的特征。同时,随着网络平台发布信息普及度的提高,除了传统的政府职能部门和相关机构发布信息之外,微博、微信公众号、朋友圈、论坛帖子等新媒体形式也逐渐成为数据来源的重要渠道,文本大数据的发布主体从单一向多样化进行转变,频率变得更高。通过互联网平台积累起来的数据,就存储在网络空间中,文本信息即刻在网络中留下痕迹,通过一定的方法和技术进行提取,信息获取更加及时,数据获取的成本也相对降低。通过利用互联网大数据信息,可以获取接近全体的样本信息,海量的样本量支持下,避免了由于信息不全面导致的错觉以及判断失误,未来还将开拓更为丰富的数据源,如政府工作报告、规划、书籍、档案等。

二、文本大数据提取的重点和难点

文本数据是信息的抽象提炼,正是由于海量文本数据信息的存在,获取、处理和分析文本大数据方面仍然存在一些问题,其中最重要的是如何准确并且有效率地从海量文本中提取出所需要的核心信息,并考察其对相应问题的解释或预测能力。提取文本数据信息需要综合考虑文本数据的来源、语言环境、内容长短、句式结构以及需提取信息的特征等因素,同时也要考虑信息提取的成本和收益。在条件允许的情况下,可以采用相对复杂的统计学习和深度学习相结合的信息提取方法来提高信息提取的准确性,优化人机合作成为解决困难的重要方式。使用复杂方法时还需要保证这些方法的透明性和可复制性。最后还要注意的是,数据的结构化转换和文本数据信息提取这两步的执行顺序需要依靠具体问题来决定,有时需要经过多次尝试才能找到最佳方案。

三、文本大数据在环境治理方面的应用

现有环境领域文本相关分析的问题主要有两大类,一是区分文本显示的公民的情绪正负、新闻或者文件语调正负等聚类问题,二是对情绪、不确定性、恐慌程度、意见分歧程度的度量以及相应的回归问题。

1.文本情绪

因为情绪的变化可能会导致问题处理的结果不同,度量情绪并预测风险是文本大数据在环境治理领域的重要应用方向,典型的例子是邻避效应。通常用“语调”来表示“情绪”,语调的不同表示了情绪的正面和负面、乐观和悲观、积极和消极等。根据情绪的不同主题,文本情绪的研究对象主要包括媒体语调(媒体新闻)、管理层语调(当事公司管理层讨论与分析、环评报告以及其他公开披露的信息文件)、公民情绪(网络论坛发帖)等。

媒体情绪度量媒体报道内容中包含的乐观与悲观情绪。通常来看,媒体负面语气能够解释邻避问题的风险和解决方案,但正面语气却没有解释能力。

管理层的信息披露往往能反映管理层的决策和意图,信息公开不全面、甚至相关信息空白,环评报告独立性存疑,相当于利益集团放大了邻避效应,无助于问题的解决。

2.媒体关注和倾向

传统的数据指标和环境问题治理之间的关系不稳定,且只能反映部分信息,与传统数据相比,文本数据覆盖领域广泛、信息可以被很多个体所获取、并且新闻内容可能与当前和未来状态密切相关。利用文本数据度量公民关注的环境问题采用的主要指标有搜索指数、阅读频率数据和论坛发帖量等。作为信息的制造者和传播者,媒体的关注和倾向一方面可以影响普通公民对环境问题治理的关注,另一方面也影响信息的传播效率和模式。

媒体对环境政策的变动和未来趋势可能产生很重要的影响,比较典型的例子是“PM2.5”、“雾霾”等关键词在一段时间内在媒体中频繁出现,推动了PM2.5的数据公开以及《大气污染防治行动计划》等一系列治理大气污染改善空气质量政策措施的出台与实施。相比而言,传统的自上而下的政策颁布实施时间跨度较长,而主流新闻媒体的新闻文本、网络搜索短时间内同一关键词频繁出现,对新的环境政策的实施具有明显的促进作用。

四、推动文本大数据应用的保障措施

统筹规划,协同推进文本数据资源整合,建设现代化高技术的数据中心,加强内部共享和动态更新;整合信息平台,逐渐形成统一的互联网文本数据平台,实现信息的有效共享和开放交换;建立文本数据正负面清单,完善健全文本数据开放制度和机制,提高各政府部门和社会机构的文本数据开放热情。

文本大数据为度量公民情绪提供了新的数据源。一方面,由于公民越来越倾向于选择在网络论坛上发布相关的评论帖子或者做出相关搜索,这些文本数据能直接反映他们对邻避事件的看法、对当前状态的解读以及与自身决策相关的信息。另一方面,这些数据易获得且覆盖群体范围广,满足了从不同频率、不同层面研究情绪与邻避风险关系的需求。加强文本大数据处理和分析的技术创新、建立一体化的大数据平台和完善的数据管理体系,通过对文本大数据的高效采集、有效整合,加强对政府数据的共享开放和社会数据的挖掘应用,提升环境问题决策能力,提高风险防范水平,进一步深化环境治理的精准性和有效性。

本站声明: 本文章由作者或相关机构授权发布,目的在于传递更多信息,并不代表本站赞同其观点,本站亦不保证或承诺内容真实性等。需要转载请联系该专栏作者,如若文章内容侵犯您的权益,请及时联系本站删除。
换一批
延伸阅读

北京2024年4月17日 /美通社/ -- 2024年4月13日,由北京康盟慈善基金会主办的"县域诊疗,规范同行"——肿瘤诊疗学术巡讲项目首站在广州隆重召开。本次会议邀请全国多位肺癌领域专家和县域同道...

关键字: AI技术 医疗服务 BSP 互联网

机器人技术将与移动互联网、物联网、大数据、云计算、人工智能等新一代数字技术进一步融合,特别是5G技术将使工业机器人成为工业智能制造体系的一部分,通过实时传输数据提高效率。

关键字: 机器人 医疗机器人 互联网

在这个互联网时代我们的数据越来越多但也越来越透明,想不明白自己的手机号和姓名是怎么泄露的,每天都会有各种广告推销打给自己,也曾听说谁谁谁的照片不知道为何被外泄讨论。数据存储和安全管理已经成为企业运营和个人生活中不可或缺的...

关键字: 铁威马 互联网 nas网络存储

SAP(思爱普)近日发出的裁员计划,不仅涉及全球范围内约8000个职位,更是在中国区造成了近1500名正式员工和合同工不续的情况。

关键字: 软件 互联网

北京——2024年4月18日 西门子中国和亚马逊云科技双方高层在西门子中国北京总部会晤,双方宣布签署战略合作协议,共同成立“联合创新团队”。基于亚马逊云科技在生成式AI领域的领先技术和服务,并结合西门子在工业领域的深厚积...

关键字: 生成式AI 机器学习 大数据

赛诺贝斯开创性"三位一体"商业模式:领跑MarTech行业的创新引擎

关键字: 数字化 大数据 大模型 生成式AI

最近总是出现iPhone16和ipad的概念新闻,以前为了跟风也会更换手机,后来是因为职业原因拍摄大量视频照片占据手机空间而不得已换了一部又一部手机。但慢慢地我发现,想要查找几年前的视频总得翻找之前的手机,流程繁杂又拖沓...

关键字: NAS 互联网 存储

随着大数据时代的到来和计算能力的不断提升,机器学习作为人工智能领域的重要分支,正逐渐改变我们的生活方式和工作模式。机器学习涉及多个学科的理论和技术,其应用广泛且深入,为各个领域的发展带来了前所未有的机遇。那么,机器学习具...

关键字: 大数据 机器学习 人工智能

随着大数据时代的来临,数据的价值日益凸显,如何从海量数据中提取有用信息并转化为实际价值,成为各行各业关注的焦点。机器学习和数据挖掘作为两大核心技术,在数据分析和处理中发挥着越来越重要的作用。本文将通过几个典型的应用案例,...

关键字: 大数据 机器学习 数据挖掘

近日,国内领先的在线旅行服务平台去哪儿宣布完成鸿蒙原生应用Beta版本开发,成为旅行行业中首批完成Beta版开发的应用之一,该版本已经实现了机票预订、支付、服务等功能,将为用户提供更为便捷、智能的旅行体验。这不仅为旅行行...

关键字: 鸿蒙 互联网 智慧旅行
关闭
关闭