首页
学习
活动
专区
工具
TVP
发布
精选内容/技术社群/优惠产品,尽在小程序
立即前往
您找到你想要的搜索结果了吗?
是的
没有找到

GEE案例——利用谷歌地球引擎的深度学习方法绘制哨兵 1 号地表水地图

卫星遥感在测绘地表水的位置和范围方面发挥着重要作用。绘制地表水地图有多种方法,但深度学习方法并不常见,因为它们 "数据饥渴",需要大量计算资源。不过,随着各种卫星传感器的出现和云计算的快速发展,遥感科学界正在采用现代深度学习方法。基于云计算的谷歌人工智能平台和谷歌地球引擎的新整合使用户能够大规模部署计算。在本文中,我们研究了两种自动数据标注方法:1. 联合研究中心(JRC)地表水地图;2. Edge-Otsu 动态阈值方法。我们部署了一个 U-Net 卷积神经网络来绘制哨兵-1 合成孔径雷达 (SAR) 数据中的地表水图,并使用不同的超参数调整组合测试了模型性能,以确定最佳学习率和损失函数。然后使用独立的验证数据集对性能进行评估。我们共测试了 12 个模型,发现使用 JRC 数据标签的模型性能更好,训练测试和验证工作的 F1 分数从 0.972 到 0.986 不等。此外,我们还使用了一个独立采样的高分辨率数据集来进一步评估模型性能。通过这一独立验证工作,我们发现利用 JRC 数据标签的模型产生了 0.9130.922 的 F1 分数。通过不同的输入数据、学习率和损失函数成分对模型进行配对比较,发现 JRC 调整二元交叉熵骰模型与其他 66 个模型组合在统计上有所不同,并显示出最高的相对评估指标,包括准确率、精确度得分、科恩卡帕系数和 F1 分数。这些结果与许多传统方法处于同一范围。我们注意到,谷歌人工智能平台与谷歌地球引擎的集成可以成为大规模部署深度学习算法的有力工具,自动数据标注可以成为开发深度学习模型的有效策略,但是独立数据验证仍然是模型评估的重要步骤。

01

clickhouse 创建数据库和表

MySQL单条SQL是单线程的,只能跑满一个core,ClickHouse相反,有多少CPU,吃多少资源,所以飞快; ClickHouse不支持事务,不存在隔离级别。这里要额外说一下,有人觉得,你一个数据库都不支持事务,不支持ACID还玩个毛。ClickHouse的定位是分析性数据库,而不是严格的关系型数据库。又有人要问了,数据都不一致,统计个毛。举个例子,汽车的油表是100%准确么?为了获得一个100%准确的值,难道每次测量你都要停车检查么?统计数据的意义在于用大量的数据看规律,看趋势,而不是100%准确。 IO方面,MySQL是行存储,ClickHouse是列存储,后者在count()这类操作天然有优势,同时,在IO方面,MySQL需要大量随机IO,ClickHouse基本是顺序IO。 有人可能觉得上面的数据导入的时候,数据肯定缓存在内存里了,这个的确,但是ClickHouse基本上是顺序IO,用过就知道了,对IO基本没有太高要求,当然,磁盘越快,上层处理越快,但是99%的情况是,CPU先跑满了(数据库里太少见了,大多数都是IO不够用)。 二、创建库

05

为什么工作三年的程序员还不懂APM与调用链技术?

◆ 服务调用链技术 服务调用链技术是微服务架构中对服务进行监控的重要环节,它可以帮助我们清晰地了解当前系统的运行情况,同时帮助我们定位问题,解决分布式网络下服务交互追踪的问题。 ◆ APM与调用链技术 在单体应用架构拆分为微服务架构后,一个用户请求会跨网络依次调用不同的服务节点进行分布式交互处理,最后将结果汇总处理,再将结果返回给用户。那么在整个处理的链条中,如果有任何一个节点出现了延迟或者超时等问题,都有可能导致最终结果出现异常。在很多场景下,一个功能可能需要多个技术团队、多种技术栈、多个跨地域网络

01

MySQL数据库编码有关问题--Java学习网

在程序开发中,有时会被字符乱码的问题所困扰。对此,必须理解 MySQL 的字符集编码设置的原理:在MySQL中,默认使用的是lartin1,也就是ISO8859-1字符集编码。这是一种8位的编码,适用于所有西欧字符。而对于汉字等是不合适的。最好、最通用的编码格式是utf-8,UTF-8(8 位元 Universal Character Set/Unicode Transformation Format)是一种针对Unicode 的可变长度字节编码的Unicode字符集。它对英文使用8位(即一个字节),中文使用24位(三个字节)来编码。所以对于8位的西欧字符集来说,更能比较节省空间,而又能够有效地表示汉字等字符。MySQL服务器对字符集和校对规则有4个级别的默认设置:服务器级、数据库级、表级和连接级。

02

月球上的水不是普通水,可喝可用作火箭燃料 | 黑科技

月球上水资源分布非常广泛。 最近,科学家发现月球上存在大量水,它们隐藏在月球地表下面。之后,位于美国科罗拉多州博尔德的空间科学研究所研究人员已经找到证据表明,月球上水资源的分布非常广泛,而且无论昼夜都会出现。 但是,他们也指出,月球上的水资源似乎主要是以羟基而非H2O形式存在的,可能不太容易获取。这一研究成果发表在《自然地球科学》杂志上。 这些发现使研究人员能更好地了解月球水资源的来源以及广泛分布的原因。这一信息可能成为未来发射月球卫星太空任务的重要资产。 另外,越来越多的机构和公司在探索重返月球和建立月球

06
领券