首页
学习
活动
专区
工具
TVP
发布

大数据智能实战

大数据与人工智能方向的论文复现、技术探索、工程实践的点滴记录和积累。
专栏成员
256
文章
410686
阅读量
56
订阅数
AllenNLP系列文章之一:初识AllenNLP和代码重构
  AllenNLP是一个相对成熟的基于深度学习的NLP工具包,它 构建于 PyTorch 之上,它的设计遵循以下原则: (1)超模块化和轻量化。你可以使用自己喜欢的组件与 PyTorch 无缝连接。 (2)经过广泛测试,易于扩展。测试覆盖率超过 90%,示例模型为你提供了很好的模板。 (3)真正的填充和覆盖,让你可以毫无痛苦地轻松实现正确的模型。
sparkexpert
2022-05-07
7340
DeepFool(迷惑深度学习分类模型)测试
      AI+网络安全是当前网络攻击与防御方向比较热门和前沿的领域。同时网络安全中的漏洞挖掘、入侵检测、异常流量等传统任务也已经出现了大量基于深度学习的实现方法。然而当以深度学习为主流的人工智能应用越来越广泛之后,陆续又出现了对于人工智能应用的攻击,主要分为两种:一是白盒测试,即深度学习的模型架构和参数都已经的情况下,这种场景的攻击一般可以进行参数的修改来达到攻击的效果;二是黑盒测试,即上述情况未知的情况下进行攻击,这时候采用的攻击手段主要是对抗样本,对抗样本(adversarial examples)这一概念在Szegedy et al. (2014b)中被提出:对输入样本故意添加一些人无法察觉的细微的干扰,导致模型以高置信度给出一个错误的输出。对抗样本现在已经广泛应用于人脸识别、声纹识别等相关应用场景。
sparkexpert
2022-05-07
5190
Mask R-CNN(目标检测,语义分割)测试
Kaiming He的大作Mask R-CNN( https://arxiv.org/pdf/1703.06870.pdf)已经放出来一段时间了,最近才有空进行代码学习和编译。 
sparkexpert
2022-05-07
4050
tableau sdk java的测试
分析下tableau的自带的DLL,从其加载的QT库不难判断,它是采用QT来开发的。因此具有易于移植的作用。看到网上有公开的SDK,于是下载看看,然而却非常失望,其SDK仅仅提供一个数据源的提取和工作空间的发布,然而针对其核心的数据可视化,居然没有外置接口。
sparkexpert
2022-05-07
1.2K0
spark读取多个文件夹(嵌套)下的多个文件
在正常调用过程中,难免需要对多个文件夹下的多个文件进行读取,然而之前只是明确了spark具备读取多个文件的能力。
sparkexpert
2022-05-07
3.1K0
百度地图flex例子测试
公告:亲爱的用户,您好,自2013年8月8日起,我们针对Flash API产品仅保持维护(保证老用户可正常获取Flash地图服务)但不再更新,建议新用户选择百度JavaScript API产品开发。
sparkexpert
2022-05-07
1500
Ubuntu环境下Redis的安装与JAVA连接测试
最近由于想测试一下内存数据库的性能,于是找了KV类中最普遍的Redis进行测试。首先需要安装一下,将安装过程在此记录一下。
sparkexpert
2022-05-07
3140
面向大规模社会关系网络数据的层次数据发现
现在随便哪个关系网络的数据规模都非常庞大,如https://snap.stanford.edu/data/上面公开的数据集,动不动都是几万个节点,十几万个边的。
sparkexpert
2022-05-07
2010
C# 随机生成手机号码(中国地区)
做大数据挖掘,其中通话记录是很重要的一种实时大数据。为了做实验,往往需要生成随机手机号。
sparkexpert
2022-05-07
1.3K0
spark深度学习算法(CNN卷积神经网络)的测试与分析
  卷积神经网络(Convolutional Neural Network,CNN)是一种前馈神经网络,它的人工神经元可以响应一部分覆盖范围内的周围单元,对于大型图像处理有出色表现。
sparkexpert
2022-05-07
8980
Apache Mahout的KMeans算法测试
Mahout是Hadoop中实现数据挖掘的包,虽然现在一般用spark mlib,但是为了做比较,想着将mahout的算法进行验证测试一下。。
sparkexpert
2022-05-07
6020
ubuntu环境下R统计环境的安装与igr…
参照网上的说法进行执行的。不过安装的时候还是出现了不少问题,其中有些地方 需要多加几下操作。
sparkexpert
2022-05-07
3030
基于openai_clip在零样本图像分类识别测试
The code below performs zero-shot prediction using CLIP, as shown in Appendix B in the paper. This example takes an image from the CIFAR-100 dataset, and predicts the most likely labels among the 100 textual labels from the dataset.
sparkexpert
2021-06-09
8360
openai clip的测试中加载出现Method 'forward' is not defined问题
openai 的clip模型是多模态预训练模型的开山之作,最近刚好趁着其模型已经放出来进行了测试。在加载的时候却发现:Method 'forward' is not defined这样的问题。
sparkexpert
2021-06-09
1K0
基于C3Framework开源人群计数框架的测试
C3Framework是一个开源的人群计数框架,在进行代码复现的时候,进行单张图片的测试。
sparkexpert
2019-08-01
8100
谷歌tacotron端到端的文本转语音合成模型实践
虽然谷歌tacotron已经推出了两个版本了,但是本实践主要还是针对第一个实践的。
sparkexpert
2019-05-28
9790
AllenNLP系列文章之三:机器阅读
Machine Comprehension (MC) models answer natural language questions by selecting an answer span within an evidence text. The AllenNLP MC model is a reimplementation of BiDAF (Seo et al, 2017), or Bi-Directional Attention Flow, a widely used MC baseline that achieved state-of-the-art accuracies on the SQuAD dataset in 2017. The AllenNLP BIDAF model achieves an EM score of 68.3 on the SQuAD dev set, just slightly ahead of the original BIDAF system's score of 67.7, while also training at a 10x speedup (4 hours on a p2.xlarge).
sparkexpert
2019-05-27
7170
目标检测框架mmdetection框架的安装与测试
最近利用Conda终于成功安装了mmdetection,说实话,非conda的还真的不好装,特别在.complie的时候,即使成功,总是会出现各种问题,直到conda安装后,才明白之前的问题关键所在,即必须numpy为1.16.2版本,且pytorch需要为1.0版本。之前从release版本中下载了0.4.1的版本,还是有问题。
sparkexpert
2019-05-26
4.6K0
python elasticsearch 批量写入测试
elasticsearch 是一个高效的近实时的数据库。最近要重新进行老版本的ES 数据迁移到新版本。由于以前都是采用java来进行连接的,不过这回为了方便,找了个python 连接包来进行处理。
sparkexpert
2019-05-26
1.8K0
基于深度学习的实现影像地图道路提取
从遥感影像中提取出道路是遥感领域智能分析的一种常见任务。今天刚好看到CVPR 2018的挑战赛任务中(http://deepglobe.org/leaderboard.html)有这样的一个已经完成的竞赛,对道路提取第一名的方案(北邮团队的D-LinkNet: LinkNet with Pretrained Encoder and Dilated Convolution for HighResolution Satellite Imagery Road Extraction)进行了复现。
sparkexpert
2019-05-26
1.1K0
点击加载更多
社区活动
【纪录片】中国数据库前世今生
穿越半个世纪,探寻中国数据库50年的发展历程
Python精品学习库
代码在线跑,知识轻松学
博客搬家 | 分享价值百万资源包
自行/邀约他人一键搬运博客,速成社区影响力并领取好礼
技术创作特训营·精选知识专栏
往期视频·千货材料·成员作品 最新动态
领券
问题归档专栏文章快讯文章归档关键词归档开发者手册归档开发者手册 Section 归档