用户1177713

LV1

技术专栏

数据之美TA创建的

138 文章63 关注者

全部文章

  • 相似文档查找算法之 simHash 简介及其 java 实现

    传统的 hash 算法只负责将原始内容尽量均匀随机地映射为一个签名值,原理上相当于伪随机数产生算法。产生的两个签名,如果相等,说明原始内容在一定概 率 下是相...

    用户1177713
    编程算法Java
  • 迷之 crontab 异常:不运行、不报错、无日志

    1、背景 前几天新同学入职,一不小心将跳板机上的 crontab 清空了,导致凌晨一大批任务异常,同事问了运维同学也没有备份,这一百多个任务要是恢复起来可不是件...

    用户1177713
    LinuxHadoop
  • Ubuntu on Windows10 跨平台开发环境搭建权威指南

    程序猿经常争论的一个话题是:日常开发到底 Windows 好还是 Linux 好?进而演化出另一个问题:到底选 MacBook 好还是 SurfaceBook ...

    用户1177713
    其他
  • 手把手教你 Spark 性能调优

    0、背景 上周四接到反馈,集群部分 spark 任务执行很慢,且经常出错,参数改来改去怎么都无法优化其性能和解决频繁随机报错的问题。 看了下任务的历史运行情况,...

    用户1177713
    spark
  • 一千个不用 Null 的理由

    港真,Null 貌似在哪里都是个头疼的问题,比如 Java 里让人头疼的 NullPointerException,为了避免猝不及防的空指针异常,千百年来程序猿...

    用户1177713
    MySQL
  • MySQL 死锁与日志二三事

    最近线上 MySQL 接连发生了几起数据异常,都是在凌晨爆发,由于业务场景属于典型的数据仓库型应用,白天压力较小无法复现。甚至有些异常还比较诡异,最后 root...

    用户1177713
    MySQL
  • 线上服务 CPU 100%?一键定位 so easy!

    背景 经常做后端服务开发的同学,或多或少都遇到过 CPU 负载特别高的问题。尤其是在周末或大半夜,突然群里有人反馈线上机器负载特别高,不熟悉定位流程和思路的同学...

    用户1177713
    Windows
  • 记一次诡异的 ssh 互信免密码登录失败

    背景 因为 hadoop 环境需要 master 能免密码 ssh localhost,所以我们需要建立与本机 localhost 的互信,方法很简单: 1. ...

    用户1177713
    sshLinux
  • 文本编辑利器Notepad++ 10个强大而又鲜为人知的特性

    Notepad++ 顾名思义就是 windows 内置 Notepad 的增强版,它采用 C++ 编写,性能优秀,不仅小巧(完整安装包仅 3.8MB),功能众多...

    用户1177713
    Windows数据处理
  • CPU 100% 异常排查实践与总结

    1、问题背景 昨天下午突然收到运维邮件报警,显示数据平台服务器cpu利用率达到了98.94%,而且最近一段时间一直持续在70%以上,看起来像是硬件资源到瓶颈需要...

    用户1177713
    运维
  • 用户画像从入门到挖坑

    背景 用户流量从搜索引擎为入口的增量时代到移动互联网普及人口红利不再的存量时代,这个变化对每个公司的获客成本,运营思路都产生了很大的影响,在流量日益枯竭,获客成...

    用户1177713
  • Shell 黑科技之匿名函数实现任务并行化

    shell 作为一门系统级别胶水语言,学习成本低,用起来很方便,但是缺点也显而易见:性能问题一直为人锁诟病。所以 shell 也就多用在简单的系统管理等场合,数...

    用户1177713
    Shell
  • Hive Lock 那些事儿

    0、背景 最近两天数据仓库中一张核心表遭遇了锁的问题,导致数据插入失败,影响挺大,之前一直没注意到这个问题,借此总结一下这块的知识和遇到的坑。 hive 在 0...

    用户1177713
    其他
  • 15 个简单、有趣而实用的 单行 HTTP Server

    不少语言或服务开发框架都内置了简单的 Web Server 供我们方便的调试使用。比如有时候我们需要调试单个 PHP 页面而不想搭建一套完整的 PHP 环境,亦...

    用户1177713
    Linux
  • 详解 MySQL 5.7 新的权限与安全问题

    1、新版 MySQL 权限问题:  问题:SQL Error (1130): Host '192.168.1.100' is not allowed to co...

    用户1177713
    MySQL安全SQL数据库AI 人工智能
  • SSD Win8 系统盘 4K 无损对齐历险记

    1、背景:为什么要 4K 对齐 簇是系统在硬盘上读写文件时的单位,是一个数据块(逻辑概念)。而扇区是硬盘划分的最小单位值,就是簇(数据块)占用的地方(物理概念)...

    用户1177713
    存储Windows
  • Linux Shell 从入门到删除根目录跑路指南

    shell 作为一门 linux 下使用广泛的系统语言,语法简单,上手容易,但是想要用好,少犯错误,也不是那么容易的一件事,可谓虽是居家旅行之良药,但也是杀人灭...

    用户1177713
    LinuxShell
  • 深入分析诡异的 Excel 求和统计缺失问题

    1、背景 昨天有同学在用 Excel 做数据统计时偶然发现 Excel 会少算一些数据,而且这个坑让这位同学排查了很久才确认不是自己统计程序错误而只是 Exce...

    用户1177713
    其他
  • 网站数据统计分析之二:前端日志采集是与非

    在上一篇《网站数据统计分析之一:日志收集原理及其实现》中,咱们详细的介绍了整个日志采集的原理与流程。但是不是这样在真实的业务环境中就万事大吉了呢?事实往往并非如...

    用户1177713
    JavaScript
  • 一次小折腾:PyCharm 调用 Cygwin Python 找不到 time、sys 等内置模块

    1、需求背景 为什么要这样干呢?因为 Python 虽然号称跨平台,但是一些和操作系统相关的函数 API,windows 下也还是只能干瞪眼用不了,比如 imp...

    用户1177713
    Python

个人简介

个人成就

扫码关注云+社区

领取腾讯云代金券