持续创作，加速成长！这是我参与「掘金日新计划 · 10 月更文挑战」的第32天，点击查看活动详情
📷 随着spark越来越流行，我们的很多组件都有可能和spark集成，比如说spark处理完的数据写入mysql，redis，或者hbase，elasticsearch，spark本身不包含db的依赖的，这就需要自己解决依赖的jar包，这里大致有两种处理思路处理依赖问题： （1）使用maven将整个依赖打成一个fat的jar，这样所有的依赖都会在一个jar包，这样的好处就是一个jar包包含所有依赖，不需要额外考虑依赖的问题，但是弊端也非常明显如果依赖多的话jar包的体积会非常大超过100M都很正常
jar包相信大家都很熟悉，是通过打包java工程而获得的产物，但是jar包是有一个致命的缺点的，那就是很容易被反编译，只需要使用jd-gui就可以很容易的获取到java源码。
个人的一个小感受，学习一个新技术，应该以历史的眼光开看待这个新技术出现的原因，以及帮我们解决了什么问题。我们来回忆一下没有Maven的日子是怎么样的？
APK（android Application PacKage）文件是安卓app的安装文件，其实就是一个zip或rar压缩包，把apk后缀改为zip，即可解压得到一堆安卓相关文件。
1、测试环境是由开发去更新的，当开发忙于改bug的时候，测试环境更新频率比较低，问题不能得到及时的验证
之前的文章也提到过，最近工作中需要对HBase进行二次开发（参照HBase的AES加密方法，为HBase增加SMS4数据加密类型）。研究了两天，终于将开发流程想清楚并搭建好了debug环境，所以就迫不及待地想写篇文章分享给大家。
以前在Win下使用Aptana Stdio的时候进行过破解，最近一段时间的工作环境切换到了Linux下，而且使用了Aptana的Plugin For Eclipse，过期了一直没有去管，今天花了点时间将他破解掉了。
工作当中遇到的事情比较杂，因此涉及的知识点也很多。这里暂且记录一下，今天遇到的知识点，纯干货~ 关于文件的解压和压缩 如果你的系统不支持tar -z命令 如果是古老的Unix系统，可能并不认识tar -z命令，因此如果你想要压缩或者解压tar.gz的文件，就需要使用gzip或者gunzip以及tar命令了。 关于tar.gz可以这么理解，tar结尾的压缩包，其实只负责把文件打包，并没有进行压缩；而gz结尾的包，则是进行压缩操作。 因此，tar.gz的文件可以理解为，先进行打包，再进行压缩。 那么，压缩
做过自动化的人，肯定对selenium web环境的搭建非常熟悉了，特别是selenium在java中的使用。
1：在windows的eclipse里面直接运行main方法，就会将job提交给本地执行器localjobrunner执行
前面我们就已经说了Windows怎么使用Arthas了，那今天我们就来聊一下在Linux下的Arthas的使用
ZooKeeper是一个分布式的，开放源码的分布式应用程序协调服务，是Google的Chubby一个开源的实现，是Hadoop和Hbase的重要组件。它是一个为分布式应用提供一致性服务的软件，提供的功能包括：配置维护、域名服务、分布式同步、组服务等。
在Java中，我们经常听到classpath这个东西。网上有很多关于“如何设置classpath”的文章，但大部分设置都不靠谱。
Java工程中添加依赖jar包不起作用问题总结 此次总结两种方式的依赖问题 1 在Eclipse中添加依赖jar包不起作用问题 这种方式可能是Eclipse缓存，或者Eclipse还没有反应过来。例如Eclipse中有个Java工程以前依赖了a.jar文件，但是在工程中删除这个文件后，工程可以正常执行，这可能是Eclipse缓存问题。 这种情况刷新Eclipse中的Java工程或者重启Eclipse即可。 2 Linux中添加依赖jar包不起作用问题 造成这种情况的原因是有多个进程在
注：xxxx1为打包好的jar包名称；xxxx2为自定义名称，什么都行；xxxx3为项目运行的端口号，自定义
很多公司都是搭建自己的Maven私有仓库，今天就带大家使用nexus搭建一个自己的私有仓库，并使用idea上传java到自己的仓库。
Maven是一个Java项目管理工具，主要功能是统一开发规范与包的依赖管理。Maven项目对象模型(POM)，可以通过一小段描述信息来管理项目的构建、测试、报告等。
开发的时用到的jar包可能在私服中找不到，需在下载到本地，然后在编译器Eclipse或者IDEA中引入本地jar包，这样在本地开发是OK的，但是linux服务器通过Maven打包的时候会提示异常找不到对应的类。这是需要在我们的pom.xml文件添加点配置了。
今天遇上这个问题，真是费劲，idea调试没问题，打jar包后再linux’服务器上运行就报错ClassNotfund我的解决办法如下：
在交接的代码中做手脚进行删库等操作，之前只是网上听说的段子，没想到上周还真遇到了，并且亲自参与帮忙解决。
然后后面又来了个gradle，貌似比maven更好用，我这里不会，也不讲，就目前来说，maven的用户量还是比较大的。
最近我有一个工具需求就是在我的电脑上通过Python来调用我们内部的一个Jar包，没想到这么一个简简单单的需求，折腾了将近2天的时间，在这里做一个总结，来简单说一下这过程中遇到的问题，希望可以帮助到后来人
Maven 是⼀个项目管理工具, 通过 pom.xml文件的配置获取 jar包，而不用手动去添加 jar包。
最近，发现很多小伙伴在修改了SpringBoot的配置文件后，都要重新编译整个项目，极大的浪费了开发时间。我身边就有很多小伙伴一直是这样做的。那么，有没有什么方式能够修改配置文件后，不再编译整个项目呢？且听冰河细细道来~~
项目是一个很简单的springboot项目(可以自己开发一个，也可以直接导入资料中提供的)，结构如下：
一直想写一篇关于Maven的文章，但是不知如何下笔，如果说能使用，会使用Maven的话，一到两个小时足矣，不需要搞懂各种概念。那么给大家来分享下我是如何理解并使用maven的。
前言 从刚开始接触Mxnet这个框架到现在已经大概四个月了。Mxnet最吸引我的地方就是它提供了 很多语言的接口，其中有Scala（my favorite），这是我从Caffe转过来的原因之一。 Mxnet是我第一个参与的开源项目，可以说这四个月来我学到了很多东西。 本文的其中目的在于介绍一下如何用 Mxnet Scala 包来开发自己的 deep learning 的应用，有 哪些坑需要注意的，最后就是安利一下Mxnet 这个框架了。 然后，还有就是Mxnet Scala Pack
代码： https://github.com/cyofeiyue/MyRPC 1.Akka配置信息 //Master akka.actor.provider = "akka.remote.RemoteActorRefProvider" akka.remote.netty.tcp.hostname = "$host" akka.remote.netty.tcp.port = "$port" //Worker akka.actor.provider = "akka.remote.RemoteActorRef
这是个很基础的问题，但是因为基本上都是用现有的IDE工具 来开发java程序，所以很少有人意识到这一点。
目录有：backup、bin、conf、lib、logs、temp、webapps、work、wtpwebapps、LICENSE、NOTICE、RELEASE-NOTES、RUNNING.txt。
主要是定义了如何将Jar包打包成Docker镜像，对DockerFile不了解的朋友可以看下《使用Dockerfile为SpringBoot应用构建Docker镜像》，具体内容如下。
本教程作者是「小灯光环」，作者简介：全栈开发工程师，CSDN博客专家，CSDN论坛 Java Web/Java EE版主，热爱技术，乐于分享，在分布式Web开发/Android开发/微信小程序开发/Linux系统优化等方面均有一定经验，欢迎点击文章底部的阅读原文关注作者博客。
以下将介绍以下开发完MapReduce程序后，提交运行的几个模式。 本地模型运行 在windows的eclipse里面直接运行main方法，就会将job提交给本地执行器localjobrunner执行 ----输入输出数据可以放在本地路径下（c:/wc/srcdata/） ----输入输出数据也可以放在hdfs中(hdfs://itunic:9000/wc/srcdata) 在linux的eclipse里面直接运行main方法，但是不要添加yarn相关的配置，也会提交给localjobrunner执行
在Maven世界中，任何一个依赖、插件或者项目构建的输出，都可以称为构件。得益于坐标机制，任何Maven项目使用任何一个构件的方式都是完全相同的。在此基础上，Maven可以在某个位置统一存储所有Maven项目共享的构件，这个统一的位置就是仓库。
添加Main-Class属性，打开META-INF/MANIFEST.MF有如下内容：
对于小白而言，搭建测试环境首选的有tpshop、shopxo、iwebshop这类php开发的电商网站，虽然部署方便，但是却跟企业实际的架构相差太远，不利于我们更好的了解和学习软件测试。
导语 Java从诞生至今已经走过了26年，在这26年的时间里，Java应用从未停下脚步，从最开始的单机版到web应用再到现在的微服务应用，依靠其强大的生态，它仍然占据着当今语言之争的“天下第一”的宝座。但在如今的云原生serverless时代，Java应用却遭遇到了前所未有的挑战。 作者简介 于善游 腾讯云后台研发工程师 专注于微服务、云原生、Serverless领域，在微服务方向具有丰富的经验。 在云原生时代，云原生技术利用各种公有云、私有云和混合云等新型动态环境，构建和运行可弹性扩展的应用。而我们应用
随着版本的迭代，业务的增加，QQ音乐apk的大小已经超过25M，其中res目录占用的大小超过5.5M，所以提出了对安装包进行瘦身的技术需求。
从刚开始接触Mxnet这个框架到现在已经大概两年了。MXNet最吸引我的地方就是它提供了
如下图，在局域网部署了Nexus之后，可以缓存中央仓库的jar，开发的二方库发布到Nexus上，局域网内的其他人也可以从Nexus下载这些二方库使用：
ClassFinal是一款java class文件安全加密工具，支持直接加密jar包或war包，无需修改任何项目代码，兼容spring-framework；可避免源码泄漏或字节码被反编译。
本文介绍了如何利用Docker构建pinpoint编译环境，通过使用Dockerfile和Docker Compose文件实现了一个完整的编译环境。首先介绍了Dockerfile和Docker Compose文件的基本用法，然后详细描述了pinpoint编译环境的构建过程。在构建过程中，使用了yum和curl等命令行工具，并使用了Maven和Java等软件包管理工具。通过使用Docker构建编译环境，可以简化pinpoint的编译过程，提高编译效率，并可以保证编译环境的一致性和稳定性。同时，还可以将构建好的镜像上传到Docker Hub等容器管理平台，方便其他用户使用。
参考 https://www.cnblogs.com/whgk/p/7112560.html
实际项目中可能会有需要读取类路径下面的配置文件中的内容的需求，由于springboot项目打包的是jar包，通过文件读取获取流的方式开发的时候没有问题，但是上到linux服务器上就有问题了，对于这个问题记录一下处理的方式
领取专属 10元无门槛券
手把手带您无忧上云
云服务器
ICP备案
实时音视频
云直播
对象存储
