张映 发表于 2018-12-28

分类目录: hadoop/spark/scala

配置hadoop集群,主要配置core-site.xml,hdfs-site.xml,mapred-site.xml yarn-site.xml,hadoop版本不同,这4个文件的配置可会有差异。以下是收集整理的参数,紧供参考

阅读全文>>

张映 发表于 2018-12-28

分类目录: hadoop/spark/scala

前面写过一篇hadoop集群安装配置的文章。只用了二台机器,假如机器快满了,就需要在加机器。hadoop加节点,不需要重启hadoop服务。

阅读全文>>

张映 发表于 2018-12-27

分类目录: hadoop/spark/scala

hadoop的集群先搞二台机器,一台管理机,一台node机,为什么呢。因为钱,机子也要钱。数据量是逐步增长起来的。如果一台node不能满足需求了,在增加node节点到集群。

在开始安装配置前,最好把该篇文章看上几遍,理顺了,在开始。特别是我踩过的坑。

阅读全文>>

张映 发表于 2018-12-24

分类目录: nodejs/vue/js/jquery

eslint是一个javascript代码静态检查工具,可以检查javascript的语法错误,提示潜在的bug,可以有效提高代码质量,维持前端团队高度一致的编码风格。ESLint不但提供一些默认的规则,也提供用户自定义规则来约束所写的javascript代码。

阅读全文>>

张映 发表于 2018-12-20

分类目录: nodejs/vue/js/jquery

前面写过一次,用vscode调试nodejs,但是vscode升级等问题,有可能会导致debug失效。如果用chrome devtool来调试nodejs,就可以避免这些问题。

阅读全文>>

张映 发表于 2018-12-18

分类目录: 技术其他

玩了一下图片隐藏水印,需要用到opencv3,但是mac用这个玩意稍微有点麻烦

阅读全文>>

张映 发表于 2018-12-18

分类目录: java/android

maven的默认镜像,有的时候,下载jar包的非常的慢。换了阿里镜像速度快了很多。

阅读全文>>

张映 发表于 2018-12-13

分类目录: linux

gitlab的默认备份路径是/var/opt/gitlab/backups/,可以通过gitlab.rb来修改这个配置路径,gitlab_rails['backup_path'] = "/data/pgsql_bak"

阅读全文>>

张映 发表于 2018-12-13

分类目录: 服务器相关

推荐几款redmine比较好用的插件

redmine_agile,敏捷开发
redmine_stats,任务统计
redmine_work_time,工时统计
redmine_wysiwyg_editor,编辑器(不带上传)
redmine_ckeditor,编辑器(带上传)

阅读全文>>

张映 发表于 2018-12-11

分类目录: 服务器相关

邮箱配置基本上都不差多,分为有证书和无证书二种。qq企业邮箱是有证书的。

阅读全文>>