更多问题,请加入QQ群:138712835
简答

pageCache

pageCache 1、什么是pageCache 页高速缓存是linux内核实现的一种主要磁盘缓存,它主要用来减少对磁盘的IO操作,具体地讲,是通过把磁盘中的数据缓存到物理内存中,把对磁盘的访问变为对物理内存的访问。 页高速缓存是由RAM中的物理页组成的,缓存中的每一页都对应着...

Hadoop

HDFS 大文件上传工具

HDFS 大文件上传工具 1、由来 在虚拟机中做的集群没有开通FTP服务,rz命令上传较大数据时会报错,就根据HDFS Java API 编写了个上传工具。 2、下载地址 下载 3、运行效果 4、代码实现 import org.apache.hadoop.conf.Conf...

网站开发

nginx+php 部署总结

一、安装nginx yum install nginx 如果报错信息如下:nginx: [emerg] socket() [::1]:80 failed (97: Address family not supported by protocol 删除default配置文件...

碎碎念

主动工作与跨部门协作

主动工作 前言 前几天接了姬风的电话,问我如何跨团队合作,当时回答的比较具象,今天总结下。 注意:这次要谈的主动工作并不是指你工作积极,认真,接受加班,而是任务的确认和任务状态的更新。 我尝试从处理一个任务的每个过程去总结,这些过程包括:接到任务,任务变更通知,主动推进、积极反馈...

Spark

Spark基础系列(6)-构建Maven项目(scala)

前提:需要在idea上安装scala插件(略) Scala的代码比Java代码简洁的多,看完这个例子,你或许或者小岳岳一样说道,咿,这么神奇! 1、创建maven项目(略) 2、导入pom依赖文件 <dependency> <groupId>o...

Spark

Spark基础系列(1)-Spark环境安装

本章内容 安装JDK 安装SCALA 安装Spark 第一部分:安装JDK 1、查看当前系统上是否安装了JDK     进入一个新的系统,一般来讲是没有安装过JDK的。但是有些linux的版本会默认安装openJDK。open JDK实在ora...