笑松小站

最近有一个实时的采集系统需求，目前的实现方式是用分布式定时任务来处理这一采集请求,希望有更多资源能够为任务分担压力，支持动态添加或者移除任务资源 从而达到提高采集效率，所以准备采用Mesos来做资源调度的工作。 因为自己硬件设备不够好的原因导致安装Mesos的时候出现了一个未知的问题 记录一下，以下是参考官方Getting Started的示例。 获取源码wget http://ww... 阅读全文...

2017年已经过了差不多六分之一 为了给自己制定了一个技术计划(算是小目标吧)，所以在这里引导一下， 当迷茫的时候可以look look!!! 后端 搜索相关 1、elasticsearch 2、lucene 3、solr 大数据相关 1、Hadoop 2、Spark 3、Storm 如果时间够多也研究一下 远程调用/网络相关 1、mina 2、netty ... 阅读全文...

MongoDB的复制集是一个主从复制模式 又具有故障转移的集群，任何成员都有可能是master， 当master挂掉用会很快的重新选举一个节点来充当master。 复制集中的组成主要成员 Primary 数据读写 master节点 Secondary 备份Primary的数据 默认设置下 不可读 不可写 arbiter 投票节点 此节点不会存数据 只参与投票 ，当primary节点出现异常挂掉之后 arbiter节点负责从secondary 节点中选举一个节点升级为Primary节点 其中可以设置Secondary节点可读，让Primary节点负责写，这些就实现了一个高效简单的读写分离。 阅读全文...

首先看一下ForkJoin相关的几个API ForkJoinPool 实现了forkjoin的线程池 ForkJoinWorkerThread forkjoin的线程 ForkJoinTask forkjoin任务的父类 这是一个抽象类 RecursiveAction 无返回结果的任务接口 RecursiveTask 有返回结果的任务接口 阅读全文...

以下是在3.4.1版本中 其他版本可能略有区别,mongo默认登录时在test数据中。 数据库相关操作登录到数据库 bin/mongo --port 27017 查看数据库列表 show dbs 选择使用哪个数据库 类似mysql中的use,使用use后 创建的table默认会在当前使用的数据中 use taoxs 查看当前使用的数据库使用db或者db.getName()一样的。 db db.getName() 阅读全文...

nginx是比较常用的高性能HTTP服务器和反向代理服务器，许多用户更是把做反向代理使用，常言道：好记性不如烂笔头 时间久了总是有些遗忘，本文记录一下源码编码安装以及常用模块的使用介绍。 阅读全文...

安装rabbitmq采用源码安装方式,首先去官网拉取源代码并解压,由于rabbitmq是采用erlang编写的 所以得先安装erlang环境,这里假设erlang环境已经安装好了。 wget http://www.rabbitmq.com/releases/rabbitmq-server/v3.4.0/rabbitmq-server-3.4.0.tar.gz tar -zxf rabbitmq-server-3.4.0.tar.gz 阅读全文...

Emmet是一个Web开发人员的工具包，可以大大提高你的HTML和CSS的工作流,这是在emmet官方文档中看到的第一句话,当然这句话也简单的概括了它拥有的魅力。 下面是在WebStorm中作一些应用。 阅读全文...

supervisor是一个制作守护进程的工具,用户可以在UNIX系统中监控、管理进程。常用于管理与某个用户或项目相关的进程。 安装 采用源码安装的方式,切换到3.1.3这个版本安装。 git clone https://github.com/Supervisor/supervisor.gitcd supervisor git checkout 3.1.3 python setup.py install 阅读全文...

文件的压缩/解压无论是在哪个操作系统上都比较常用 简答在这里演示一下。 zip zip会把文件打包为.zip格式的文件包，比如 abc.zip zip abc.zip testabc.txt 上面的shell会把testabc.txt压缩在当前目录下的abc.zip文件中 当然你也可以指定压缩到你指定的路径如 zip /opt/abc.zip testabc.txt unzip ... 阅读全文...