lvjun106
lvjun106 · 共 188 篇文章
实现memcached分布式
转:https://blog.csdn.net/cutesource/article/details/5848253 memcached是应用最广的开源cache产品,它本身不提供分布式的解决方案,我猜想一方面它想尽量保持产品简单高效,另一方面cache的key-value的特性使得让memcached分布式起来比较简单。memcached的分布式主要在于客户端,通过客户端的路由处理来搭建memcached集群环境,因此在服务端,memcached集群环境实际上就是一个个memcached服务器的堆积品,环境的搭建比较简单。下面从客户端做路由和服务端集群环境搭建两方面来谈如何让memcach…
2018-11-27 10:44 · memcached · 评论(0)
大数据学习第一课 Hadoop完全安装教程
前言 Hadoop在大数据技术体系中的地位至关重要,Hadoop是大数据技术的基础,对Hadoop基础知识的掌握的扎实程度,会决定在大数据技术道路上走多远。 这是一篇入门文章,Hadoop的学习方法很多,网上也有很多学习路线图。本文的思路是:以安装部署Apache Hadoop2.x版本为主线,来介绍Hadoop2.x的架构组成、各模块协同工作原理、技术细节。安装不是目的,通过安装认识Hadoop才是目的。 本文分为五个部分、十三节、四十九步。 第一部分:Linux环境安装 Hadoop是运行在Linux,虽然借助工具也可以运行在Windows上,但是建议还是运行在Linux系统上,第一部分…
2018-11-13 09:24 · 大数据 · 评论(0)
分布式事务解决方案框架(LCN)
事务概念 事务特性(ACID) 原子性(A) 所谓的原子性就是说,在整个事务中的所有操作,要么全部完成,要么全部不做,没有中间状态。对于事务在执行中发生错误,所有的操作都会被回滚,整个事务就像从没被执行过一样。 一致性(C) 事务的执行必须保证系统的一致性,就拿转账为例,A有500元,B有300元,如果在一个事务里A成功转给B50元,那么不管并发多少,不管发生什么,只要事务执行成功了,那么最后A账户一定是450元,B账户一定是350元。 隔离性(I) 所谓的隔离性就是说,事务与事务之间不会互相影响,一个事务的中间状态不会被其他事务感知。 持久性(D) 所谓的持久性,就是说一单事务完成了,那么…
2018-11-05 15:06 · 评论(0)
解析Tomcat内部结构和请求过程
Tomcat Tomcat是一个JSP/Servlet容器。其作为Servlet容器,有三种工作模式:独立的Servlet容器、进程内的Servlet容器和进程外的Servlet容器。 Tomcat的组织结构 Tomcat是一个基于组件的服务器,它的构成组件都是可配置的,其中最外层的是Catalina servlet容器,其他组件按照一定的格式要求配置在这个顶层容器中。 Tomcat的各种组件都是在Tomcat安装目录下的/conf/server.xml文件中配置的。 由Server.xml的结构看Tomcat的体系结构 <Server> //顶层类元素,可以包括多个Service <Ser…
2018-11-05 14:31 · TOMCAT · 评论(0)
前端代码的优化及部署
文章出自“张云龙”博客 这是一个非常有趣的 非主流前端领域,这个领域要探索的是如何用工程手段解决前端开发和部署优化的综合问题,入行到现在一直在学习和实践中。 在我的印象中,facebook是这个领域的鼻祖,有兴趣、有梯子的同学可以去看看facebook的页面源代码,体会一下什么叫工程化。 接下来,我想从原理展开讲述,多图,较长,希望能有耐心看完。 让我们返璞归真,从原始的前端开发讲起。上图是一个“可爱”的index.html页面和它的样式文件a.css,用文本编辑器写代码,无需编译,本地预览,确认OK,丢到服务器,等待用户访问。前端就是这么简单,好好玩啊,门槛好低啊,分分钟学会有木有! 然后…
2018-11-05 10:21 · WEB开发 · 评论(0)
Java的clone():深复制与浅复制
Java中要想自定义类的对象可以被复制,自定义类就必须实现Cloneable中的clone()方法,如下: public class Student implements Cloneable { private String name; private int age; private Professor professor; public String getName() { return name; } public void setName(String name) { this.name = name; } public int getAge() { return age; } pu…
2018-09-05 17:27 · JAVA · 评论(0)
分布式文件系统 - FastDFS
我们在使用FastDFS部署一个分布式文件系统的时候,通过FastDFS的客户端API来进行文件的上传、下载、删除等操作。同时通过FastDFS的HTTP服务器来提供HTTP服务。但是FastDFS的HTTP服务较为简单,无法提供负载均衡等高性能的服务,所以FastDFS的开发者——淘宝的架构师余庆同学,为我们提供了Nginx上使用的FastDFS模块(也可以叫FastDFS的Nginx模块)。其使用非常简单。 FastDFS通过Tracker服务器,将文件放在Storage服务器存储,但是同组之间的服务器需要复制文件,有延迟的问题.假设Tracker服务器将文件上传到了192.168.1.…
2018-08-06 10:07 · FastDFS · 评论(0)
微服务中的舱壁模式
舱壁模式(Bulkhead)隔离了每个工作负载或服务的关键资源,如连接池、内存和CPU。 使用舱壁避免了单个工作负载(或服务)消耗掉所有资源,从而导致其他服务出现故障的场景。 这种模式主要是通过防止由一个服务引起的级联故障来增加系统的弹性。 工业中使用舱壁将船舶划分为几个部分,以便在船体破坏的情况下,可以将船舶各个部件密封起来。 舱壁的概念在软件开发中可以被应用在隔离资源上。 通过应用舱壁模式,我们可以保护有限的资源不被耗尽。例如,对于一个有连接数限制的数据库实例来说,如果我们有两种连接它的操作,我们采用可以采用两个连接池的方式进行连接,来代替仅采用一个共享连接池的方式。由于这种客户端与资源…
2018-07-23 16:51 · 架构 · 评论(0)
关于架构优化和设计,架构师必须知道的事情
近几年来随着互联网的飞速发展,新的架构实践方式不断涌现,但是有一件事情是永恒不变的,那就是-“架构之道”;关于如何设计出灵活、高可用性以及能够快速适应变化的系统架构,我们依旧还有很大的发挥空间。本文会介绍关于如何构建前沿的、易维护的、安全的架构的几个要点,同时你也可以把它当作系统设计的准则或者用它来验证现有的架构是否合理。 就像我们经常所说的:没有最好的架构,只有最合适的架构。一个好的架构师,可以根据具体的需求、所拥有的资源等因素综合考虑而设计出最优的架构方案。特别是现在,业务的飞速变化、数据无处不在等这些因素的影响下,技术和框架也需要在变化的过程中不断地打磨和提升以适应新的业务需要。可能当…
2018-07-23 16:51 · 架构 · 评论(0)
Kettle 集群(cluster)在多个服务器(windows、linux)上并发执行
【转:https://blog.csdn.net/lixuemei504/article/details/38271145】 目录 一、 Kettle的部署...3 二、 服务器介绍...3 三、 carte相关配置文件说明...3 四、 carte服务开启...4 五、 在kettle图形界面中对集群进行设定...5 六、 基于kettle集群模式对数据库表进行排序...6 1、 创建数据库连接...6 2、 创建表输入...7 3、 使用排序记录对数据库表中的数据进行排序处理。...8 七、 表输出...9 八、 执行转换...9 九、 结果输出...10 关于kettle集群在单机上的…
2018-07-18 13:59 · kettle · 评论(0)
不怕出错,提高系统的健壮性
对每一个程序员而言,故障都是悬在头上的达摩克利斯之剑,都唯恐避之不及,如何避免故障是每一个程序员都在苦苦追寻希望解决的问题。对于这一问题,大家都可以从需求分析、架构设计 、代码编写、测试、code review、上线、线上服务运维等各个视角给出自己的答案。本人结合自己两年有限的互联网后端工作经验,从某几个视角谈谈自己对这一问题的理解,不足之处,望大家多多指出。 我们大部分服务都是如下的结构,既要给使用方使用,又依赖于他人提供的第三方服务,中间又穿插了各种业务、算法、数据等逻辑,这里面每一块都可能是故障的来源。如何避免故障?我用一句话概括,“ 怀疑第三方,防备使用方,做好自己 ”。 1 怀疑第…
2018-05-29 13:44 · 架构 · 评论(0)
软件项目量化管理(CMMI高成熟度)实践经验谈——之项目管理过程监督与控制篇
【转:http://blog.csdn.net/xiaoyw71/article/details/26966237】 2、项目监督与控制 项目监控 是围绕项目实施计划,跟踪进度、成本、质量、资源,掌握各项工作现状,以便进行适当的资源调配和进度调整,确定活动的开始和结束时间,并记录实际的进度情况,在一定情况下进行路径、风险、决策、度量、量化管理等方面的分析。在实施项目的过程中,要随时对项目进行跟踪监控,以使项目按计划规定的进度、技术指标完成,并提供现阶段工作的反馈信息,以利后续阶段的顺利开展和整个项目的完成。使管理者能在项目进展明显偏离项目计划时采取有效措施。 2.1、项目角色职责 项目监督与…
2018-03-06 14:36 · 项目管理 · 评论(0)
软件项目量化管理(CMMI高成熟度)实践经验谈——之项目管理过程策划篇
【转:http://blog.csdn.net/xiaoyw71/article/details/23618493】 二、项目管理过程 软件开发项目管理过程,从项目全视角来看,分为售前、售中、售后等三个大的阶段,本文所谈的是售中阶段项目管理过程,在售中阶段,项目管理主要分项目策划、项目跟踪监控、项目结项归档等三部分,相关活动包括销售活动、采购活动、资源活动、支持活动等。 1、项目策划 项目策划是一种具有建设性、逻辑性的思维的过程,在此过程中,总的目的就是把所有可能影响决策的决定总结起来,对未来起到指导和控制作用,最终借以达到方案目标。它是一门新兴的策划学,以具体的项目活动为对象,体现一定的功…
2018-03-06 14:24 · 项目管理 · 评论(0)
【转】软件项目量化管理(CMMI高成熟度)实践经验谈——之概述篇
【转:http://blog.csdn.net/xiaoyw71/article/details/18665975】 目录 一、前言 1、写在开始之前 2、我所认识的CMMI5级 3、试点项目概况 二、项目管理过程 1、项目策划 2、项目监督与控制 3、决策分析与解决 4、度量与分析 5、其他 三、量化项目管理 1、量化管理技术 2、量化管理条件 3、量化管理过程及注意事项 4、根因分析 5、量化管理中的问题 四、经验总结、交流 1、实际工作经验 2、量化管理总结 3、讨论 一、前言 1、写在开始之前 在软件项目管理中,总是把估计值当作承诺,无论是对自已或对同事,都会造成不必要的焦虑。为避免…
2018-03-06 13:50 · 项目管理 · 评论(0)
JSONP? Spring MVC 实现跨域资源 CORS 请求
【转:http://www.cnblogs.com/mafly/p/cors.html】 什么是 CORS ? 跨来源资源共享(Cross-origin resource sharing)是一份浏览器技术的规范,提供了 Web 服务从不同域传来沙盒脚本的方法,以避开浏览器的同源策略,是 JSONP 模式的现代版。与 JSONP 不同,CORS 除了 GET 要求方法以外也支持其他的 HTTP 要求。用 CORS 可以让网页设计师用一般的 XMLHttpRequest,这种方式的错误处理比 JSONP 要来的好。 以上内容摘自维基百科 用人话来解释就是:JavaScript 或 Cookies…
2017-02-07 13:59 · SPRING MVC · 评论(0)