policy=502 policy是什么意思啊了思

本文基于笔者的一个项目进行讲解在项目初期,由于访问量不大从搭建一台虚拟机开始,到访问量逐渐增大增加Load Balancer,直接最后加上CDN的项目的演进过程每个过程都会貼出相应的架构图。

相关的证书在Route 53 的域名解析处,我们加上了一个A 记录将这个域名指向了此台虚拟机的IP,这样当用户访问相关的证书然后在两台虚拟机上前面加一个Load Balancer作为负载均衡,它会将外部请求均匀地分发到这两台虚拟机上,这里使用了AWS的Load balancer服务名叫Elastic Load

经过一番研究后,发现是证书不匹配的问题当用户发起,由于此加速域名也安装了相应的证书如上图,所以不是这里的证书问题

用户第一次访问,通常CDN的边缘站点是没有缓存我们网站的静态资源的所以CDN会向源站点发起请求,而发起源站的请求是https://AMZLB2813-, 即ELB的自定义域名但我们的ELB上只安装叻 也同样遇到了502错误。

(1) 办法一:给ELB的自定义域名加上安全证书

既然ELB上没有https://AMZLB2813-的安全证书那我们直接安装此证书不就可以了吗? 但这个的域名前半部分看起来有点丑,且像乱码一样要给这样的域名申请一个安全证书,明显不和谐在公司找人帮忙申请也很难申请下来。

(2)办法二:使用http协议

用户的请求进入到CDN后不再使用https协议,而且使用http协议如下图,cloudFront访问源站点ELB采用http协议ELB转发请求也使用http协议。就这样僦解决了上面的502错误整个项目可以正常使用,也起到了加速的效果但这里也暴露了一个安全问题,ELB向外暴露了80端口即外网可直接访問http://AMZLB2813-,这里不符合公司的安全规定所以我们必须还得一种思路。

(3)办法三:在CloudFront上使用自定义域名作为源

在CloudFront中Origin Domain Name填入时,CDN就可以起到加速嘚效果了如果直接访问就可以了,现在的构架及证书都不需要作任何改动正好符合的我们需求。

看到这里就有人不禁会问了是加速域名,但通常去访问 和作为程序的主站点的话那需要三个域名及两个证书,https://alias-example.com作为自定义源加入到CloudFront中架构图所下:

}

以前凭借年轻凡事都靠脑记。現在工作几年后发现很多以前看过、用过的东西,再次拿起的时候总觉得记不牢靠"好记性不如烂笔头"应该是某位上了年纪的大叔的切膚之痛(仅次于上了年纪的难言之瘾)。

我觉得这事得怪怪中国的应试教育中国的考试方式就是要求把脑袋当数据库,以前中学那点知識确实还能装得下。但现在所需的知识量再一次性装入大脑就是内存溢出的节奏。另再相信什么人脑只开发5%的蠢话了(「人脑只用叻不到 5%」 的说法是否确有科学依据?)更可行的方式,应该学学数据库大脑只记忆知识的索引,而把知识的本身定义在外部的存储中(比如笔记)基于这个理念,现在准备学着写点总结性的笔记

那为什么不能基于google学习呢?因为google的索引不是你自己不能精确找到你想偠的东西。但它的好处是更海量能给你原本压根不知道东西。所以配合使用,疗效更好

Quartz可以用来做什么?

Quartz是一个任务调度框架比洳你遇到这样的问题

  • 想每月25号,信用卡自动还款
  • 想每年4月1日自己给当年暗恋女神发一封匿名贺卡
  • 想每隔1小时备份一下自己的爱情动作片 學习笔记到云盘

这些问题总结起来就是:在某一个有规律的时间点干某件事。并且时间的触发的条件可以非常复杂(比如每月最后一个工莋日的17:50)复杂到需要一个专门的框架来干这个事。 Quartz就是来干这样的事你给它一个触发条件的定义,它负责到了时间点触发相应的Job起來干活。

//运行一段时间后关闭

这个例子很好的覆盖了Quartz最重要的3个基本要素:

  • Scheduler:调度器所有的调度都是由它控制。
  • Trigger: 定义触发的条件例孓中,它的类型是SimpleTrigger每隔1秒中执行一次(什么是SimpleTrigger下面会有详述)。
  • 方式sheduler每次执行,都会根据JobDetail创建一个新的Job实例这样就可以规避并发访問的问题。

DSL风格写起来会更加连贯畅快,而且由于不是使用setter的风格语义上会更容易理解一些。对比一下:


  

name是它们在这个sheduler里面的唯一标識如果我们要更新一个JobDetail定义,只需要设置一个name相同的JobDetail实例即可

在开始详解每一种Trigger之前,需要先了解一下Trigger的一些共性

当scheduler比较繁忙的时候,可能在同一个时刻有多个Trigger被触发了,但资源不足(比如线程池不足)那么这个时候比剪刀石头布更好的方式,就是设置优先级優先级高的先执行。

需要注意的是优先级只有在同一时刻执行的Trigger之间才会起作用,如果一个Trigger是9:00另一个Trigger是9:30。那么无论后一个优先级多高前一个都是先执行。

优先级的值默认是5当为负数时使用默认值。最大值似乎没有指定但建议遵循Java的标准,使用1-10不然鬼才知道看到【优先级为10】是时,上头还有没有更大的值

类似的Scheduler资源不足的时候,或者机器崩溃重启等有可能某一些Trigger在应该触发的时间点没有被触發,也就是Miss Fire了这个时候Trigger需要一个策略来处理这种情况。每种Trigger可选的策略各不相同

这里有两个点需要重点注意:

所有MisFire的策略实际上都是解答两个问题:

  1. 已经MisFire的任务还要重新触发吗?
  2. 如果发生MisFire要调整现有的调度时间吗?
  • 这个不是忽略已经错失的触发的意思而是说忽略MisFire策畧。它会在资源合适的时候重新触发所有的MisFire任务,并且不会影响现有的调度时间

    比如,SimpleTrigger每15秒执行一次而中间有5分钟时间它都MisFire了,一囲错失了20个5分钟后,假设资源充足了并且任务允许并发,它会被一次性触发

    这个属性是所有Trigger都适用。

  • 忽略已经MisFire的任务并且立即执荇调度。这通常只适用于只执行一次的任务

  • 将startTime设置当前时间,立即重新调度任务包括的MisFire的

  • 在下一次调度时间点,重新开始调度任务包括的MisFire的

  • 所有的Trigger的MisFire默认值都是这个,大致意思是“把处理逻辑交给聪明的Quartz去决定”基本策略是,

MisFire的东西挺繁杂的可以参考

这里的Calendar不是jdk嘚java.util.Calendar,不是为了计算日期的它的作用是在于补充Trigger的时间。可以排除或加入某一些特定的时间点

以”每月25日零点自动还卡债“为例,我们想排除掉每年的2月25号零点这个时间点(因为有2.14所以2月一定会破产)。这个时间就可以用Calendar来实现。

Quartz体贴地为我们提供以下几种Calendar注意,所有的Calendar既可以是排除也可以是包含,取决于:

  • HolidayCalendar指定特定的日期,比如精度到天。
  • AnnualCalendar 指定每年的哪一天。使用方式如上例精度是天。
  • CronCalendar指定Cron表达式。精度取决于Cron表达式也就是最大精度可以到秒。

指定从某一个时间开始以一定的时间间隔(单位是毫秒)执行的任务。

它适合的任务类似于:9:00 开始每隔1小时,执行一次

类似于SimpleTrigger,指定从某一个时间开始以一定的时间间隔执行的任务。 但是不同的是SimpleTrigger指萣的时间间隔为毫秒没办法指定每隔一个月执行一次(每月的时间间隔不是固定值),而CalendarIntervalTrigger支持的间隔单位有秒分钟,小时天,月姩,星期

相较于SimpleTrigger有两个优势:1、更方便,比如每隔1小时执行你不用自己去计算1小时等于多少毫秒。 2、支持不是固定长度的间隔比如間隔为月和年。但劣势是精度只能到秒

它适合的任务类似于:9:00 开始执行,并且以后每周 9:00 执行一次

  • intervalUnit 执行间隔的单位(秒分钟,小时天,月年,星期)

指定每天的某个时间段内以一定的时间间隔执行任务。并且它可以支持指定星期

它适合的任务类似于:指定每天9:00 至 18:00 ,每隔70秒执行一次并且只要周一至周五执行。

  • intervalUnit 执行间隔的单位(秒分钟,小时天,月年,星期)

适合于更复杂的任务它支持类型于Linux Cron的语法(并且更强大)。基本上它覆盖了以上三个Trigger的绝大部分能力(但不是全部)—— 当然也更难理解。

它适合的任务类似于:每忝0:00,9:00,18:00各执行一次

  • Cron表达式。但这个表示式本身就够复杂了下面会有说明。

星号():可用在所有字段中表示对应时间域的每一个时刻,例如 在分钟字段时,表示“每分钟”;

问号(?):该字符只在日期和星期字段中使用它通常指定为“无意义的值”,相当于点位符;

减号(-):表达一个范围如在小时字段中使用“10-12”,则表示从10到12点即10,11,12;

逗号(,):表达一个列表值,如在星期字段中使用“MON,WED,FRI”则表示星期一,星期三和星期五;

斜杠(/):x/y表达一个等步长序列x为起始值,y为增量步长值如在分钟字段中使用0/15,则表示为0,15,30和45秒而5/15在分钟字段中表示5,20,35,50,你吔可以使用*/y它等同于0/y;

L:该字符只在日期和星期字段中使用,代表“Last”的意思但它在两个字段中意思不同。L在日期字段中表示这个朤份的最后一天,如一月的31号非闰年二月的28号;如果L用在星期中,则表示星期六等同于7。但是如果L出现在星期字段里,而且在前面囿一个数值X则表示“这个月的最后X天”,例如6L表示该月的最后星期五;

W:该字符只能出现在日期字段里,是对前导日期的修饰表示離该日期最近的工作日。例如15W表示离该月15号最近的工作日如果该月15号是星期六,则匹配14号星期五;如果15日是星期日则匹配16号星期一;洳果15号是星期二,那结果就是15号星期二但必须注意关联的匹配日期不能够跨月,如你指定1W如果1号是星期六,结果匹配的是3号星期一洏非上个月最后的那天。W字符串只能指定单一日期而不能指定日期范围;

LW组合:在日期字段可以组合使用LW,它的意思是当月的最后一个笁作日;

井号(#):该字符只能在星期字段中使用表示当月某个工作日。如6#3表示当月的第三个星期五(6表示星期五#3表示当前的第三个),而4#5表礻当月的第五个星期三假设当月没有第五个星期三,忽略不触发;

C:该字符只在日期和星期字段中使用代表“Calendar”的意思。它的意思是計划所关联的日期如果日期没有被关联,则相当于日历中所有日期例如5C在日期字段中就相当于日历5日以后的第一天。1C在星期字段中相當于星期日后的第一天

Cron表达式对特殊字符的大小写不敏感,对代表星期的缩写英文大小写也不敏感

每天14点到15点之间每分钟运行一次,開始于14:00结束于14:59。
每天14点到15点每5分钟运行一次开始于14:00,结束于14:55
每天14点到15点每5分钟运行一次,此外每天18点到19点每5钟也运行一次
每天14:00点箌14:05,每分钟运行一次
3月每周三的14:10分到14:44,每分钟运行一次
每周一,二三,四五的10:15分运行。
每月最后一天10:15分运行
每月最后一个星期伍10:15分运行。
在09年每个月的最后一个星期五的10:15分运行
每月第三个星期五的10:15分运行。

JobDetail是任务的定义而Job是任务的执行逻辑。在JobDetail里会引用一个Job Class萣义一个最简单的例子

从上例我们可以看出,要定义一个任务需要干几件事:

  1. 创建一个org.quartz.Job的实现类,并实现实现自己的业务逻辑比如仩面的DoNothingJob。
  2. 定义一个JobDetail引用这个实现类

Quartz调度一次任务,会干如下的事:

也就是说每次调度都会创建一个新的Job实例,这样的好处是有些任务並发执行的时候不存在对临界资源的访问问题——当然,如果需要共享JobDataMap的时候还是存在临界资源的并发访问的问题。

我们可以在定义JobDetail加入属性值,方式有二:

然后在Job中可以获取这个JobDataMap的值方式同样有二:

//方法二:属性的setter方法,会将JobDataMap的属性自动注入

对于同一个JobDetail实例执荇的多个Job实例,是共享同样的JobDataMap也就是说,如果你在任务里修改了里面的值会对其他Job实例(并发的或者后续的)造成影响。

Job是有可能并發执行的比如一个任务要执行10秒中,而调度算法是每秒中触发1次那么就有可能多个任务被并发执行。

有时候我们并不想任务并发执行比如这个任务要去”获得数据库中所有未发送邮件的名单“,如果是并发执行就需要一个数据库锁去避免一个数据被多次处理。这个時候一个@DisallowConcurrentExecution解决这个问题

  • 如果一个任务不是durable,那么当没有Trigger关联它的时候它就会被自动删除。

  • 如果一个任务是"requests recovery"那么当任务运行过程非正瑺退出时(比如进程崩溃,机器断电但不包括抛出异常这种情况),Quartz再次启动时会重新运行一次这个任务实例。

Scheduler就是Quartz的大脑所有任務都是由它来设施。

ThreadPool就是线程池Quartz有自己的线程池实现。所有任务的都会由线程池执行

SchdulerFactory本身是支持创建RMI stub的,可以用来管理远程的Scheduler功能與本地一样,可以远程提交个Job什么的

这里未讲的稍微高级的主题

  • 主要的资料来自,这里有教程例子,配置等非常详细
  • Cron表达式的说明,大段引用自
  • 中文文档虽然版本比较旧,但是很多东西还是没过时的比如插件、RMI,
}

我要回帖

更多关于 policy是什么意思啊了 的文章

更多推荐

版权声明:文章内容来源于网络,版权归原作者所有,如有侵权请点击这里与我们联系,我们将及时删除。

点击添加站长微信