TimeZone计算时区及夏令时处理，可用于爬虫

背景&＃xff1a;爬虫需要抓取不同国家的网站的数据&＃xff0c;并且都是在半夜零点&＃xff0c;从cron job启动&＃xff0c;服务器所设置时间是UTC&＃43;0的时间&＃xff0c;数据库存入的时间也是UTC&＃43;0的时间&＃xff0c;假设控制时间点的字段为runAfter。

考虑到时区不同&＃xff0c;我们可以去判断国家所在的时区提前去跑&＃xff0c;如美国洛杉矶,UTC-7&＃xff0c;那runAfter在服务器的前一天17:00就可以抓取美国洛杉矶网站的数据&＃xff0c;因为这个时候正是当地的凌晨。

再如&＃xff0c;瑞士&＃xff0c;UTC&＃43;2(夏令时)&＃xff0c;我们可以让程序在服务器的02:00时间去跑&＃xff0c;抓取瑞士当地网站的数据。

程序可以提权跑完&＃xff0c;并且不影响所爬网站的本身性能。

使用TimeZone来处理夏令时&＃xff0c;下面是java代码

package test;import java.util.Date;
import java.util.ResourceBundle;
import java.util.TimeZone;public class TimeZoneHandle {public static ResourceBundle rb &＃61; ResourceBundle.getBundle("timezone");/** use getOffset to handle the daylight saving time. the new Date() give us* the UTC&＃43;0 date,and it is also the server time.*/public Date getLocalTime(Job job) {Date now &＃61; new Date();String country &＃61; job.getCountry();// if the configure file contain the country,we will compute the local// time.if (rb.containsKey(country)) {int crawlerCountryoffset &＃61; getCrawlerCountryoffset(country, now);int serverZoneOffset &＃61; TimeZone.getDefault().getOffset(now.getTime());Date localTime &＃61; new Date(now.getTime() - (serverZoneOffset - crawlerCountryoffset));return localTime;} else {return now;}}private int getCrawlerCountryoffset(String country, Date date) {String timezone_ID &＃61; rb.getString(country);int offset &＃61; TimeZone.getTimeZone(timezone_ID).getOffset(date.getTime());return offset;}class Job {// other fields like Job id// ...String country;public String getCountry() {return country;}public void setCountry(String country) {this.country &＃61; country;}}public static void main(String[] argc) {TimeZoneHandle timezonehandle&＃61;new TimeZoneHandle();Job job&＃61;timezonehandle.new Job();job.setCountry("SE");Date d&＃61; timezonehandle.getLocalTime( job);System.out.println(d);}
}

AT&＃61; Europe/Vienna
BE&＃61; Europe/Brussels
BR&＃61; Brazil/East
CA&＃61; Canada/Eastern
CH&＃61;
CN&＃61;
DE&＃61; Europe/Berlin
DK&＃61; Europe/Copenhagen
ES&＃61;
FI&＃61;
FR&＃61; Europe/Paris
GR&＃61;
IE&＃61;
IN&＃61;
IT&＃61;
LU&＃61;
NL&＃61;
NO&＃61;
PT&＃61;
SE&＃61; Europe/Stockholm
UK&＃61; Europe/London
US&＃61;

1.

java.util.Date代表一个时间点&＃xff0c;其值为距公元1970年1月1日 00:00:00的毫秒数。所以它是没有时区和Locale概念的。

java中通过如下形式取得当前时间点&＃xff1a;　

Date now &＃61; new Date(); //这个时间点与本地系统的时区无关,而正因为其与时区的无关性&＃xff0c;才使得我们的存储数据&＃xff08;时间&＃xff09;是一致的&＃xff08;时区一致性&＃xff09;。

2.

一般的我们将now存储于数据库中&＃xff0c;当我们需要展现数据时&＃xff0c;将now格式化成想要的格式&＃xff0c;如&＃xff1a;2011-12-04 21:22:24

而这个功能一般交由java.text.DateFormat来实现。例如&＃xff1a;

SimpleDateFormat sdf &＃61; new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");

String snow &＃61; sdf.format(now);

我们发现snow是带时间&＃xff08;如2011-12-04 21:22:24&＃xff09;的字符串&＃xff0c;那么 2011-12-04 21:22:24 这个时间是哪个时区的时间呢&＃xff1f;

默认情况下&＃xff0c;SimpleDateFormat 取得本地系统的时区&＃xff08;我的时区为GMT&＃43;8北京&＃xff09;&＃xff0c;然后按照 pattern&＃xff08;"yyyy-MM-dd HH:mm:ss"&＃xff09;格式化now&＃xff0c;

此时输出的就是 GMT&＃43;8 区的时间了。如果想支持国际化时间&＃xff0c;则先指定时区&＃xff0c;然后再格式化date数据。

例如&＃xff1a;

SimpleDateFormat sdf &＃61; new SimpleDateFormat("yyyy-MM-dd HH:mm:ss");

sdf.setTimeZone(TimeZone.getTimeZone("GMT&＃43;8"));

String snow &＃61; sdf.format(now); // snow &＃61; 2011-12-04 21:22:24

sdf.setTimeZone(TimeZone.getTimeZone("GMT&＃43;7"));

String snow2 &＃61; sdf.format(now); // snow2 &＃61; 2011-12-04 20:22:24 &＃xff08;可见&＃xff1a;东八区比东七区早一个小时&＃xff09;

另外&＃xff0c;你可以通过如下代码修改本地时区信息&＃xff1a;

TimeZone.setDefault(TimeZone.getTimeZone("GMT&＃43;8"));

在linux系统中&＃xff0c;通过如下命令可以得到当前时区

date -R

3.

java.util.Calendar类也代表时间点&＃xff0c;但它为Date的facade工具类&＃xff0c;提供了很多对时间点到年、月、日、时、分、秒、星期等的转换&＃xff08;计算&＃xff09;的方便方法。

Calendar calendar &＃61; Calendar.getInstance(timezone); 

Date d &＃61; calendar.getTime();

Calendar的计算也是基于时区的&＃xff0c;例如&＃xff1a;同一个date在不同时区下的小时数是不一样的。但是calendar.getTime();返回的date是没有时区的&＃xff0c;因为它是Date类型的。例如&＃xff1a;

 public static void main(String[] args) throws InterruptedException {

  Calendar calendar1 &＃61; Calendar.getInstance(TimeZone.getTimeZone("GMT&＃43;8"));

  Calendar calendar2 &＃61; Calendar.getInstance(TimeZone.getTimeZone("GMT&＃43;1"));

  System.out.println("Millis &＃61; " &＃43; calendar1.getTimeInMillis());

  System.out.println("Millis &＃61; " &＃43; calendar2.getTimeInMillis());

  System.out.println("hour &＃61; " &＃43; calendar1.get(Calendar.HOUR));

  System.out.println("hour &＃61; " &＃43; calendar2.get(Calendar.HOUR));

  System.out.println("date &＃61; " &＃43; calendar1.getTime());

  System.out.println("date &＃61; " &＃43; calendar2.getTime());

 }

输出&＃xff1a;

Millis &＃61; 1342497217103

Millis &＃61; 1342497217104

hour &＃61; 11

hour &＃61; 4

date &＃61; Tue Jul 17 11:53:37 CST 2012

date &＃61; Tue Jul 17 11:53:37 CST 2012

引用的网址&＃xff1a;

http://www.cnblogs.com/flying5/archive/2011/12/05/2276578.html

http://blog.163.com/haizai219&＃64;126/blog/static/444125552009101924912981/