Fix Bug 1735
[kivitendo-erp.git] / SL / Locale.pm
1 #====================================================================
2 # LX-Office ERP
3 # Copyright (C) 2004
4 # Based on SQL-Ledger Version 2.1.9
5 # Web http://www.lx-office.org
6 #
7 #=====================================================================
8 # SQL-Ledger Accounting
9 # Copyright (C) 1998-2002
10 #
11 #  Author: Dieter Simader
12 #   Email: dsimader@sql-ledger.org
13 #     Web: http://www.sql-ledger.org
14 #
15 # Contributors: Thomas Bayen <bayen@gmx.de>
16 #               Antti Kaihola <akaihola@siba.fi>
17 #               Moritz Bunkus (tex code)
18 #
19 # This program is free software; you can redistribute it and/or modify
20 # it under the terms of the GNU General Public License as published by
21 # the Free Software Foundation; either version 2 of the License, or
22 # (at your option) any later version.
23 #
24 # This program is distributed in the hope that it will be useful,
25 # but WITHOUT ANY WARRANTY; without even the implied warranty of
26 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
27 # GNU General Public License for more details.
28 # You should have received a copy of the GNU General Public License
29 # along with this program; if not, write to the Free Software
30 # Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
31 #======================================================================
32 #
33 # Translations and number/date formatting
34 #
35 #======================================================================
36
37 package Locale;
38
39 use DateTime;
40 use Encode;
41 use List::Util qw(first);
42 use List::MoreUtils qw(any);
43
44 use SL::LXDebug;
45 use SL::Common;
46 use SL::Iconv;
47 use SL::Inifile;
48
49 use strict;
50
51 my %locales_by_country;
52
53 sub new {
54   $main::lxdebug->enter_sub();
55
56   my ($type, $country) = @_;
57
58   $country ||= $::lx_office_conf{system}->{language};
59   $country   =~ s|.*/||;
60   $country   =~ s|\.||g;
61
62   if (!$locales_by_country{$country}) {
63     my $self = {};
64     bless $self, $type;
65
66     $self->_init($country);
67
68     $locales_by_country{$country} = $self;
69   }
70
71   $main::lxdebug->leave_sub();
72
73   return $locales_by_country{$country}
74 }
75
76 sub _init {
77   my $self     = shift;
78   my $country  = shift;
79
80   $self->{charset}     = Common::DEFAULT_CHARSET;
81   $self->{countrycode} = $country;
82
83   if ($country && -d "locale/$country") {
84     local *IN;
85     if (open(IN, "<", "locale/$country/all")) {
86       my $code = join("", <IN>);
87       eval($code);
88       close(IN);
89     }
90
91     if (open IN, "<", "locale/$country/charset") {
92       $self->{charset} = <IN>;
93       close IN;
94
95       chomp $self->{charset};
96     }
97   }
98
99   my $db_charset            = $::lx_office_conf{system}->{dbcharset} || Common::DEFAULT_CHARSET;
100   $self->{is_utf8}          = (any { lc($::lx_office_conf{system}->{dbcharset} || '') eq $_ } qw(utf8 utf-8 unicode)) ? 1 : 0;
101
102   if ($self->{is_utf8}) {
103     binmode STDOUT, ":utf8";
104     binmode STDERR, ":utf8";
105   }
106
107   $self->{iconv}            = SL::Iconv->new($self->{charset}, $db_charset);
108   $self->{iconv_reverse}    = SL::Iconv->new($db_charset,      $self->{charset});
109   $self->{iconv_english}    = SL::Iconv->new('ASCII',          $db_charset);
110   $self->{iconv_iso8859}    = SL::Iconv->new('ISO-8859-15',    $db_charset);
111   $self->{iconv_to_iso8859} = SL::Iconv->new($db_charset,      'ISO-8859-15');
112   $self->{iconv_utf8}       = SL::Iconv->new('UTF-8',          $db_charset);
113
114   $self->_read_special_chars_file($country);
115
116   push @{ $self->{LONG_MONTH} },
117     ("January",   "February", "March",    "April",
118      "May ",      "June",     "July",     "August",
119      "September", "October",  "November", "December");
120   push @{ $self->{SHORT_MONTH} },
121     (qw(Jan Feb Mar Apr May Jun Jul Aug Sep Oct Nov Dec));
122 }
123
124 sub is_utf8 {
125   my $self   = shift;
126   my $handle = shift;
127   return $self->{is_utf8} && (!$handle || $handle->is_utf8);
128 }
129
130 sub _handle_markup {
131   my $self    = shift;
132   my $str     = shift;
133
134   my $escaped = 0;
135   my $new_str = '';
136
137   for (my $i = 0; $i < length $str; $i++) {
138     my $char = substr $str, $i, 1;
139
140     if ($escaped) {
141       if ($char eq 'n') {
142         $new_str .= "\n";
143
144       } elsif ($char eq 'r') {
145         $new_str .= "\r";
146
147       } elsif ($char eq 's') {
148         $new_str .= ' ';
149
150       } elsif ($char eq 'x') {
151         $new_str .= chr(hex(substr($str, $i + 1, 2)));
152         $i       += 2;
153
154       } else {
155         $new_str .= $char;
156       }
157
158       $escaped  = 0;
159
160     } elsif ($char eq '\\') {
161       $escaped  = 1;
162
163     } else {
164       $new_str .= $char;
165     }
166   }
167
168   return $new_str;
169 }
170
171 sub _read_special_chars_file {
172   my $self    = shift;
173   my $country = shift;
174
175   if (! -f "locale/$country/special_chars") {
176     $self->{special_chars_map} = {};
177     return;
178   }
179
180   $self->{special_chars_map} = Inifile->new("locale/$country/special_chars", 'verbatim' => 1);
181
182   foreach my $format (keys %{ $self->{special_chars_map} }) {
183     next if (($format eq 'FILE') || ($format eq 'ORDER') || (ref $self->{special_chars_map}->{$format} ne 'HASH'));
184
185     if ($format ne lc $format) {
186       $self->{special_chars_map}->{lc $format} = $self->{special_chars_map}->{$format};
187       delete $self->{special_chars_map}->{$format};
188       $format = lc $format;
189     }
190
191     my $scmap = $self->{special_chars_map}->{$format};
192     my $order = $self->{iconv}->convert($scmap->{order});
193     delete $scmap->{order};
194
195     foreach my $key (keys %{ $scmap }) {
196       $scmap->{$key} = $self->_handle_markup($self->{iconv}->convert($scmap->{$key}));
197
198       my $new_key    = $self->_handle_markup($self->{iconv}->convert($key));
199
200       if ($key ne $new_key) {
201         $scmap->{$new_key} = $scmap->{$key};
202         delete $scmap->{$key};
203       }
204     }
205
206     $self->{special_chars_map}->{"${format}-reverse"}          = { reverse %{ $scmap } };
207
208     $scmap->{order}                                            = [ map { $self->_handle_markup($_) } split m/\s+/, $order ];
209     $self->{special_chars_map}->{"${format}-reverse"}->{order} = [ grep { $_ } map { $scmap->{$_} } reverse @{ $scmap->{order} } ];
210   }
211 }
212
213 sub text {
214   my $self = shift;
215   my $text = shift;
216
217   if ($self->{texts}->{$text}) {
218     $text = $self->{iconv}->convert($self->{texts}->{$text});
219   } else {
220     $text = $self->{iconv_english}->convert($text);
221   }
222
223   if (@_) {
224     $text = Form->format_string($text, @_);
225   }
226
227   return $text;
228 }
229
230 sub lang_to_locale {
231   my ($self, $requested_lang) = @_;
232
233   my $requested_locale;
234   $requested_locale = 'de' if $requested_lang =~ m/^_(de|deu|ger)/i;
235   $requested_locale = 'fr' if $requested_lang =~ m/^_(en|uk|us|gr)/i;
236   $requested_locale = 'en' if $requested_lang =~ m/^_fr/i;
237   $requested_locale ||= 'de';
238
239   return $requested_locale;
240 }
241
242 sub findsub {
243   $main::lxdebug->enter_sub();
244
245   my ($self, $text) = @_;
246   my $text_rev      = lc $self->{iconv_reverse}->convert($text);
247   $text_rev         =~ s/[\s\-]+/_/g;
248
249   if (!$self->{texts_reverse}) {
250     $self->{texts_reverse} = { };
251     while (my ($original, $translation) = each %{ $self->{texts} }) {
252       $original    =  lc $original;
253       $original    =~ s/[^a-z0-9]/_/g;
254       $original    =~ s/_+/_/g;
255
256       $translation =  lc $translation;
257       $translation =~ s/[\s\-]+/_/g;
258
259       $self->{texts_reverse}->{$translation} ||= [ ];
260       push @{ $self->{texts_reverse}->{$translation} }, $original;
261     }
262   }
263
264   my $sub_name;
265   $sub_name   = first { defined(&{ "::${_}" }) } @{ $self->{texts_reverse}->{$text_rev} } if $self->{texts_reverse}->{$text_rev};
266   $sub_name ||= $text_rev if ($text_rev =~ m/^[a-z][a-z0-9_]+$/) && defined &{ "::${text_rev}" };
267
268   $main::form->error("$text not defined in locale/$self->{countrycode}/all") if !$sub_name;
269
270   $main::lxdebug->leave_sub();
271
272   return $sub_name;
273 }
274
275 sub date {
276   $main::lxdebug->enter_sub();
277
278   my ($self, $myconfig, $date, $longformat) = @_;
279
280   my $longdate  = "";
281   my $longmonth = ($longformat) ? 'LONG_MONTH' : 'SHORT_MONTH';
282
283   my ($spc, $yy, $mm, $dd);
284
285   if ($date) {
286
287     # get separator
288     $spc = $myconfig->{dateformat};
289     $spc =~ s/\w//g;
290     $spc = substr($spc, 1, 1);
291
292     if ($date =~ /\D/) {
293       if ($myconfig->{dateformat} =~ /^yy/) {
294         ($yy, $mm, $dd) = split /\D/, $date;
295       }
296       if ($myconfig->{dateformat} =~ /^mm/) {
297         ($mm, $dd, $yy) = split /\D/, $date;
298       }
299       if ($myconfig->{dateformat} =~ /^dd/) {
300         ($dd, $mm, $yy) = split /\D/, $date;
301       }
302     } else {
303       $date = substr($date, 2);
304       ($yy, $mm, $dd) = ($date =~ /(..)(..)(..)/);
305     }
306
307     $dd *= 1;
308     $mm--;
309     $yy = ($yy < 70) ? $yy + 2000 : $yy;
310     $yy = ($yy >= 70 && $yy <= 99) ? $yy + 1900 : $yy;
311
312     if ($myconfig->{dateformat} =~ /^dd/) {
313       if (defined $longformat && $longformat == 0) {
314         $mm++;
315         $dd = "0$dd" if ($dd < 10);
316         $mm = "0$mm" if ($mm < 10);
317         $longdate = "$dd$spc$mm$spc$yy";
318       } else {
319         $longdate = "$dd";
320         $longdate .= ($spc eq '.') ? ". " : " ";
321         $longdate .= &text($self, $self->{$longmonth}[$mm]) . " $yy";
322       }
323     } elsif ($myconfig->{dateformat} eq "yyyy-mm-dd") {
324
325       # Use German syntax with the ISO date style "yyyy-mm-dd" because
326       # Lx-Office is mainly used in Germany or German speaking countries.
327       if (defined $longformat && $longformat == 0) {
328         $mm++;
329         $dd = "0$dd" if ($dd < 10);
330         $mm = "0$mm" if ($mm < 10);
331         $longdate = "$yy-$mm-$dd";
332       } else {
333         $longdate = "$dd. ";
334         $longdate .= &text($self, $self->{$longmonth}[$mm]) . " $yy";
335       }
336     } else {
337       if (defined $longformat && $longformat == 0) {
338         $mm++;
339         $dd = "0$dd" if ($dd < 10);
340         $mm = "0$mm" if ($mm < 10);
341         $longdate = "$mm$spc$dd$spc$yy";
342       } else {
343         $longdate = &text($self, $self->{$longmonth}[$mm]) . " $dd, $yy";
344       }
345     }
346
347   }
348
349   $main::lxdebug->leave_sub();
350
351   return $longdate;
352 }
353
354 sub parse_date {
355   $main::lxdebug->enter_sub(2);
356
357   my ($self, $myconfig, $date, $longformat) = @_;
358   my ($spc, $yy, $mm, $dd);
359
360   unless ($date) {
361     $main::lxdebug->leave_sub(2);
362     return ();
363   }
364
365   # get separator
366   $spc = $myconfig->{dateformat};
367   $spc =~ s/\w//g;
368   $spc = substr($spc, 1, 1);
369
370   if ($date =~ /\D/) {
371     if ($myconfig->{dateformat} =~ /^yy/) {
372       ($yy, $mm, $dd) = split /\D/, $date;
373     } elsif ($myconfig->{dateformat} =~ /^mm/) {
374       ($mm, $dd, $yy) = split /\D/, $date;
375     } elsif ($myconfig->{dateformat} =~ /^dd/) {
376       ($dd, $mm, $yy) = split /\D/, $date;
377     }
378   } else {
379     $date = substr($date, 2);
380     ($yy, $mm, $dd) = ($date =~ /(..)(..)(..)/);
381   }
382
383   $dd *= 1;
384   $mm *= 1;
385   $yy = ($yy < 70) ? $yy + 2000 : $yy;
386   $yy = ($yy >= 70 && $yy <= 99) ? $yy + 1900 : $yy;
387
388   $main::lxdebug->leave_sub(2);
389   return ($yy, $mm, $dd);
390 }
391
392 sub parse_date_to_object {
393   my $self           = shift;
394   my ($yy, $mm, $dd) = $self->parse_date(@_);
395
396   return $yy && $mm && $dd ? DateTime->new(year => $yy, month => $mm, day => $dd) : undef;
397 }
398
399 sub reformat_date {
400   $main::lxdebug->enter_sub(2);
401
402   my ($self, $myconfig, $date, $output_format, $longformat) = @_;
403
404   $main::lxdebug->leave_sub(2) and return "" unless ($date);
405
406   my ($yy, $mm, $dd) = $self->parse_date($myconfig, $date);
407
408   $output_format =~ /d+/;
409   substr($output_format, $-[0], $+[0] - $-[0]) =
410     sprintf("%0" . (length($&)) . "d", $dd);
411
412   $output_format =~ /m+/;
413   substr($output_format, $-[0], $+[0] - $-[0]) =
414     sprintf("%0" . (length($&)) . "d", $mm);
415
416   $output_format =~ /y+/;
417   substr($output_format, $-[0], $+[0] - $-[0]) = $yy;
418
419   $main::lxdebug->leave_sub(2);
420
421   return $output_format;
422 }
423
424 sub format_date {
425   $main::lxdebug->enter_sub();
426
427   my $self     = shift;
428   my $myconfig = shift;
429   my $yy       = shift;
430   my $mm       = shift;
431   my $dd       = shift;
432   my $yy_len   = shift || 4;
433
434   ($yy, $mm, $dd) = ($yy->year, $yy->month, $yy->day) if ref $yy eq 'DateTime';
435
436   $main::lxdebug->leave_sub() and return "" unless $yy && $mm && $dd;
437
438   $yy = $yy % 100 if 2 == $yy_len;
439
440   my $format = ref $myconfig eq '' ? "$myconfig" : $myconfig->{dateformat};
441   $format =~ s{ d+ }{ sprintf("%0" . (length($&)) . "d", $dd) }gex;
442   $format =~ s{ m+ }{ sprintf("%0" . (length($&)) . "d", $mm) }gex;
443   $format =~ s{ y+ }{ sprintf("%0${yy_len}d",            $yy) }gex;
444
445   $main::lxdebug->leave_sub();
446
447   return $format;
448 }
449
450 sub quote_special_chars {
451   my $self   = shift;
452   my $format = lc shift;
453   my $string = shift;
454
455   if ($self->{special_chars_map} && $self->{special_chars_map}->{$format} && $self->{special_chars_map}->{$format}->{order}) {
456     my $scmap = $self->{special_chars_map}->{$format};
457
458     map { $string =~ s/\Q${_}\E/$scmap->{$_}/g } @{ $scmap->{order} };
459   }
460
461   return $string;
462 }
463
464 sub unquote_special_chars {
465   my $self    = shift;
466   my $format  = shift;
467
468   return $self->quote_special_chars("${format}-reverse", shift);
469 }
470
471 sub remap_special_chars {
472   my $self       = shift;
473   my $src_format = shift;
474   my $dst_format = shift;
475
476   return $self->quote_special_chars($dst_format, $self->quote_special_chars("${src_format}-reverse", shift));
477 }
478
479 sub raw_io_active {
480   my $self = shift;
481
482   return !!$self->{raw_io_active};
483 }
484
485 sub with_raw_io {
486   my $self = shift;
487   my $fh   = shift;
488   my $code = shift;
489
490   $self->{raw_io_active} = 1;
491   binmode $fh, ":raw";
492   $code->();
493   binmode $fh, ":utf8" if $self->is_utf8;
494   $self->{raw_io_active} = 0;
495 }
496
497 sub set_numberformat_wo_thousands_separator {
498   my $self     = shift;
499   my $myconfig = shift || \%::myconfig;
500
501   $self->{saved_numberformat} = $myconfig->{numberformat};
502   $myconfig->{numberformat}   =~ s/^1[,\.]/1/;
503 }
504
505 sub restore_numberformat {
506   my $self     = shift;
507   my $myconfig = shift || \%::myconfig;
508
509   $myconfig->{numberformat} = $self->{saved_numberformat} if $self->{saved_numberformat};
510 }
511
512 sub get_local_time_zone {
513   my $self = shift;
514   $self->{local_time_zone} ||= DateTime::TimeZone->new(name => 'local');
515   return $self->{local_time_zone};
516 }
517
518 1;