Dateiencodings auf UTF-8 geƤndert
[kivitendo-erp.git] / SL / Locale.pm
1 #====================================================================
2 # LX-Office ERP
3 # Copyright (C) 2004
4 # Based on SQL-Ledger Version 2.1.9
5 # Web http://www.lx-office.org
6 #
7 #=====================================================================
8 # SQL-Ledger Accounting
9 # Copyright (C) 1998-2002
10 #
11 #  Author: Dieter Simader
12 #   Email: dsimader@sql-ledger.org
13 #     Web: http://www.sql-ledger.org
14 #
15 # Contributors: Thomas Bayen <bayen@gmx.de>
16 #               Antti Kaihola <akaihola@siba.fi>
17 #               Moritz Bunkus (tex code)
18 #
19 # This program is free software; you can redistribute it and/or modify
20 # it under the terms of the GNU General Public License as published by
21 # the Free Software Foundation; either version 2 of the License, or
22 # (at your option) any later version.
23 #
24 # This program is distributed in the hope that it will be useful,
25 # but WITHOUT ANY WARRANTY; without even the implied warranty of
26 # MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
27 # GNU General Public License for more details.
28 # You should have received a copy of the GNU General Public License
29 # along with this program; if not, write to the Free Software
30 # Foundation, Inc., 675 Mass Ave, Cambridge, MA 02139, USA.
31 #======================================================================
32 #
33 # Translations and number/date formatting
34 #
35 #======================================================================
36
37 package Locale;
38
39 use DateTime;
40 use Encode;
41 use List::Util qw(first);
42 use List::MoreUtils qw(any);
43
44 use SL::LXDebug;
45 use SL::Common;
46 use SL::Iconv;
47 use SL::Inifile;
48
49 use strict;
50
51 my %locales_by_country;
52
53 sub new {
54   $main::lxdebug->enter_sub();
55
56   my ($type, $country) = @_;
57
58   $country ||= $::language;
59   $country   =~ s|.*/||;
60   $country   =~ s|\.||g;
61
62   if (!$locales_by_country{$country}) {
63     my $self = {};
64     bless $self, $type;
65
66     $self->_init($country);
67
68     $locales_by_country{$country} = $self;
69   }
70
71   $main::lxdebug->leave_sub();
72
73   return $locales_by_country{$country}
74 }
75
76 sub _init {
77   my $self     = shift;
78   my $country  = shift;
79
80   $self->{charset}     = Common::DEFAULT_CHARSET;
81   $self->{countrycode} = $country;
82
83   if ($country && -d "locale/$country") {
84     local *IN;
85     if (open(IN, "<", "locale/$country/all")) {
86       my $code = join("", <IN>);
87       eval($code);
88       close(IN);
89     }
90
91     if (open IN, "<", "locale/$country/charset") {
92       $self->{charset} = <IN>;
93       close IN;
94
95       chomp $self->{charset};
96     }
97   }
98
99   my $db_charset            = $main::dbcharset || Common::DEFAULT_CHARSET;
100   $self->{is_utf8}          = (any { lc($::dbcharset || '') eq $_ } qw(utf8 utf-8 unicode)) ? 1 : 0;
101
102   if ($self->{is_utf8}) {
103     binmode STDOUT, ":utf8";
104     binmode STDERR, ":utf8";
105   }
106
107   $self->{iconv}            = SL::Iconv->new($self->{charset}, $db_charset);
108   $self->{iconv_reverse}    = SL::Iconv->new($db_charset,      $self->{charset});
109   $self->{iconv_english}    = SL::Iconv->new('ASCII',          $db_charset);
110   $self->{iconv_iso8859}    = SL::Iconv->new('ISO-8859-15',    $db_charset);
111   $self->{iconv_to_iso8859} = SL::Iconv->new($db_charset,      'ISO-8859-15');
112   $self->{iconv_utf8}       = SL::Iconv->new('UTF-8',          $db_charset);
113
114   $self->_read_special_chars_file($country);
115
116   push @{ $self->{LONG_MONTH} },
117     ("January",   "February", "March",    "April",
118      "May ",      "June",     "July",     "August",
119      "September", "October",  "November", "December");
120   push @{ $self->{SHORT_MONTH} },
121     (qw(Jan Feb Mar Apr May Jun Jul Aug Sep Oct Nov Dec));
122 }
123
124 sub is_utf8 {
125   my $self   = shift;
126   my $handle = shift;
127   return $self->{is_utf8} && (!$handle || $handle->is_utf8);
128 }
129
130 sub _handle_markup {
131   my $self    = shift;
132   my $str     = shift;
133
134   my $escaped = 0;
135   my $new_str = '';
136
137   for (my $i = 0; $i < length $str; $i++) {
138     my $char = substr $str, $i, 1;
139
140     if ($escaped) {
141       if ($char eq 'n') {
142         $new_str .= "\n";
143
144       } elsif ($char eq 'r') {
145         $new_str .= "\r";
146
147       } elsif ($char eq 's') {
148         $new_str .= ' ';
149
150       } elsif ($char eq 'x') {
151         $new_str .= chr(hex(substr($str, $i + 1, 2)));
152         $i       += 2;
153
154       } else {
155         $new_str .= $char;
156       }
157
158       $escaped  = 0;
159
160     } elsif ($char eq '\\') {
161       $escaped  = 1;
162
163     } else {
164       $new_str .= $char;
165     }
166   }
167
168   return $new_str;
169 }
170
171 sub _read_special_chars_file {
172   my $self    = shift;
173   my $country = shift;
174
175   if (! -f "locale/$country/special_chars") {
176     $self->{special_chars_map} = {};
177     return;
178   }
179
180   $self->{special_chars_map} = Inifile->new("locale/$country/special_chars", 'verbatim' => 1);
181
182   foreach my $format (keys %{ $self->{special_chars_map} }) {
183     next if (($format eq 'FILE') || ($format eq 'ORDER') || (ref $self->{special_chars_map}->{$format} ne 'HASH'));
184
185     if ($format ne lc $format) {
186       $self->{special_chars_map}->{lc $format} = $self->{special_chars_map}->{$format};
187       delete $self->{special_chars_map}->{$format};
188       $format = lc $format;
189     }
190
191     my $scmap = $self->{special_chars_map}->{$format};
192     my $order = $self->{iconv}->convert($scmap->{order});
193     delete $scmap->{order};
194
195     foreach my $key (keys %{ $scmap }) {
196       $scmap->{$key} = $self->_handle_markup($self->{iconv}->convert($scmap->{$key}));
197
198       my $new_key    = $self->_handle_markup($self->{iconv}->convert($key));
199
200       if ($key ne $new_key) {
201         $scmap->{$new_key} = $scmap->{$key};
202         delete $scmap->{$key};
203       }
204     }
205
206     $self->{special_chars_map}->{"${format}-reverse"}          = { reverse %{ $scmap } };
207
208     $scmap->{order}                                            = [ map { $self->_handle_markup($_) } split m/\s+/, $order ];
209     $self->{special_chars_map}->{"${format}-reverse"}->{order} = [ grep { $_ } map { $scmap->{$_} } reverse @{ $scmap->{order} } ];
210   }
211 }
212
213 sub text {
214   my $self = shift;
215   my $text = shift;
216
217   if ($self->{texts}->{$text}) {
218     $text = $self->{iconv}->convert($self->{texts}->{$text});
219   } else {
220     $text = $self->{iconv_english}->convert($text);
221   }
222
223   if (@_) {
224     $text = Form->format_string($text, @_);
225   }
226
227   return $text;
228 }
229
230 sub findsub {
231   $main::lxdebug->enter_sub();
232
233   my ($self, $text) = @_;
234   my $text_rev      = lc $self->{iconv_reverse}->convert($text);
235
236   if (!$self->{texts_reverse}) {
237     $self->{texts_reverse} = { };
238     while (my ($original, $translation) = each %{ $self->{texts} }) {
239       $original    =  lc $original;
240       $original    =~ s/[^a-z0-9]/_/g;
241       $original    =~ s/_+/_/g;
242
243       $translation =  lc $translation;
244       $translation =~ s/\s+/_/g;
245
246       $self->{texts_reverse}->{$translation} ||= [ ];
247       push @{ $self->{texts_reverse}->{$translation} }, $original;
248     }
249   }
250
251   my $sub_name;
252   $sub_name   = first { defined(&{ "::${_}" }) } @{ $self->{texts_reverse}->{$text_rev} } if $self->{texts_reverse}->{$text_rev};
253   $sub_name ||= $text_rev if ($text_rev =~ m/^[a-z][a-z0-9_]+$/) && defined &{ "::${text_rev}" };
254
255   $main::form->error("$text not defined in locale/$self->{countrycode}/all") if !$sub_name;
256
257   $main::lxdebug->leave_sub();
258
259   return $sub_name;
260 }
261
262 sub date {
263   $main::lxdebug->enter_sub();
264
265   my ($self, $myconfig, $date, $longformat) = @_;
266
267   my $longdate  = "";
268   my $longmonth = ($longformat) ? 'LONG_MONTH' : 'SHORT_MONTH';
269
270   my ($spc, $yy, $mm, $dd);
271
272   if ($date) {
273
274     # get separator
275     $spc = $myconfig->{dateformat};
276     $spc =~ s/\w//g;
277     $spc = substr($spc, 1, 1);
278
279     if ($date =~ /\D/) {
280       if ($myconfig->{dateformat} =~ /^yy/) {
281         ($yy, $mm, $dd) = split /\D/, $date;
282       }
283       if ($myconfig->{dateformat} =~ /^mm/) {
284         ($mm, $dd, $yy) = split /\D/, $date;
285       }
286       if ($myconfig->{dateformat} =~ /^dd/) {
287         ($dd, $mm, $yy) = split /\D/, $date;
288       }
289     } else {
290       $date = substr($date, 2);
291       ($yy, $mm, $dd) = ($date =~ /(..)(..)(..)/);
292     }
293
294     $dd *= 1;
295     $mm--;
296     $yy = ($yy < 70) ? $yy + 2000 : $yy;
297     $yy = ($yy >= 70 && $yy <= 99) ? $yy + 1900 : $yy;
298
299     if ($myconfig->{dateformat} =~ /^dd/) {
300       if (defined $longformat && $longformat == 0) {
301         $mm++;
302         $dd = "0$dd" if ($dd < 10);
303         $mm = "0$mm" if ($mm < 10);
304         $longdate = "$dd$spc$mm$spc$yy";
305       } else {
306         $longdate = "$dd";
307         $longdate .= ($spc eq '.') ? ". " : " ";
308         $longdate .= &text($self, $self->{$longmonth}[$mm]) . " $yy";
309       }
310     } elsif ($myconfig->{dateformat} eq "yyyy-mm-dd") {
311
312       # Use German syntax with the ISO date style "yyyy-mm-dd" because
313       # Lx-Office is mainly used in Germany or German speaking countries.
314       if (defined $longformat && $longformat == 0) {
315         $mm++;
316         $dd = "0$dd" if ($dd < 10);
317         $mm = "0$mm" if ($mm < 10);
318         $longdate = "$yy-$mm-$dd";
319       } else {
320         $longdate = "$dd. ";
321         $longdate .= &text($self, $self->{$longmonth}[$mm]) . " $yy";
322       }
323     } else {
324       if (defined $longformat && $longformat == 0) {
325         $mm++;
326         $dd = "0$dd" if ($dd < 10);
327         $mm = "0$mm" if ($mm < 10);
328         $longdate = "$mm$spc$dd$spc$yy";
329       } else {
330         $longdate = &text($self, $self->{$longmonth}[$mm]) . " $dd, $yy";
331       }
332     }
333
334   }
335
336   $main::lxdebug->leave_sub();
337
338   return $longdate;
339 }
340
341 sub parse_date {
342   $main::lxdebug->enter_sub();
343
344   my ($self, $myconfig, $date, $longformat) = @_;
345   my ($spc, $yy, $mm, $dd);
346
347   unless ($date) {
348     $main::lxdebug->leave_sub();
349     return ();
350   }
351
352   # get separator
353   $spc = $myconfig->{dateformat};
354   $spc =~ s/\w//g;
355   $spc = substr($spc, 1, 1);
356
357   if ($date =~ /\D/) {
358     if ($myconfig->{dateformat} =~ /^yy/) {
359       ($yy, $mm, $dd) = split /\D/, $date;
360     } elsif ($myconfig->{dateformat} =~ /^mm/) {
361       ($mm, $dd, $yy) = split /\D/, $date;
362     } elsif ($myconfig->{dateformat} =~ /^dd/) {
363       ($dd, $mm, $yy) = split /\D/, $date;
364     }
365   } else {
366     $date = substr($date, 2);
367     ($yy, $mm, $dd) = ($date =~ /(..)(..)(..)/);
368   }
369
370   $dd *= 1;
371   $mm *= 1;
372   $yy = ($yy < 70) ? $yy + 2000 : $yy;
373   $yy = ($yy >= 70 && $yy <= 99) ? $yy + 1900 : $yy;
374
375   $main::lxdebug->leave_sub();
376   return ($yy, $mm, $dd);
377 }
378
379 sub parse_date_to_object {
380   my $self           = shift;
381   my ($yy, $mm, $dd) = $self->parse_date(@_);
382
383   return $yy && $mm && $dd ? DateTime->new(year => $yy, month => $mm, day => $dd) : undef;
384 }
385
386 sub reformat_date {
387   $main::lxdebug->enter_sub();
388
389   my ($self, $myconfig, $date, $output_format, $longformat) = @_;
390
391   $main::lxdebug->leave_sub() and return "" unless ($date);
392
393   my ($yy, $mm, $dd) = $self->parse_date($myconfig, $date);
394
395   $output_format =~ /d+/;
396   substr($output_format, $-[0], $+[0] - $-[0]) =
397     sprintf("%0" . (length($&)) . "d", $dd);
398
399   $output_format =~ /m+/;
400   substr($output_format, $-[0], $+[0] - $-[0]) =
401     sprintf("%0" . (length($&)) . "d", $mm);
402
403   $output_format =~ /y+/;
404   substr($output_format, $-[0], $+[0] - $-[0]) = $yy;
405
406   $main::lxdebug->leave_sub();
407
408   return $output_format;
409 }
410
411 sub format_date {
412   $main::lxdebug->enter_sub();
413
414   my $self     = shift;
415   my $myconfig = shift;
416   my $yy       = shift;
417   my $mm       = shift;
418   my $dd       = shift;
419   my $yy_len   = shift || 4;
420
421   ($yy, $mm, $dd) = ($yy->year, $yy->month, $yy->day) if ref $yy eq 'DateTime';
422
423   $main::lxdebug->leave_sub() and return "" unless $yy && $mm && $dd;
424
425   $yy = $yy % 100 if 2 == $yy_len;
426
427   my $format = ref $myconfig eq '' ? "$myconfig" : $myconfig->{dateformat};
428   $format =~ s{ d+ }{ sprintf("%0" . (length($&)) . "d", $dd) }gex;
429   $format =~ s{ m+ }{ sprintf("%0" . (length($&)) . "d", $mm) }gex;
430   $format =~ s{ y+ }{ sprintf("%0${yy_len}d",            $yy) }gex;
431
432   $main::lxdebug->leave_sub();
433
434   return $format;
435 }
436
437 sub quote_special_chars {
438   my $self   = shift;
439   my $format = lc shift;
440   my $string = shift;
441
442   if ($self->{special_chars_map} && $self->{special_chars_map}->{$format} && $self->{special_chars_map}->{$format}->{order}) {
443     my $scmap = $self->{special_chars_map}->{$format};
444
445     map { $string =~ s/\Q${_}\E/$scmap->{$_}/g } @{ $scmap->{order} };
446   }
447
448   return $string;
449 }
450
451 sub unquote_special_chars {
452   my $self    = shift;
453   my $format  = shift;
454
455   return $self->quote_special_chars("${format}-reverse", shift);
456 }
457
458 sub remap_special_chars {
459   my $self       = shift;
460   my $src_format = shift;
461   my $dst_format = shift;
462
463   return $self->quote_special_chars($dst_format, $self->quote_special_chars("${src_format}-reverse", shift));
464 }
465
466 sub raw_io_active {
467   my $self = shift;
468
469   return !!$self->{raw_io_active};
470 }
471
472 sub with_raw_io {
473   my $self = shift;
474   my $fh   = shift;
475   my $code = shift;
476
477   $self->{raw_io_active} = 1;
478   binmode $fh, ":raw";
479   $code->();
480   binmode $fh, ":utf8" if $self->is_utf8;
481   $self->{raw_io_active} = 0;
482 }
483
484 sub set_numberformat_wo_thousands_separator {
485   my $self     = shift;
486   my $myconfig = shift || \%::myconfig;
487
488   $self->{saved_numberformat} = $myconfig->{numberformat};
489   $myconfig->{numberformat}   =~ s/^1[,\.]/1/;
490 }
491
492 sub restore_numberformat {
493   my $self     = shift;
494   my $myconfig = shift || \%::myconfig;
495
496   $myconfig->{numberformat} = $self->{saved_numberformat} if $self->{saved_numberformat};
497 }
498
499 1;