307be1677ddfaaf0ba43fc3c3184c5fc2244aaed
[timetracker.git] / WEB-INF / lib / ttImportHelper.class.php
1 <?php
2 // +----------------------------------------------------------------------+
3 // | Anuko Time Tracker
4 // +----------------------------------------------------------------------+
5 // | Copyright (c) Anuko International Ltd. (https://www.anuko.com)
6 // +----------------------------------------------------------------------+
7 // | LIBERAL FREEWARE LICENSE: This source code document may be used
8 // | by anyone for any purpose, and freely redistributed alone or in
9 // | combination with other software, provided that the license is obeyed.
10 // |
11 // | There are only two ways to violate the license:
12 // |
13 // | 1. To redistribute this code in source form, with the copyright
14 // |    notice or license removed or altered. (Distributing in compiled
15 // |    forms without embedded copyright notices is permitted).
16 // |
17 // | 2. To redistribute modified versions of this code in *any* form
18 // |    that bears insufficient indications that the modifications are
19 // |    not the work of the original author(s).
20 // |
21 // | This license applies to this document only, not any other software
22 // | that it may be combined with.
23 // |
24 // +----------------------------------------------------------------------+
25 // | Contributors:
26 // | https://www.anuko.com/time_tracker/credits.htm
27 // +----------------------------------------------------------------------+
28
29 import('ttTeamHelper');
30 import('ttUserHelper');
31 import('ttProjectHelper');
32 import('ttTaskHelper');
33 import('ttInvoiceHelper');
34 import('ttTimeHelper');
35 import('ttClientHelper');
36 import('ttCustomFieldHelper');
37 import('ttFavReportHelper');
38 import('ttExpenseHelper');
39 import('ttRoleHelper');
40
41 // ttImportHelper - this class is used to import group data from a file.
42 class ttImportHelper {
43   var $errors         = null;    // Errors go here. Set in constructor by reference.
44
45   var $currentElement = array(); // Current element of the XML file we are parsing.
46   var $currentTag     = '';      // XML tag of the current element.
47
48   var $canImport      = true;    // False if we cannot import data due to a login collision.
49   var $groupData      = array(); // Array of group data such as group name, etc.
50   var $org_id         = null;    // New organization id we are importing. It is created during the import operation.
51   var $group_id       = null;    // New group id we are importing. It is created during the import operation.
52   var $roles          = array(); // Array of arrays of role properties.
53   var $users          = array(); // Array of arrays of user properties.
54   var $top_role_id    = null;    // Top manager role id on the new server.
55
56   // The following arrays are maps between entity ids in the file versus the database.
57   // In the file they are sequential (1,2,3...) while in the database the entities have different ids.
58   var $roleMap       = array(); // Role ids.
59   var $userMap       = array(); // User ids.
60   var $projectMap    = array(); // Project ids.
61   var $taskMap       = array(); // Task ids.
62   var $clientMap     = array(); // Client ids.
63   var $invoiceMap    = array(); // Invoice ids.
64
65   var $customFieldMap       = array(); // Custom field ids.
66   var $customFieldOptionMap = array(); // Custop field option ids.
67   var $logMap        = array(); // Time log ids.
68
69   // Constructor.
70   function __construct(&$errors) {
71     $this->errors = &$errors;
72   }
73
74   // startElement - callback handler for opening tag of an XML element.
75   // In this function we assign passed in attributes to currentElement.
76   function startElement($parser, $name, $attrs) {
77     if ($name == 'GROUP'
78       || $name == 'USER'
79       || $name == 'TASK'
80       || $name == 'PROJECT'
81       || $name == 'CLIENT'
82       || $name == 'INVOICE'
83       || $name == 'MONTHLY_QUOTA'
84       || $name == 'LOG_ITEM'
85       || $name == 'CUSTOM_FIELD'
86       || $name == 'CUSTOM_FIELD_OPTION'
87       || $name == 'CUSTOM_FIELD_LOG_ENTRY'
88       || $name == 'INVOICE_HEADER'
89       || $name == 'USER_PROJECT_BIND'
90       || $name == 'EXPENSE_ITEM'
91       || $name == 'FAV_REPORT'
92       || $name == 'ROLE') {
93       $this->currentElement = $attrs;
94     }
95     $this->currentTag = $name;
96   }
97
98   // endElement - callback handler for the closing tag of an XML element.
99   // When we are here, currentElement is an array of the element attributes (as set in startElement).
100   // Here we do the actual import of data into the database.
101   function endElement($parser, $name) {
102     if ($name == 'GROUP') {
103       $this->groupData = $this->currentElement;
104       // Now groupData is an array of group properties. We'll use it later to create a group.
105       // Cannot create the group here. Need to determine whether logins collide with existing logins.
106       $this->currentElement = array();
107     }
108     if ($name == 'ROLE') {
109       $this->roles[$this->currentElement['ID']] = $this->currentElement;
110       $this->currentElement = array();
111     }
112     if ($name == 'USER') {
113       $this->users[$this->currentElement['ID']] = $this->currentElement;
114       $this->currentElement = array();
115     }
116     if ($name == 'USERS') {
117       foreach ($this->users as $user_item) {
118         if (('' != $user_item['STATUS']) && ttUserHelper::getUserByLogin($user_item['LOGIN'])) {
119           // We have a login collision, cannot import any data.
120           $this->canImport = false;
121           break;
122         }
123       }
124
125       // Now we can create a group.
126       if ($this->canImport) {
127         $this->top_role_id = ttRoleHelper::getRoleByRank(512, 0);
128         $group_id = $this->createGroup(array(
129           'name' => $this->groupData['NAME'],
130           'currency' => $this->groupData['CURRENCY'],
131           'decimal_mark' => $this->groupData['DECIMAL_MARK'],
132           'lang' => $this->groupData['LANG'],
133           'date_format' => $this->groupData['DATE_FORMAT'],
134           'time_format' => $this->groupData['TIME_FORMAT'],
135           'week_start' => $this->groupData['WEEK_START'],
136           'tracking_mode' => $this->groupData['TRACKING_MODE'],
137           'project_required' => $this->groupData['PROJECT_REQUIRED'],
138           'task_required' => $this->groupData['TASK_REQUIRED'],
139           'record_type' => $this->groupData['RECORD_TYPE'],
140           'bcc_email' => $this->groupData['BCC_EMAIL'],
141           'allow_ip' => $this->groupData['ALLOW_IP'],
142           'password_complexity' => $this->groupData['PASSWORD_COMPLEXITY'],
143           'plugins' => $this->groupData['PLUGINS'],
144           'lock_spec' => $this->groupData['LOCK_SPEC'],
145           'workday_minutes' => $this->groupData['WORKDAY_MINUTES'],
146           'config' => $this->groupData['CONFIG']));
147         if ($group_id) {
148           $this->org_id = $group_id;
149           $this->group_id = $group_id;
150
151           // Create roles.
152           foreach ($this->roles as $key=>$role_item) {
153             $role_id = ttRoleHelper::insert(array(
154               'group_id' => $this->group_id,
155               'org_id' => $this->org_id,
156               'name' => $role_item['NAME'],
157               'description' => $role_item['DESCRIPTION'],
158               'rank' => $role_item['RANK'],
159               'rights' => $role_item['RIGHTS'],
160               'status' => $role_item['STATUS']));
161             $this->roleMap[$role_item['ID']] = $role_id;
162           }
163
164           foreach ($this->users as $key=>$user_item) {
165             $role_id = $user_item['ROLE_ID'] === '0' ? $this->top_role_id :  $this->roleMap[$user_item['ROLE_ID']]; // 0 (not null) means top manager role.
166             $user_id = ttUserHelper::insert(array(
167               'group_id' => $this->group_id,
168               'org_id' => $this->org_id,
169               'role_id' => $role_id,
170               'client_id' => $user_item['CLIENT_ID'], // Note: NOT mapped value, replaced in CLIENT handler.
171               'name' => $user_item['NAME'],
172               'login' => $user_item['LOGIN'],
173               'password' => $user_item['PASSWORD'],
174               'rate' => $user_item['RATE'],
175               'email' => $user_item['EMAIL'],
176               'status' => $user_item['STATUS']), false);
177             $this->userMap[$key] = $user_id;
178           }
179         }
180       }
181     }
182
183     if ($name == 'TASK' && $this->canImport) {
184       $this->taskMap[$this->currentElement['ID']] =
185         ttTaskHelper::insert(array(
186           'group_id' => $this->group_id,
187           'org_id' => $this->org_id,
188           'name' => $this->currentElement['NAME'],
189           'description' => $this->currentElement['DESCRIPTION'],
190           'status' => $this->currentElement['STATUS']));
191     }
192     if ($name == 'PROJECT' && $this->canImport) {
193       // Prepare a list of task ids.
194       $tasks = explode(',', $this->currentElement['TASKS']);
195       foreach ($tasks as $id)
196         $mapped_tasks[] = $this->taskMap[$id];
197
198       // Add a new project.
199       $this->projectMap[$this->currentElement['ID']] =
200         ttProjectHelper::insert(array(
201           'group_id' => $this->group_id,
202           'org_id' => $this->org_id,
203           'name' => $this->currentElement['NAME'],
204           'description' => $this->currentElement['DESCRIPTION'],
205           'tasks' => $mapped_tasks,
206           'status' => $this->currentElement['STATUS']));
207     }
208     if ($name == 'USER_PROJECT_BIND' && $this->canImport) {
209 /*
210         ttUserHelper::insertBind(
211         $this->userMap[$this->currentElement['USER_ID']],
212         $this->projectMap[$this->currentElement['PROJECT_ID']],
213         $this->currentElement['RATE'],
214         $this->currentElement['STATUS']);*/
215       ttUserHelper::insertBind2(array(
216         'user_id' => $this->userMap[$this->currentElement['USER_ID']],
217         'project_id' => $this->projectMap[$this->currentElement['PROJECT_ID']],
218         'group_id' => $this->group_id,
219         'org_id' => $this->org_id,
220         'rate' => $this->currentElement['RATE'],
221         'status' => $this->currentElement['STATUS']));
222     }
223
224     if ($name == 'CLIENT' && $this->canImport) {
225       // Prepare a list of project ids.
226       if ($this->currentElement['PROJECTS']) {
227         $projects = explode(',', $this->currentElement['PROJECTS']);
228         foreach ($projects as $id)
229           $mapped_projects[] = $this->projectMap[$id];
230       }
231
232       $this->clientMap[$this->currentElement['ID']] =
233         ttClientHelper::insert(array(
234           'group_id' => $this->group_id,
235           'org_id' => $this->org_id,
236           'name' => $this->currentElement['NAME'],
237           'address' => $this->currentElement['ADDRESS'],
238           'tax' => $this->currentElement['TAX'],
239           'projects' => $mapped_projects,
240           'status' => $this->currentElement['STATUS']));
241
242         // Update client_id for tt_users to a mapped value.
243         // We did not do it during user insertion because clientMap was not ready then.
244         if ($this->currentElement['ID'] != $this->clientMap[$this->currentElement['ID']])
245           ttClientHelper::setMappedClient($this->group_id, $this->currentElement['ID'], $this->clientMap[$this->currentElement['ID']]);
246     }
247
248     if ($name == 'INVOICE' && $this->canImport) {
249       $this->invoiceMap[$this->currentElement['ID']] =
250         ttInvoiceHelper::insert(array(
251           'group_id' => $this->group_id,
252           'org_id' => $this->org_id,
253           'name' => $this->currentElement['NAME'],
254           'date' => $this->currentElement['DATE'],
255           'client_id' => $this->clientMap[$this->currentElement['CLIENT_ID']],
256           'discount' => $this->currentElement['DISCOUNT'],
257           'status' => $this->currentElement['STATUS']));
258     }
259
260     if ($name == 'MONTHLY_QUOTA' && $this->canImport) {
261       $this->insertMonthlyQuota($this->group_id, $this->currentElement['YEAR'], $this->currentElement['MONTH'], $this->currentElement['MINUTES']);
262     }
263
264     if ($name == 'LOG_ITEM' && $this->canImport) {
265       $this->logMap[$this->currentElement['ID']] =
266         ttTimeHelper::insert(array(
267           'user_id' => $this->userMap[$this->currentElement['USER_ID']],
268           'group_id' => $this->group_id,
269           'org_id' => $this->org_id,
270           'date' => $this->currentElement['DATE'],
271           'start' => $this->currentElement['START'],
272           'finish' => $this->currentElement['FINISH'],
273           'duration' => $this->currentElement['DURATION'],
274           'client' => $this->clientMap[$this->currentElement['CLIENT_ID']],
275           'project' => $this->projectMap[$this->currentElement['PROJECT_ID']],
276           'task' => $this->taskMap[$this->currentElement['TASK_ID']],
277           'invoice' => $this->invoiceMap[$this->currentElement['INVOICE_ID']],
278           'note' => (isset($this->currentElement['COMMENT']) ? $this->currentElement['COMMENT'] : ''),
279           'billable' => $this->currentElement['BILLABLE'],
280           'paid' => $this->currentElement['PAID'],
281           'status' => $this->currentElement['STATUS']));
282     }
283
284     if ($name == 'CUSTOM_FIELD' && $this->canImport) {
285       $this->customFieldMap[$this->currentElement['ID']] =
286         ttCustomFieldHelper::insertField(array(
287           'group_id' => $this->group_id,
288           'type' => $this->currentElement['TYPE'],
289           'label' => $this->currentElement['LABEL'],
290           'required' => $this->currentElement['REQUIRED'],
291           'status' => $this->currentElement['STATUS']));
292     }
293
294     if ($name == 'CUSTOM_FIELD_OPTION' && $this->canImport) {
295       $this->customFieldOptionMap[$this->currentElement['ID']] =
296         ttCustomFieldHelper::insertOption(array(
297           'field_id' => $this->customFieldMap[$this->currentElement['FIELD_ID']],
298           'value' => $this->currentElement['VALUE']));
299     }
300
301     if ($name == 'CUSTOM_FIELD_LOG_ENTRY' && $this->canImport) {
302       ttCustomFieldHelper::insertLogEntry(array(
303         'log_id' => $this->logMap[$this->currentElement['LOG_ID']],
304         'field_id' => $this->customFieldMap[$this->currentElement['FIELD_ID']],
305         'option_id' => $this->customFieldOptionMap[$this->currentElement['OPTION_ID']],
306         'value' => $this->currentElement['VALUE'],
307         'status' => $this->currentElement['STATUS']));
308     }
309
310     if ($name == 'EXPENSE_ITEM' && $this->canImport) {
311       ttExpenseHelper::insert(array(
312         'date' => $this->currentElement['DATE'],
313         'user_id' => $this->userMap[$this->currentElement['USER_ID']],
314         'group_id' => $this->group_id,
315         'client_id' => $this->clientMap[$this->currentElement['CLIENT_ID']],
316         'project_id' => $this->projectMap[$this->currentElement['PROJECT_ID']],
317         'name' => $this->currentElement['NAME'],
318         'cost' => $this->currentElement['COST'],
319         'invoice_id' => $this->invoiceMap[$this->currentElement['INVOICE_ID']],
320         'paid' => $this->currentElement['PAID'],
321         'status' => $this->currentElement['STATUS']));
322     }
323
324     if ($name == 'FAV_REPORT' && $this->canImport) {
325       $user_list = '';
326       if (strlen($this->currentElement['USERS']) > 0) {
327         $arr = explode(',', $this->currentElement['USERS']);
328         foreach ($arr as $v)
329           $user_list .= (strlen($user_list) == 0 ? '' : ',').$this->userMap[$v];
330       }
331       ttFavReportHelper::insertReport(array(
332         'name' => $this->currentElement['NAME'],
333         'user_id' => $this->userMap[$this->currentElement['USER_ID']],
334         'client' => $this->clientMap[$this->currentElement['CLIENT_ID']],
335         'option' => $this->customFieldOptionMap[$this->currentElement['CF_1_OPTION_ID']],
336         'project' => $this->projectMap[$this->currentElement['PROJECT_ID']],
337         'task' => $this->taskMap[$this->currentElement['TASK_ID']],
338         'billable' => $this->currentElement['BILLABLE'],
339         'users' => $user_list,
340         'period' => $this->currentElement['PERIOD'],
341         'from' => $this->currentElement['PERIOD_START'],
342         'to' => $this->currentElement['PERIOD_END'],
343         'chclient' => (int) $this->currentElement['SHOW_CLIENT'],
344         'chinvoice' => (int) $this->currentElement['SHOW_INVOICE'],
345         'chpaid' => (int) $this->currentElement['SHOW_PAID'],
346         'chip' => (int) $this->currentElement['SHOW_IP'],
347         'chproject' => (int) $this->currentElement['SHOW_PROJECT'],
348         'chstart' => (int) $this->currentElement['SHOW_START'],
349         'chduration' => (int) $this->currentElement['SHOW_DURATION'],
350         'chcost' => (int) $this->currentElement['SHOW_COST'],
351         'chtask' => (int) $this->currentElement['SHOW_TASK'],
352         'chfinish' => (int) $this->currentElement['SHOW_END'],
353         'chnote' => (int) $this->currentElement['SHOW_NOTE'],
354         'chcf_1' => (int) $this->currentElement['SHOW_CUSTOM_FIELD_1'],
355         'chunits' => (int) $this->currentElement['SHOW_WORK_UNITS'],
356         'group_by1' => $this->currentElement['GROUP_BY1'],
357         'group_by2' => $this->currentElement['GROUP_BY2'],
358         'group_by3' => $this->currentElement['GROUP_BY3'],
359         'chtotalsonly' => (int) $this->currentElement['SHOW_TOTALS_ONLY']));
360     }
361     $this->currentTag = '';
362   }
363
364   // dataElement - callback handler for text data fragments. It builds up currentElement array with text pieces from XML.
365   function dataElement($parser, $data) {
366     if ($this->currentTag == 'NAME'
367       || $this->currentTag == 'DESCRIPTION'
368       || $this->currentTag == 'LABEL'
369       || $this->currentTag == 'VALUE'
370       || $this->currentTag == 'COMMENT'
371       || $this->currentTag == 'ADDRESS'
372       || $this->currentTag == 'ALLOW_IP'
373       || $this->currentTag == 'PASSWORD_COMPLEXITY') {
374       if (isset($this->currentElement[$this->currentTag]))
375         $this->currentElement[$this->currentTag] .= trim($data);
376       else
377         $this->currentElement[$this->currentTag] = trim($data);
378     }
379   }
380
381   // importXml - uncompresses the file, reads and parses its content. During parsing,
382   // startElement, endElement, and dataElement functions are called as many times as necessary.
383   // Actual import occurs in the endElement handler.
384   function importXml() {
385     global $i18n;
386
387     // Do we have a compressed file?
388     $compressed = false;
389     $file_ext = substr($_FILES['xmlfile']['name'], strrpos($_FILES['xmlfile']['name'], '.') + 1);
390     if (in_array($file_ext, array('bz','tbz','bz2','tbz2'))) {
391       $compressed = true;
392     }
393
394     // Create a temporary file.
395     $dirName = dirname(TEMPLATE_DIR . '_c/.');
396     $filename = tempnam($dirName, 'import_');
397
398     // If the file is compressed - uncompress it.
399     if ($compressed) {
400       if (!$this->uncompress($_FILES['xmlfile']['tmp_name'], $filename)) {
401         $this->errors->add($i18n->get('error.sys'));
402         return;
403       }
404       unlink($_FILES['xmlfile']['tmp_name']);
405     } else {
406       if (!move_uploaded_file($_FILES['xmlfile']['tmp_name'], $filename)) {
407         $this->errors->add($i18n->get('error.upload'));
408         return;
409       }
410     }
411
412     // Initialize XML parser.
413     $parser = xml_parser_create();
414     xml_set_object($parser, $this);
415     xml_set_element_handler($parser, 'startElement', 'endElement');
416     xml_set_character_data_handler($parser, 'dataElement');
417
418     // Read and parse the content of the file. During parsing, startElement, endElement, and dataElement functions are called.
419     $file = fopen($filename, 'r');
420     while ($data = fread($file, 4096)) {
421       if (!xml_parse($parser, $data, feof($file))) {
422         $this->errors->add(sprintf("XML error: %s at line %d",
423           xml_error_string(xml_get_error_code($parser)),
424           xml_get_current_line_number($parser)));
425       }
426       if (!$this->canImport) {
427         $this->errors->add($i18n->get('error.user_exists'));
428         break;
429       }
430     }
431     xml_parser_free($parser);
432     if ($file) fclose($file);
433     unlink($filename);
434   }
435
436   // uncompress - uncompresses the content of the $in file into the $out file.
437   function uncompress($in, $out) {
438     // Do we have the uncompress function?
439     if (!function_exists('bzopen'))
440       return false;
441
442     // Initial checks of file names and permissions.
443     if (!file_exists($in) || !is_readable ($in))
444       return false;
445     if ((!file_exists($out) && !is_writable(dirname($out))) || (file_exists($out) && !is_writable($out)))
446       return false;
447
448     if (!$out_file = fopen($out, 'wb'))
449       return false;
450     if (!$in_file = bzopen ($in, 'r'))
451       return false;
452
453     while (!feof($in_file)) {
454       $buffer = bzread($in_file, 4096);
455       fwrite($out_file, $buffer, 4096);
456     }
457     bzclose($in_file);
458     fclose ($out_file);
459     return true;
460   }
461
462   // createGroup function creates a new group.
463   private function createGroup($fields) {
464
465     global $user;
466     $mdb2 = getConnection();
467
468     $columns = '(name, currency, decimal_mark, lang, date_format, time_format, week_start, tracking_mode'.
469       ', project_required, task_required, record_type, bcc_email, allow_ip, password_complexity, plugins'.
470       ', lock_spec, workday_minutes, config, created, created_ip, created_by)';
471
472     $values = ' values ('.$mdb2->quote(trim($fields['name']));
473     $values .= ', '.$mdb2->quote(trim($fields['currency']));
474     $values .= ', '.$mdb2->quote($fields['decimal_mark']);
475     $values .= ', '.$mdb2->quote($fields['lang']);
476     $values .= ', '.$mdb2->quote($fields['date_format']);
477     $values .= ', '.$mdb2->quote($fields['time_format']);
478     $values .= ', '.(int)$fields['week_start'];
479     $values .= ', '.(int)$fields['tracking_mode'];
480     $values .= ', '.(int)$fields['project_required'];
481     $values .= ', '.(int)$fields['task_required'];
482     $values .= ', '.(int)$fields['record_type'];
483     $values .= ', '.$mdb2->quote($fields['bcc_email']);
484     $values .= ', '.$mdb2->quote($fields['allow_ip']);
485     $values .= ', '.$mdb2->quote($fields['password_complexity']);
486     $values .= ', '.$mdb2->quote($fields['plugins']);
487     $values .= ', '.$mdb2->quote($fields['lock_spec']);
488     $values .= ', '.(int)$fields['workday_minutes'];
489     $values .= ', '.$mdb2->quote($fields['config']);
490     $values .= ', now(), '.$mdb2->quote($_SERVER['REMOTE_ADDR']).', '.$mdb2->quote($user->id);
491     $values .= ')';
492
493     $sql = 'insert into tt_groups '.$columns.$values;
494     $affected = $mdb2->exec($sql);
495     if (is_a($affected, 'PEAR_Error')) return false;
496
497     $group_id = $mdb2->lastInsertID('tt_groups', 'id');
498
499     // Update org_id with group_id.
500     // NOTE: Both export and import need an additional effort to properly operate on subgroups.
501     // Currently we are importing one group only, which becomes a top level group.
502     $sql = "update tt_groups set org_id = $group_id where org_id is NULL and id = $group_id";
503     $affected = $mdb2->exec($sql);
504     if (is_a($affected, 'PEAR_Error')) return false;
505
506     return $group_id;
507   }
508
509   // insertMonthlyQuota - a helper function to insert a monthly quota.
510   private function insertMonthlyQuota($group_id, $year, $month, $minutes) {
511     $mdb2 = getConnection();
512     $sql = "INSERT INTO tt_monthly_quotas (group_id, year, month, minutes) values ($group_id, $year, $month, $minutes)";
513     $affected = $mdb2->exec($sql);
514     return (!is_a($affected, 'PEAR_Error'));
515   }
516 }