]> git.tdb.fi Git - ext/subsurface.git/blob - parse-xml.c
Use XSLT file to open JDiveLog logs
[ext/subsurface.git] / parse-xml.c
1 #include <stdio.h>
2 #include <ctype.h>
3 #include <string.h>
4 #include <stdlib.h>
5 #include <errno.h>
6 #define __USE_XOPEN
7 #include <time.h>
8 #include <libxml/parser.h>
9 #include <libxml/tree.h>
10 #ifdef XSLT
11 #include <libxslt/transform.h>
12 #endif
13
14 #include "dive.h"
15 #include "uemis.h"
16
17 int verbose;
18
19 struct dive_table dive_table;
20
21 /*
22  * Add a dive into the dive_table array
23  */
24 void record_dive(struct dive *dive)
25 {
26         int nr = dive_table.nr, allocated = dive_table.allocated;
27         struct dive **dives = dive_table.dives;
28
29         if (nr >= allocated) {
30                 allocated = (nr + 32) * 3 / 2;
31                 dives = realloc(dives, allocated * sizeof(struct dive *));
32                 if (!dives)
33                         exit(1);
34                 dive_table.dives = dives;
35                 dive_table.allocated = allocated;
36         }
37         dives[nr] = fixup_dive(dive);
38         dive_table.nr = nr+1;
39 }
40
41 static void start_match(const char *type, const char *name, char *buffer)
42 {
43         if (verbose > 2)
44                 printf("Matching %s '%s' (%s)\n",
45                         type, name, buffer);
46 }
47
48 static void nonmatch(const char *type, const char *name, char *buffer)
49 {
50         if (verbose > 1)
51                 printf("Unable to match %s '%s' (%s)\n",
52                         type, name, buffer);
53         free(buffer);
54 }
55
56 typedef void (*matchfn_t)(char *buffer, void *);
57
58 static int match(const char *pattern, int plen,
59                  const char *name, int nlen,
60                  matchfn_t fn, char *buf, void *data)
61 {
62         if (plen > nlen)
63                 return 0;
64         if (memcmp(pattern, name + nlen - plen, plen))
65                 return 0;
66         fn(buf, data);
67         return 1;
68 }
69
70
71 struct units input_units;
72
73 /*
74  * We're going to default to SI units for input. Yes,
75  * technically the SI unit for pressure is Pascal, but
76  * we default to bar (10^5 pascal), which people
77  * actually use. Similarly, C instead of Kelvin.
78  */
79 const struct units SI_units = {
80         .length = METERS,
81         .volume = LITER,
82         .pressure = BAR,
83         .temperature = CELSIUS,
84         .weight = KG
85 };
86
87 const struct units IMPERIAL_units = {
88         .length = FEET,
89         .volume = CUFT,
90         .pressure = PSI,
91         .temperature = FAHRENHEIT,
92         .weight = LBS
93 };
94
95 /*
96  * Dive info as it is being built up..
97  */
98 static struct dive *dive;
99 static struct sample *sample;
100 static struct {
101         int active;
102         duration_t time;
103         int type, flags, value;
104         const char *name;
105 } event;
106 static struct tm tm;
107 static int cylinder_index;
108
109 static enum import_source {
110         UNKNOWN,
111         LIBDIVECOMPUTER,
112         SUUNTO,
113         UEMIS,
114         DIVINGLOG,
115         UDDF,
116 } import_source;
117
118 time_t utc_mktime(struct tm *tm)
119 {
120         static const int mdays[] = {
121             0, 31, 59, 90, 120, 151, 181, 212, 243, 273, 304, 334
122         };
123         int year = tm->tm_year;
124         int month = tm->tm_mon;
125         int day = tm->tm_mday;
126
127         /* First normalize relative to 1900 */
128         if (year < 70)
129                 year += 100;
130         else if (year > 1900)
131                 year -= 1900;
132
133         /* Normalized to Jan 1, 1970: unix time */
134         year -= 70;
135
136         if (year < 0 || year > 129) /* algo only works for 1970-2099 */
137                 return -1;
138         if (month < 0 || month > 11) /* array bounds */
139                 return -1;
140         if (month < 2 || (year + 2) % 4)
141                 day--;
142         if (tm->tm_hour < 0 || tm->tm_min < 0 || tm->tm_sec < 0)
143                 return -1;
144         return (year * 365 + (year + 1) / 4 + mdays[month] + day) * 24*60*60UL +
145                 tm->tm_hour * 60*60 + tm->tm_min * 60 + tm->tm_sec;
146 }
147
148 static void divedate(char *buffer, void *_when)
149 {
150         int d,m,y;
151         time_t *when = _when;
152         int success = 0;
153
154         success = tm.tm_sec | tm.tm_min | tm.tm_hour;
155         if (sscanf(buffer, "%d.%d.%d", &d, &m, &y) == 3) {
156                 tm.tm_year = y;
157                 tm.tm_mon = m-1;
158                 tm.tm_mday = d;
159         } else if (sscanf(buffer, "%d-%d-%d", &y, &m, &d) == 3) {
160                 tm.tm_year = y;
161                 tm.tm_mon = m-1;
162                 tm.tm_mday = d;
163         } else {
164                 fprintf(stderr, "Unable to parse date '%s'\n", buffer);
165                 success = 0;
166         }
167
168         if (success)
169                 *when = utc_mktime(&tm);
170
171         free(buffer);
172 }
173
174 static void divetime(char *buffer, void *_when)
175 {
176         int h,m,s = 0;
177         time_t *when = _when;
178
179         if (sscanf(buffer, "%d:%d:%d", &h, &m, &s) >= 2) {
180                 tm.tm_hour = h;
181                 tm.tm_min = m;
182                 tm.tm_sec = s;
183                 if (tm.tm_year)
184                         *when = utc_mktime(&tm);
185         }
186         free(buffer);
187 }
188
189 /* Libdivecomputer: "2011-03-20 10:22:38" */
190 static void divedatetime(char *buffer, void *_when)
191 {
192         int y,m,d;
193         int hr,min,sec;
194         time_t *when = _when;
195
196         if (sscanf(buffer, "%d-%d-%d %d:%d:%d",
197                 &y, &m, &d, &hr, &min, &sec) == 6) {
198                 tm.tm_year = y;
199                 tm.tm_mon = m-1;
200                 tm.tm_mday = d;
201                 tm.tm_hour = hr;
202                 tm.tm_min = min;
203                 tm.tm_sec = sec;
204                 *when = utc_mktime(&tm);
205         }
206         free(buffer);
207 }
208
209 union int_or_float {
210         double fp;
211 };
212
213 enum number_type {
214         NEITHER,
215         FLOAT
216 };
217
218 static enum number_type integer_or_float(char *buffer, union int_or_float *res)
219 {
220         char *end;
221         long val;
222         double fp;
223
224         /* Integer or floating point? */
225         val = strtol(buffer, &end, 10);
226         if (val < 0 || end == buffer)
227                 return NEITHER;
228
229         /* Looks like it might be floating point? */
230         if (*end == '.') {
231                 errno = 0;
232                 fp = strtod(buffer, &end);
233                 if (!errno) {
234                         res->fp = fp;
235                         return FLOAT;
236                 }
237         }
238
239         res->fp = val;
240         return FLOAT;
241 }
242
243 static void pressure(char *buffer, void *_press)
244 {
245         double mbar;
246         pressure_t *pressure = _press;
247         union int_or_float val;
248
249         switch (integer_or_float(buffer, &val)) {
250         case FLOAT:
251                 /* Just ignore zero values */
252                 if (!val.fp)
253                         break;
254                 switch (input_units.pressure) {
255                 case PASCAL:
256                         mbar = val.fp / 100;
257                         break;
258                 case BAR:
259                         /* Assume mbar, but if it's really small, it's bar */
260                         mbar = val.fp;
261                         if (mbar < 5000)
262                                 mbar = mbar * 1000;
263                         break;
264                 case PSI:
265                         mbar = val.fp * 68.95;
266                         break;
267                 }
268                 if (mbar > 5 && mbar < 500000) {
269                         pressure->mbar = mbar + 0.5;
270                         break;
271                 }
272         /* fallthrough */
273         default:
274                 printf("Strange pressure reading %s\n", buffer);
275         }
276         free(buffer);
277 }
278
279 static void depth(char *buffer, void *_depth)
280 {
281         depth_t *depth = _depth;
282         union int_or_float val;
283
284         switch (integer_or_float(buffer, &val)) {
285         case FLOAT:
286                 switch (input_units.length) {
287                 case METERS:
288                         depth->mm = val.fp * 1000 + 0.5;
289                         break;
290                 case FEET:
291                         depth->mm = val.fp * 304.8 + 0.5;
292                         break;
293                 }
294                 break;
295         default:
296                 printf("Strange depth reading %s\n", buffer);
297         }
298         free(buffer);
299 }
300
301 static void temperature(char *buffer, void *_temperature)
302 {
303         temperature_t *temperature = _temperature;
304         union int_or_float val;
305
306         switch (integer_or_float(buffer, &val)) {
307         case FLOAT:
308                 /* Ignore zero. It means "none" */
309                 if (!val.fp)
310                         break;
311                 /* Celsius */
312                 switch (input_units.temperature) {
313                 case KELVIN:
314                         temperature->mkelvin = val.fp * 1000;
315                         break;
316                 case CELSIUS:
317                         temperature->mkelvin = (val.fp + 273.15) * 1000 + 0.5;
318                         break;
319                 case FAHRENHEIT:
320                         temperature->mkelvin = (val.fp + 459.67) * 5000/9;
321                         break;
322                 }
323                 break;
324         default:
325                 printf("Strange temperature reading %s\n", buffer);
326         }
327         free(buffer);
328 }
329
330 static void sampletime(char *buffer, void *_time)
331 {
332         int i;
333         int min, sec;
334         duration_t *time = _time;
335
336         i = sscanf(buffer, "%d:%d", &min, &sec);
337         switch (i) {
338         case 1:
339                 sec = min;
340                 min = 0;
341         /* fallthrough */
342         case 2:
343                 time->seconds = sec + min*60;
344                 break;
345         default:
346                 printf("Strange sample time reading %s\n", buffer);
347         }
348         free(buffer);
349 }
350
351 static void duration(char *buffer, void *_time)
352 {
353         sampletime(buffer, _time);
354 }
355
356 static void percent(char *buffer, void *_fraction)
357 {
358         fraction_t *fraction = _fraction;
359         union int_or_float val;
360
361         switch (integer_or_float(buffer, &val)) {
362         case FLOAT:
363                 if (val.fp <= 100.0)
364                         fraction->permille = val.fp * 10 + 0.5;
365                 break;
366
367         default:
368                 printf("Strange percentage reading %s\n", buffer);
369                 break;
370         }
371         free(buffer);
372 }
373
374 static void gasmix(char *buffer, void *_fraction)
375 {
376         /* libdivecomputer does negative percentages. */
377         if (*buffer == '-')
378                 return;
379         if (cylinder_index < MAX_CYLINDERS)
380                 percent(buffer, _fraction);
381 }
382
383 static void gasmix_nitrogen(char *buffer, void *_gasmix)
384 {
385         /* Ignore n2 percentages. There's no value in them. */
386 }
387
388 static void cylindersize(char *buffer, void *_volume)
389 {
390         volume_t *volume = _volume;
391         union int_or_float val;
392
393         switch (integer_or_float(buffer, &val)) {
394         case FLOAT:
395                 volume->mliter = val.fp * 1000 + 0.5;
396                 break;
397
398         default:
399                 printf("Strange volume reading %s\n", buffer);
400                 break;
401         }
402         free(buffer);
403 }
404
405 static void utf8_string(char *buffer, void *_res)
406 {
407         *(char **)_res = buffer;
408 }
409
410 /*
411  * Uemis water_pressure. In centibar. And when converting to
412  * depth, I'm just going to always use saltwater, because I
413  * think "true depth" is just stupid. From a diving standpoint,
414  * "true depth" is pretty much completely pointless, unless
415  * you're doing some kind of underwater surveying work.
416  *
417  * So I give water depths in "pressure depth", always assuming
418  * salt water. So one atmosphere per 10m.
419  */
420 static void water_pressure(char *buffer, void *_depth)
421 {
422         depth_t *depth = _depth;
423         union int_or_float val;
424         double atm, cm;
425
426         switch (integer_or_float(buffer, &val)) {
427         case FLOAT:
428                 if (!val.fp)
429                         break;
430                 /* cbar to atm */
431                 atm = bar_to_atm(val.fp * 10);
432                 /*
433                  * atm to cm. Why not mm? The precision just isn't
434                  * there.
435                  */
436                 cm = 100 * atm + 0.5;
437                 if (cm > 0) {
438                         depth->mm = 10 * (long)cm;
439                         break;
440                 }
441         default:
442                 fprintf(stderr, "Strange water pressure '%s'\n", buffer);
443         }
444         free(buffer);
445 }
446
447 #define MATCH(pattern, fn, dest) \
448         match(pattern, strlen(pattern), name, len, fn, buf, dest)
449
450 static void get_index(char *buffer, void *_i)
451 {
452         int *i = _i;
453         *i = atoi(buffer);
454         free(buffer);
455 }
456
457 static void centibar(char *buffer, void *_pressure)
458 {
459         pressure_t *pressure = _pressure;
460         union int_or_float val;
461
462         switch (integer_or_float(buffer, &val)) {
463         case FLOAT:
464                 pressure->mbar = val.fp * 10 + 0.5;
465                 break;
466         default:
467                 fprintf(stderr, "Strange centibar pressure '%s'\n", buffer);
468         }
469         free(buffer);
470 }
471
472 static void decicelsius(char *buffer, void *_temp)
473 {
474         temperature_t *temp = _temp;
475         union int_or_float val;
476
477         switch (integer_or_float(buffer, &val)) {
478         case FLOAT:
479                 temp->mkelvin = (val.fp/10 + 273.15) * 1000 + 0.5;
480                 break;
481         default:
482                 fprintf(stderr, "Strange julian date: %s", buffer);
483         }
484         free(buffer);
485 }
486
487 static int uemis_fill_sample(struct sample *sample, const char *name, int len, char *buf)
488 {
489         return  MATCH(".reading.dive_time", sampletime, &sample->time) ||
490                 MATCH(".reading.water_pressure", water_pressure, &sample->depth) ||
491                 MATCH(".reading.active_tank", get_index, &sample->cylinderindex) ||
492                 MATCH(".reading.tank_pressure", centibar, &sample->cylinderpressure) ||
493                 MATCH(".reading.dive_temperature", decicelsius, &sample->temperature) ||
494                 0;
495 }
496
497 /*
498  * Divinglog is crazy. The temperatures are in celsius. EXCEPT
499  * for the sample temperatures, that are in Fahrenheit.
500  * WTF?
501  *
502  * Oh, and I think Diving Log *internally* probably kept them
503  * in celsius, because I'm seeing entries like
504  *
505  *      <Temp>32.0</Temp>
506  *
507  * in there. Which is freezing, aka 0 degC. I bet the "0" is
508  * what Diving Log uses for "no temperature".
509  *
510  * So throw away crap like that.
511  */
512 static void fahrenheit(char *buffer, void *_temperature)
513 {
514         temperature_t *temperature = _temperature;
515         union int_or_float val;
516
517         switch (integer_or_float(buffer, &val)) {
518         case FLOAT:
519                 /* Floating point equality is evil, but works for small integers */
520                 if (val.fp == 32.0)
521                         break;
522                 temperature->mkelvin = (val.fp + 459.67) * 5000/9;
523                 break;
524         default:
525                 fprintf(stderr, "Crazy Diving Log temperature reading %s\n", buffer);
526         }
527         free(buffer);
528 }
529
530 /*
531  * Did I mention how bat-shit crazy divinglog is? The sample
532  * pressures are in PSI. But the tank working pressure is in
533  * bar. WTF^2?
534  *
535  * Crazy stuff like this is why subsurface has everything in
536  * these inconvenient typed structures, and you have to say
537  * "pressure->mbar" to get the actual value. Exactly so that
538  * you can never have unit confusion.
539  */
540 static void psi(char *buffer, void *_pressure)
541 {
542         pressure_t *pressure = _pressure;
543         union int_or_float val;
544
545         switch (integer_or_float(buffer, &val)) {
546         case FLOAT:
547                 pressure->mbar = val.fp * 68.95 + 0.5;
548                 break;
549         default:
550                 fprintf(stderr, "Crazy Diving Log PSI reading %s\n", buffer);
551         }
552         free(buffer);
553 }
554
555 static int divinglog_fill_sample(struct sample *sample, const char *name, int len, char *buf)
556 {
557         return  MATCH(".p.time", sampletime, &sample->time) ||
558                 MATCH(".p.depth", depth, &sample->depth) ||
559                 MATCH(".p.temp", fahrenheit, &sample->temperature) ||
560                 MATCH(".p.press1", psi, &sample->cylinderpressure) ||
561                 0;
562 }
563
564 static int uddf_fill_sample(struct sample *sample, const char *name, int len, char *buf)
565 {
566         return  MATCH(".divetime", sampletime, &sample->time) ||
567                 MATCH(".depth", depth, &sample->depth) ||
568                 MATCH(".temperature", temperature, &sample->temperature) ||
569                 0;
570 }
571
572 static void eventtime(char *buffer, void *_duration)
573 {
574         duration_t *duration = _duration;
575         sampletime(buffer, duration);
576         if (sample)
577                 duration->seconds += sample->time.seconds;
578 }
579
580 static void try_to_fill_event(const char *name, char *buf)
581 {
582         int len = strlen(name);
583
584         start_match("event", name, buf);
585         if (MATCH(".event", utf8_string, &event.name))
586                 return;
587         if (MATCH(".name", utf8_string, &event.name))
588                 return;
589         if (MATCH(".time", eventtime, &event.time))
590                 return;
591         if (MATCH(".type", get_index, &event.type))
592                 return;
593         if (MATCH(".flags", get_index, &event.flags))
594                 return;
595         if (MATCH(".value", get_index, &event.value))
596                 return;
597         nonmatch("event", name, buf);
598 }
599
600 /* We're in samples - try to convert the random xml value to something useful */
601 static void try_to_fill_sample(struct sample *sample, const char *name, char *buf)
602 {
603         int len = strlen(name);
604
605         start_match("sample", name, buf);
606         if (MATCH(".sample.pressure", pressure, &sample->cylinderpressure))
607                 return;
608         if (MATCH(".sample.cylpress", pressure, &sample->cylinderpressure))
609                 return;
610         if (MATCH(".sample.cylinderindex", get_index, &sample->cylinderindex))
611                 return;
612         if (MATCH(".sample.depth", depth, &sample->depth))
613                 return;
614         if (MATCH(".sample.temp", temperature, &sample->temperature))
615                 return;
616         if (MATCH(".sample.temperature", temperature, &sample->temperature))
617                 return;
618         if (MATCH(".sample.sampletime", sampletime, &sample->time))
619                 return;
620         if (MATCH(".sample.time", sampletime, &sample->time))
621                 return;
622
623         switch (import_source) {
624         case UEMIS:
625                 if (uemis_fill_sample(sample, name, len, buf))
626                         return;
627                 break;
628
629         case DIVINGLOG:
630                 if (divinglog_fill_sample(sample, name, len, buf))
631                         return;
632                 break;
633
634         case UDDF:
635                 if (uddf_fill_sample(sample, name, len, buf))
636                         return;
637                 break;
638
639         default:
640                 break;
641         }
642
643         nonmatch("sample", name, buf);
644 }
645
646 /*
647  * Crazy suunto xml. Look at how those o2/he things match up.
648  */
649 static int suunto_dive_match(struct dive **divep, const char *name, int len, char *buf)
650 {
651         struct dive *dive = *divep;
652
653         return  MATCH(".o2pct", percent, &dive->cylinder[0].gasmix.o2) ||
654                 MATCH(".hepct_0", percent, &dive->cylinder[0].gasmix.he) ||
655                 MATCH(".o2pct_2", percent, &dive->cylinder[1].gasmix.o2) ||
656                 MATCH(".hepct_1", percent, &dive->cylinder[1].gasmix.he) ||
657                 MATCH(".o2pct_3", percent, &dive->cylinder[2].gasmix.o2) ||
658                 MATCH(".hepct_2", percent, &dive->cylinder[2].gasmix.he) ||
659                 MATCH(".o2pct_4", percent, &dive->cylinder[3].gasmix.o2) ||
660                 MATCH(".hepct_3", percent, &dive->cylinder[3].gasmix.he) ||
661                 MATCH(".cylindersize", cylindersize, &dive->cylinder[0].type.size) ||
662                 MATCH(".cylinderworkpressure", pressure, &dive->cylinder[0].type.workingpressure) ||
663                 0;
664 }
665
666 static const char *country, *city;
667
668 static void divinglog_place(char *place, void *_location)
669 {
670         char **location = _location;
671         char buffer[256], *p;
672         int len;
673
674         len = snprintf(buffer, sizeof(buffer),
675                 "%s%s%s%s%s",
676                 place,
677                 city ? ", " : "",
678                 city ? city : "",
679                 country ? ", " : "",
680                 country ? country : "");
681
682         p = malloc(len+1);
683         memcpy(p, buffer, len+1);
684         *location = p;
685
686         city = NULL;
687         country = NULL;
688 }
689
690 static int divinglog_dive_match(struct dive **divep, const char *name, int len, char *buf)
691 {
692         struct dive *dive = *divep;
693
694         return  MATCH(".divedate", divedate, &dive->when) ||
695                 MATCH(".entrytime", divetime, &dive->when) ||
696                 MATCH(".depth", depth, &dive->maxdepth) ||
697                 MATCH(".tanksize", cylindersize, &dive->cylinder[0].type.size) ||
698                 MATCH(".presw", pressure, &dive->cylinder[0].type.workingpressure) ||
699                 MATCH(".comments", utf8_string, &dive->notes) ||
700                 MATCH(".buddy.names", utf8_string, &dive->buddy) ||
701                 MATCH(".country.name", utf8_string, &country) ||
702                 MATCH(".city.name", utf8_string, &city) ||
703                 MATCH(".place.name", divinglog_place, &dive->location) ||
704                 0;
705 }
706
707 static int buffer_value(char *buffer)
708 {
709         int val = atoi(buffer);
710         free(buffer);
711         return val;
712 }
713
714 static void uemis_length_unit(char *buffer, void *_unused)
715 {
716         input_units.length = buffer_value(buffer) ? FEET : METERS;
717 }
718
719 static void uemis_volume_unit(char *buffer, void *_unused)
720 {
721         input_units.volume = buffer_value(buffer) ? CUFT : LITER;
722 }
723
724 static void uemis_pressure_unit(char *buffer, void *_unused)
725 {
726 #if 0
727         input_units.pressure = buffer_value(buffer) ? PSI : BAR;
728 #endif
729 }
730
731 static void uemis_temperature_unit(char *buffer, void *_unused)
732 {
733         input_units.temperature = buffer_value(buffer) ? FAHRENHEIT : CELSIUS;
734 }
735
736 static void uemis_weight_unit(char *buffer, void *_unused)
737 {
738         input_units.weight = buffer_value(buffer) ? LBS : KG;
739 }
740
741 static void uemis_time_unit(char *buffer, void *_unused)
742 {
743 }
744
745 static void uemis_date_unit(char *buffer, void *_unused)
746 {
747 }
748
749 /* Modified julian day, yay! */
750 static void uemis_date_time(char *buffer, void *_when)
751 {
752         time_t *when = _when;
753         union int_or_float val;
754
755         switch (integer_or_float(buffer, &val)) {
756         case FLOAT:
757                 *when = (val.fp - 40587) * 86400;
758                 break;
759         default:
760                 fprintf(stderr, "Strange julian date: %s", buffer);
761         }
762         free(buffer);
763 }
764
765 /*
766  * Uemis doesn't know time zones. You need to do them as
767  * minutes, not hours.
768  *
769  * But that's ok, we don't track timezones yet either. We
770  * just turn everything into "localtime expressed as UTC".
771  */
772 static void uemis_time_zone(char *buffer, void *_when)
773 {
774 #if 0 /* seems like this is only used to display it correctly
775        * the stored time appears to be UTC */
776
777         time_t *when = _when;
778         signed char tz = atoi(buffer);
779
780         *when += tz * 3600;
781 #endif
782 }
783
784 static void uemis_ts(char *buffer, void *_when)
785 {
786         struct tm tm;
787         time_t *when = _when;
788
789         memset(&tm, 0, sizeof(tm));
790         sscanf(buffer,"%d-%d-%dT%d:%d:%d",
791                 &tm.tm_year, &tm.tm_mon, &tm.tm_mday,
792                 &tm.tm_hour, &tm.tm_min, &tm.tm_sec);
793         tm.tm_mon  -= 1;
794         tm.tm_year -= 1900;
795         *when = utc_mktime(&tm);
796
797 }
798
799 static void uemis_duration(char *buffer, void *_duration)
800 {
801         duration_t *duration = _duration;
802         duration->seconds = atof(buffer) * 60 + 0.5;
803 }
804
805 /* 0 - air ; 1 - nitrox1 ; 2 - nitrox2 ; 3 = nitrox3 */
806 static int uemis_gas_template;
807
808 /*
809  * Christ. Uemis tank data is a total mess.
810  *
811  * We're passed a "virtual cylinder" (0 - 6) for the different
812  * Uemis tank cases ("air", "nitrox_1", "nitrox_2.{bottom,deco}"
813  * and "nitrox_3.{bottom,deco,travel}". We need to turn that
814  * into the actual cylinder data depending on the gas template,
815  * and ignore the ones that are irrelevant for that template.
816  *
817  * So for "template 2" (nitrox_2), we ignore virtual tanks 0-1
818  * (which are "air" and "nitrox_1" respectively), and tanks 4-6
819  * (which are the three "nitrox_3" tanks), and we turn virtual
820  * tanks 2/3 into actual tanks 0/1.
821  *
822  * Confused yet?
823  */
824 static int uemis_cylinder_index(void *_cylinder)
825 {
826         cylinder_t *cylinder = _cylinder;
827         unsigned int index = cylinder - dive->cylinder;
828
829         if (index > 6) {
830                 fprintf(stderr, "Uemis cylinder pointer calculations broken\n");
831                 return -1;
832         }
833         switch(uemis_gas_template) {
834         case 1: /* Dive uses tank 1 */
835                 index -= 1;
836         /* Fallthrough */
837         case 0: /* Dive uses tank 0 */
838                 if (index)
839                         index = -1;
840                 break;
841         case 2: /* Dive uses tanks 2-3 */
842                 index -= 2;
843                 if (index > 1)
844                         index = -1;
845                 break;
846         case 3: /* Dive uses tanks 4-6 */
847                 index -= 4;
848                 if (index > 2)
849                         index = -1;
850                 break;
851         }
852         return index;
853 }
854
855 static void uemis_cylindersize(char *buffer, void *_cylinder)
856 {
857         int index = uemis_cylinder_index(_cylinder);
858         if (index >= 0)
859                 cylindersize(buffer, &dive->cylinder[index].type.size);
860 }
861
862 static void uemis_percent(char *buffer, void *_cylinder)
863 {
864         int index = uemis_cylinder_index(_cylinder);
865         if (index >= 0)
866                 percent(buffer, &dive->cylinder[index].gasmix.o2);
867 }
868
869 static int uemis_dive_match(struct dive **divep, const char *name, int len, char *buf)
870 {
871         struct dive *dive = *divep;
872
873         return  MATCH(".units.length", uemis_length_unit, &input_units) ||
874                 MATCH(".units.volume", uemis_volume_unit, &input_units) ||
875                 MATCH(".units.pressure", uemis_pressure_unit, &input_units) ||
876                 MATCH(".units.temperature", uemis_temperature_unit, &input_units) ||
877                 MATCH(".units.weight", uemis_weight_unit, &input_units) ||
878                 MATCH(".units.time", uemis_time_unit, &input_units) ||
879                 MATCH(".units.date", uemis_date_unit, &input_units) ||
880                 MATCH(".date_time", uemis_date_time, &dive->when) ||
881                 MATCH(".time_zone", uemis_time_zone, &dive->when) ||
882                 MATCH(".ambient.temperature", decicelsius, &dive->airtemp) ||
883                 MATCH(".gas.template", get_index, &uemis_gas_template) ||
884                 MATCH(".air.bottom_tank.size", uemis_cylindersize, dive->cylinder + 0) ||
885                 MATCH(".air.bottom_tank.oxygen", uemis_percent, dive->cylinder + 0) ||
886                 MATCH(".nitrox_1.bottom_tank.size", uemis_cylindersize, dive->cylinder + 1) ||
887                 MATCH(".nitrox_1.bottom_tank.oxygen", uemis_percent, dive->cylinder + 1) ||
888                 MATCH(".nitrox_2.bottom_tank.size", uemis_cylindersize, dive->cylinder + 2) ||
889                 MATCH(".nitrox_2.bottom_tank.oxygen", uemis_percent, dive->cylinder + 2) ||
890                 MATCH(".nitrox_2.deco_tank.size", uemis_cylindersize, dive->cylinder + 3) ||
891                 MATCH(".nitrox_2.deco_tank.oxygen", uemis_percent, dive->cylinder + 3) ||
892                 MATCH(".nitrox_3.bottom_tank.size", uemis_cylindersize, dive->cylinder + 4) ||
893                 MATCH(".nitrox_3.bottom_tank.oxygen", uemis_percent, dive->cylinder + 4) ||
894                 MATCH(".nitrox_3.deco_tank.size", uemis_cylindersize, dive->cylinder + 5) ||
895                 MATCH(".nitrox_3.deco_tank.oxygen", uemis_percent, dive->cylinder + 5) ||
896                 MATCH(".nitrox_3.travel_tank.size", uemis_cylindersize, dive->cylinder + 6) ||
897                 MATCH(".nitrox_3.travel_tank.oxygen", uemis_percent, dive->cylinder + 6) ||
898                 MATCH(".dive.val.float", uemis_duration, &dive->duration) ||
899                 MATCH(".dive.val.ts", uemis_ts, &dive->when) ||
900                 MATCH(".dive.val.bin", uemis_parse_divelog_binary, divep) ||
901                 0;
902 }
903
904 /*
905  * Uddf specifies ISO 8601 time format.
906  *
907  * There are many variations on that. This handles the useful cases.
908  */
909 static void uddf_datetime(char *buffer, void *_when)
910 {
911         char c;
912         int y,m,d,hh,mm,ss;
913         time_t *when = _when;
914         struct tm tm = { 0 };
915         int i;
916
917         i = sscanf(buffer, "%d-%d-%d%c%d:%d:%d", &y, &m, &d, &c, &hh, &mm, &ss);
918         if (i == 7)
919                 goto success;
920         ss = 0;
921         if (i == 6)
922                 goto success;
923
924         i = sscanf(buffer, "%04d%02d%02d%c%02d%02d%02d", &y, &m, &d, &c, &hh, &mm, &ss);
925         if (i == 7)
926                 goto success;
927         ss = 0;
928         if (i == 6)
929                 goto success;
930 bad_date:
931         printf("Bad date time %s\n", buffer);
932         free(buffer);
933         return;
934
935 success:
936         if (c != 'T' && c != ' ')
937                 goto bad_date;
938         tm.tm_year = y;
939         tm.tm_mon = m - 1;
940         tm.tm_mday = d;
941         tm.tm_hour = hh;
942         tm.tm_min = mm;
943         tm.tm_sec = ss;
944         *when = utc_mktime(&tm);
945         free(buffer);
946 }
947
948 static int uddf_dive_match(struct dive **divep, const char *name, int len, char *buf)
949 {
950         struct dive *dive = *divep;
951
952         return  MATCH(".datetime", uddf_datetime, &dive->when) ||
953                 MATCH(".diveduration", duration, &dive->duration) ||
954                 MATCH(".greatestdepth", depth, &dive->maxdepth) ||
955                 0;
956 }
957
958 static void gps_location(char *buffer, void *_dive)
959 {
960         int i;
961         struct dive *dive = _dive;
962         double latitude, longitude;
963
964         i = sscanf(buffer, "%lf %lf", &latitude, &longitude);
965         if (i == 2) {
966                 dive->latitude = latitude;
967                 dive->longitude = longitude;
968         }
969         free(buffer);
970 }
971
972 /* We're in the top-level dive xml. Try to convert whatever value to a dive value */
973 static void try_to_fill_dive(struct dive **divep, const char *name, char *buf)
974 {
975         int len = strlen(name);
976
977         start_match("dive", name, buf);
978
979         switch (import_source) {
980         case SUUNTO:
981                 if (suunto_dive_match(divep, name, len, buf))
982                         return;
983                 break;
984
985         case UEMIS:
986                 if (uemis_dive_match(divep, name, len, buf))
987                         return;
988                 break;
989
990         case DIVINGLOG:
991                 if (divinglog_dive_match(divep, name, len, buf))
992                         return;
993                 break;
994
995         case UDDF:
996                 if (uddf_dive_match(divep, name, len, buf))
997                         return;
998                 break;
999
1000         default:
1001                 break;
1002         }
1003
1004         struct dive *dive = *divep;
1005
1006         if (MATCH(".number", get_index, &dive->number))
1007                 return;
1008         if (MATCH(".date", divedate, &dive->when))
1009                 return;
1010         if (MATCH(".time", divetime, &dive->when))
1011                 return;
1012         if (MATCH(".datetime", divedatetime, &dive->when))
1013                 return;
1014         if (MATCH(".maxdepth", depth, &dive->maxdepth))
1015                 return;
1016         if (MATCH(".meandepth", depth, &dive->meandepth))
1017                 return;
1018         if (MATCH(".depth.max", depth, &dive->maxdepth))
1019                 return;
1020         if (MATCH(".depth.mean", depth, &dive->meandepth))
1021                 return;
1022         if (MATCH(".duration", duration, &dive->duration))
1023                 return;
1024         if (MATCH(".divetime", duration, &dive->duration))
1025                 return;
1026         if (MATCH(".divetimesec", duration, &dive->duration))
1027                 return;
1028         if (MATCH(".surfacetime", duration, &dive->surfacetime))
1029                 return;
1030         if (MATCH(".airtemp", temperature, &dive->airtemp))
1031                 return;
1032         if (MATCH(".watertemp", temperature, &dive->watertemp))
1033                 return;
1034         if (MATCH(".temperature.air", temperature, &dive->airtemp))
1035                 return;
1036         if (MATCH(".temperature.water", temperature, &dive->watertemp))
1037                 return;
1038         if (MATCH(".cylinderstartpressure", pressure, &dive->cylinder[0].start))
1039                 return;
1040         if (MATCH(".cylinderendpressure", pressure, &dive->cylinder[0].end))
1041                 return;
1042         if (MATCH(".gps", gps_location, dive))
1043                 return;
1044         if (MATCH(".location", utf8_string, &dive->location))
1045                 return;
1046         if (MATCH(".notes", utf8_string, &dive->notes))
1047                 return;
1048         if (MATCH(".divemaster", utf8_string, &dive->divemaster))
1049                 return;
1050         if (MATCH(".buddy", utf8_string, &dive->buddy))
1051                 return;
1052
1053         if (MATCH(".cylinder.size", cylindersize, &dive->cylinder[cylinder_index].type.size))
1054                 return;
1055         if (MATCH(".cylinder.workpressure", pressure, &dive->cylinder[cylinder_index].type.workingpressure))
1056                 return;
1057         if (MATCH(".cylinder.description", utf8_string, &dive->cylinder[cylinder_index].type.description))
1058                 return;
1059         if (MATCH(".cylinder.start", pressure, &dive->cylinder[cylinder_index].start))
1060                 return;
1061         if (MATCH(".cylinder.end", pressure, &dive->cylinder[cylinder_index].end))
1062                 return;
1063
1064         if (MATCH(".o2", gasmix, &dive->cylinder[cylinder_index].gasmix.o2))
1065                 return;
1066         if (MATCH(".n2", gasmix_nitrogen, &dive->cylinder[cylinder_index].gasmix))
1067                 return;
1068         if (MATCH(".he", gasmix, &dive->cylinder[cylinder_index].gasmix.he))
1069                 return;
1070
1071         nonmatch("dive", name, buf);
1072 }
1073
1074 /*
1075  * File boundaries are dive boundaries. But sometimes there are
1076  * multiple dives per file, so there can be other events too that
1077  * trigger a "new dive" marker and you may get some nesting due
1078  * to that. Just ignore nesting levels.
1079  */
1080 static void dive_start(void)
1081 {
1082         if (dive)
1083                 return;
1084         dive = alloc_dive();
1085         memset(&tm, 0, sizeof(tm));
1086 }
1087
1088 static void sanitize_gasmix(struct gasmix *mix)
1089 {
1090         unsigned int o2, he;
1091
1092         o2 = mix->o2.permille;
1093         he = mix->he.permille;
1094
1095         /* Regular air: leave empty */
1096         if (!he) {
1097                 if (!o2)
1098                         return;
1099                 /* 20.9% or 21% O2 is just air */
1100                 if (o2 >= 209 && o2 <= 210) {
1101                         mix->o2.permille = 0;
1102                         return;
1103                 }
1104         }
1105
1106         /* Sane mix? */
1107         if (o2 <= 1000 && he <= 1000 && o2+he <= 1000)
1108                 return;
1109         fprintf(stderr, "Odd gasmix: %d O2 %d He\n", o2, he);
1110         memset(mix, 0, sizeof(*mix));
1111 }
1112
1113 /*
1114  * See if the size/workingpressure looks like some standard cylinder
1115  * size, eg "AL80".
1116  */
1117 static void match_standard_cylinder(cylinder_type_t *type)
1118 {
1119         double cuft;
1120         int psi, len;
1121         const char *fmt;
1122         char buffer[20], *p;
1123
1124         /* Do we already have a cylinder description? */
1125         if (type->description)
1126                 return;
1127
1128         cuft = ml_to_cuft(type->size.mliter);
1129         cuft *= to_ATM(type->workingpressure);
1130         psi = to_PSI(type->workingpressure);
1131
1132         switch (psi) {
1133         case 2300 ... 2500:     /* 2400 psi: LP tank */
1134                 fmt = "LP%d";
1135                 break;
1136         case 2600 ... 2700:     /* 2640 psi: LP+10% */
1137                 fmt = "LP%d";
1138                 break;
1139         case 2900 ... 3100:     /* 3000 psi: ALx tank */
1140                 fmt = "AL%d";
1141                 break;
1142         case 3400 ... 3500:     /* 3442 psi: HP tank */
1143                 fmt = "HP%d";
1144                 break;
1145         case 3700 ... 3850:     /* HP+10% */
1146                 fmt = "HP%d+";
1147                 break;
1148         default:
1149                 return;
1150         }
1151         len = snprintf(buffer, sizeof(buffer), fmt, (int) (cuft+0.5));
1152         p = malloc(len+1);
1153         if (!p)
1154                 return;
1155         memcpy(p, buffer, len+1);
1156         type->description = p;
1157 }
1158
1159
1160 /*
1161  * There are two ways to give cylinder size information:
1162  *  - total amount of gas in cuft (depends on working pressure and physical size)
1163  *  - physical size
1164  *
1165  * where "physical size" is the one that actually matters and is sane.
1166  *
1167  * We internally use physical size only. But we save the workingpressure
1168  * so that we can do the conversion if required.
1169  */
1170 static void sanitize_cylinder_type(cylinder_type_t *type)
1171 {
1172         double volume_of_air, atm, volume;
1173
1174         /* If we have no working pressure, it had *better* be just a physical size! */
1175         if (!type->workingpressure.mbar)
1176                 return;
1177
1178         /* No size either? Nothing to go on */
1179         if (!type->size.mliter)
1180                 return;
1181
1182         if (input_units.volume == CUFT || import_source == SUUNTO) {
1183                 /* confusing - we don't really start from ml but millicuft !*/
1184                 volume_of_air = cuft_to_l(type->size.mliter);
1185                 atm = to_ATM(type->workingpressure);            /* working pressure in atm */
1186                 volume = volume_of_air / atm;                   /* milliliters at 1 atm: "true size" */
1187                 type->size.mliter = volume + 0.5;
1188         }
1189
1190         /* Ok, we have both size and pressure: try to match a description */
1191         match_standard_cylinder(type);
1192 }
1193
1194 static void sanitize_cylinder_info(struct dive *dive)
1195 {
1196         int i;
1197
1198         for (i = 0; i < MAX_CYLINDERS; i++) {
1199                 sanitize_gasmix(&dive->cylinder[i].gasmix);
1200                 sanitize_cylinder_type(&dive->cylinder[i].type);
1201         }
1202 }
1203
1204 static void dive_end(void)
1205 {
1206         if (!dive)
1207                 return;
1208         sanitize_cylinder_info(dive);
1209         record_dive(dive);
1210         dive = NULL;
1211         cylinder_index = 0;
1212 }
1213
1214 static void event_start(void)
1215 {
1216         memset(&event, 0, sizeof(event));
1217         event.active = 1;
1218 }
1219
1220 static void event_end(void)
1221 {
1222         if (event.name && strcmp(event.name, "surface") != 0)
1223                 add_event(dive, event.time.seconds, event.type, event.flags, event.value, event.name);
1224         event.active = 0;
1225 }
1226
1227 static void cylinder_start(void)
1228 {
1229 }
1230
1231 static void cylinder_end(void)
1232 {
1233         cylinder_index++;
1234 }
1235
1236 static void sample_start(void)
1237 {
1238         sample = prepare_sample(&dive);
1239 }
1240
1241 static void sample_end(void)
1242 {
1243         if (!dive)
1244                 return;
1245
1246         finish_sample(dive, sample);
1247         sample = NULL;
1248 }
1249
1250 static void entry(const char *name, int size, const char *raw)
1251 {
1252         char *buf = malloc(size+1);
1253
1254         if (!buf)
1255                 return;
1256         memcpy(buf, raw, size);
1257         buf[size] = 0;
1258         if (event.active) {
1259                 try_to_fill_event(name, buf);
1260                 return;
1261         }
1262         if (sample) {
1263                 try_to_fill_sample(sample, name, buf);
1264                 return;
1265         }
1266         if (dive) {
1267                 try_to_fill_dive(&dive, name, buf);
1268                 return;
1269         }
1270 }
1271
1272 static const char *nodename(xmlNode *node, char *buf, int len)
1273 {
1274         if (!node || !node->name)
1275                 return "root";
1276
1277         buf += len;
1278         *--buf = 0;
1279         len--;
1280
1281         for(;;) {
1282                 const char *name = node->name;
1283                 int i = strlen(name);
1284                 while (--i >= 0) {
1285                         unsigned char c = name[i];
1286                         *--buf = tolower(c);
1287                         if (!--len)
1288                                 return buf;
1289                 }
1290                 node = node->parent;
1291                 if (!node || !node->name)
1292                         return buf;
1293                 *--buf = '.';
1294                 if (!--len)
1295                         return buf;
1296         }
1297 }
1298
1299 #define MAXNAME 64
1300
1301 static void visit_one_node(xmlNode *node)
1302 {
1303         int len;
1304         const unsigned char *content;
1305         char buffer[MAXNAME];
1306         const char *name;
1307
1308         content = node->content;
1309         if (!content)
1310                 return;
1311
1312         /* Trim whitespace at beginning */
1313         while (isspace(*content))
1314                 content++;
1315
1316         /* Trim whitespace at end */
1317         len = strlen(content);
1318         while (len && isspace(content[len-1]))
1319                 len--;
1320
1321         if (!len)
1322                 return;
1323
1324         /* Don't print out the node name if it is "text" */
1325         if (!strcmp(node->name, "text"))
1326                 node = node->parent;
1327
1328         name = nodename(node, buffer, sizeof(buffer));
1329
1330         entry(name, len, content);
1331 }
1332
1333 static void traverse(xmlNode *root);
1334
1335 static void traverse_properties(xmlNode *node)
1336 {
1337         xmlAttr *p;
1338
1339         for (p = node->properties; p; p = p->next)
1340                 traverse(p->children);
1341 }
1342
1343 static void visit(xmlNode *n)
1344 {
1345         visit_one_node(n);
1346         traverse_properties(n);
1347         traverse(n->children);
1348 }
1349
1350 static void suunto_importer(void)
1351 {
1352         import_source = SUUNTO;
1353         input_units = SI_units;
1354 }
1355
1356 static void uemis_importer(void)
1357 {
1358         import_source = UEMIS;
1359         input_units = SI_units;
1360 }
1361
1362 static void DivingLog_importer(void)
1363 {
1364         import_source = DIVINGLOG;
1365
1366         /*
1367          * Diving Log units are really strange.
1368          *
1369          * Temperatures are in C, except in samples,
1370          * when they are in Fahrenheit. Depths are in
1371          * meters, an dpressure is in PSI in the samples,
1372          * but in bar when it comes to working pressure.
1373          *
1374          * Crazy f*%^ morons.
1375          */
1376         input_units = SI_units;
1377 }
1378
1379 static void uddf_importer(void)
1380 {
1381         import_source = UDDF;
1382         input_units = SI_units;
1383         input_units.pressure = PASCAL;
1384         input_units.temperature = KELVIN;
1385 }
1386
1387 /*
1388  * I'm sure this could be done as some fancy DTD rules.
1389  * It's just not worth the headache.
1390  */
1391 static struct nesting {
1392         const char *name;
1393         void (*start)(void), (*end)(void);
1394 } nesting[] = {
1395         { "dive", dive_start, dive_end },
1396         { "Dive", dive_start, dive_end },
1397         { "sample", sample_start, sample_end },
1398         { "waypoint", sample_start, sample_end },
1399         { "SAMPLE", sample_start, sample_end },
1400         { "reading", sample_start, sample_end },
1401         { "event", event_start, event_end },
1402         { "gasmix", cylinder_start, cylinder_end },
1403         { "cylinder", cylinder_start, cylinder_end },
1404         { "P", sample_start, sample_end },
1405
1406         /* Import type recognition */
1407         { "SUUNTO", suunto_importer },
1408         { "Divinglog", DivingLog_importer },
1409         { "pre_dive", uemis_importer },
1410         { "dives", uemis_importer },
1411         { "uddf", uddf_importer },
1412
1413         { NULL, }
1414 };
1415
1416 static void traverse(xmlNode *root)
1417 {
1418         xmlNode *n;
1419
1420         for (n = root; n; n = n->next) {
1421                 struct nesting *rule = nesting;
1422
1423                 do {
1424                         if (!strcmp(rule->name, n->name))
1425                                 break;
1426                         rule++;
1427                 } while (rule->name);
1428
1429                 if (rule->start)
1430                         rule->start();
1431                 visit(n);
1432                 if (rule->end)
1433                         rule->end();
1434         }
1435 }
1436
1437 /* Per-file reset */
1438 static void reset_all(void)
1439 {
1440         /*
1441          * We reset the units for each file. You'd think it was
1442          * a per-dive property, but I'm not going to trust people
1443          * to do per-dive setup. If the xml does have per-dive
1444          * data within one file, we might have to reset it per
1445          * dive for that format.
1446          */
1447         input_units = SI_units;
1448         import_source = UNKNOWN;
1449 }
1450
1451 void parse_xml_file(const char *filename, GError **error)
1452 {
1453         xmlDoc *doc;
1454
1455         doc = xmlReadFile(filename, NULL, 0);
1456         if (!doc) {
1457                 fprintf(stderr, "Failed to parse '%s'.\n", filename);
1458                 if (error != NULL)
1459                 {
1460                         *error = g_error_new(g_quark_from_string("subsurface"),
1461                                              DIVE_ERROR_PARSE,
1462                                              "Failed to parse '%s'",
1463                                              filename);
1464                 }
1465                 return;
1466         }
1467         /* we assume that the last (or only) filename passed as argument is a 
1468          * great filename to use as default when saving the dives */ 
1469         set_filename(filename);
1470         reset_all();
1471         dive_start();
1472 #ifdef XSLT
1473         doc = test_xslt_transforms(doc);
1474 #endif
1475         traverse(xmlDocGetRootElement(doc));
1476         dive_end();
1477         xmlFreeDoc(doc);
1478         xmlCleanupParser();
1479 }
1480
1481 void parse_xml_init(void)
1482 {
1483         LIBXML_TEST_VERSION
1484 }
1485
1486 #ifdef XSLT
1487 xmlDoc *test_xslt_transforms(xmlDoc *doc)
1488 {
1489         xmlDoc *transformed;
1490         xsltStylesheetPtr xslt = NULL;
1491         xmlNode *root_element = xmlDocGetRootElement(doc);
1492         if (strcasecmp(root_element->name, "JDiveLog") == 0) {
1493                 xmlSubstituteEntitiesDefault(1);
1494                 xslt = xsltParseStylesheetFile(XSLT G_DIR_SEPARATOR_S "jdivelog2subsurface.xslt");
1495                 if (xslt == NULL)
1496                         return doc;
1497                 transformed = xsltApplyStylesheet(xslt, doc, NULL);
1498                 xmlFreeDoc(doc);
1499                 xsltFreeStylesheet(xslt);
1500                 return transformed;
1501         }
1502         return doc;
1503 }
1504 #endif