/[socialtext-import]/tamtam/tamtam2socialtext.pl
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /tamtam/tamtam2socialtext.pl

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 13 by dpavlin, Wed Dec 12 17:14:58 2007 UTC revision 17 by dpavlin, Wed Dec 12 18:46:04 2007 UTC
# Line 9  use Regexp::Common qw/balanced/; Line 9  use Regexp::Common qw/balanced/;
9  use Socialtext::Resting;  use Socialtext::Resting;
10  use Encode;  use Encode;
11  use HTTP::Date;  use HTTP::Date;
12    use POSIX qw/strftime/;
13  use Data::Dump qw/dump/;  use Data::Dump qw/dump/;
14    
15    my $debug = 1;
16  my $max = 999;  my $max = 999;
17    
18  my $page;  my $page;
# Line 30  find({ Line 32  find({
32    
33                  return if $name =~ m/^TamSystem/;                  return if $name =~ m/^TamSystem/;
34    
35                  my $date =  $ref->{meta}->{LastModified};                  my $date =  $ref->{meta}->{LastModified}->{value};
36                  if ( ! $date ) {                  if ( ! $date ) {
37                          warn "SKIP: no LastModified in $path $name";                          warn "SKIP: no LastModified in $path $name";
38                          return;                          return;
39                  }                  }
40    
41                    my $w = $ref->{widgets}->{widget};
42    
43                  my $data =                  my $data =
44                          $ref->{widgets}->{widget}->{data} ||                          defined( $w->{data} )           ? $w->{data} :
45                          $ref->{widgets}->{widget}->{Body}->{data} ||                          defined( $w->{Body}->{date} )   ? $w->{Body}->{date} :
46                          die "no data in $path ",dump( $ref );                          die "no data in $path ",dump( $ref );
47    
48                  $data .= qq{                  # empty data is returned like empty hash. yack.
49  ----                  $data = "\n" if ref($data) eq 'HASH' and ! keys %$data;
   
 Original: http://www.razmjenavjestina.org/$path  
 };  
50    
51                  $page->{ $name } = [ $data, $date ];                  $page->{ $name } = {
52                            content => convert_markup( $data ),
53                            date => convert_date( $date ),
54                    };
55    
56                  # strip path from page name                  # strip path from page name
57                  $name =~ s,^.+/([^/]+)$,$1,;                  $name =~ s,^.+/([^/]+)$,$1,;
58                  push @page_names, $name;                  push @page_names, $name;
59    
60  #               warn dump( $ref );                  warn "## $path = ",dump( $ref ) if $debug;
61          },          },
62  }, shift @ARGV || '.');  }, shift @ARGV || '.');
63    
# Line 70  my $Rester = Socialtext::Resting->new( Line 75  my $Rester = Socialtext::Resting->new(
75  $Rester->workspace('razmjenavjestina');  $Rester->workspace('razmjenavjestina');
76  $Rester->put_workspacetag('TamTam');  $Rester->put_workspacetag('TamTam');
77    
78    sub convert_date {
79            my $date = shift;
80    #       return time2str( $date );
81            return strftime('%F %T %z', gmtime( $date ));
82    }
83    
84  sub header {  sub header {
85          my $h = shift;          my $h = shift;
86          if ( $h =~ m/^(=+)\s+(.+?)\s+\1$/ ) {          if ( $h =~ m/^(=+)\s+(.+?)\s+\1$/ ) {
# Line 92  sub pre { Line 103  sub pre {
103          return '.pre' . $text . '.pre';          return '.pre' . $text . '.pre';
104  }  }
105    
106  my $count = 0;  sub convert_markup {
107            my $body = shift;
 foreach my $name ( keys %$page ) {  
         last if $count++ == $max;  
   
         my ( $body, $date ) = @{ $page->{$name} };  
         $date = time2str( $date );  
108    
109          $body =~ s/\Q[[TableOfContents]]\E/{toc}/gs;          $body =~ s/\Q[[TableOfContents]]\E/{toc}/gs;
110          $body =~ s/\Q[[BR]]\E/\n/gs;          $body =~ s/\Q[[BR]]\E/\n/gs;
# Line 115  foreach my $name ( keys %$page ) { Line 121  foreach my $name ( keys %$page ) {
121          $body =~ s/\["([^"]+)"\]/[$1]/gs;          $body =~ s/\["([^"]+)"\]/[$1]/gs;
122          $body =~ s,\[(http://\S+)\s+([^\]]+)\],"$2"<$1>,gs;          $body =~ s,\[(http://\S+)\s+([^\]]+)\],"$2"<$1>,gs;
123          $body =~ s,\[(http://[^\]]+)\],$1,gs;          $body =~ s,\[(http://[^\]]+)\],$1,gs;
         $body =~ s,$page_link_re,[$1],gs;  
124    
125          Encode::_utf8_off( $body );          # fix hr
126            $body =~ s,(\S+)----,$1\n----,gs;
127            $body =~ s,----(\S+),----\n$1,gs;
128    
129            return $body;
130    }
131    
132    my $count = 0;
133    
134    foreach my $name ( keys %$page ) {
135            last if $count++ == $max;
136    
137            my $p = $page->{$name};
138    
139            warn "## $name = ",dump( $p ) if $debug;
140    
141            my $body = $p->{content} || die "no content?";
142            my $date = $p->{date} || die "no date?";
143    
144          my @tags = ( 'TamTam' );          my @tags = ( 'TamTam' );
145    
146            my $full_name = $name;
147    
148          if ( $name =~ m!/! ) {          if ( $name =~ m!/! ) {
149                  my @page_tags = split(m!/!, $name);                  my @page_tags = split(m!/!, $name);
150                  $name = pop @page_tags; # remove page name                  $name = pop @page_tags; # remove page name
151                  push @tags, @page_tags;                  push @tags, @page_tags;
152          }          }
153    
154            # link named pages
155            $body =~ s,\b$page_link_re\b,[$1],gs;
156            $body =~ s,``,,gs;
157    
158            $body .= qq{
159    ----
160    
161    Original sa http://www.razmjenavjestina.org/$full_name zadnja promjena {date: $date}
162    };
163    
164            Encode::_utf8_off( $body );
165    
166          $Rester->put_page( $name, {          $Rester->put_page( $name, {
167                  content => $body,                  content => $body,
168                  date => $date,                  date => $date,
169          });          });
170          print "+ $name\n";          print "+ $name $date\n";
171          foreach ( @tags ) {          foreach ( @tags ) {
172                  $Rester->put_pagetag( $name, $_ );                  $Rester->put_pagetag( $name, $_ );
173                  print "+ $name [$_]\n";                  print "+ $name [$_]\n";
Legend:
Removed from v.13  
changed lines
  Added in v.17
  ViewVC Help
Powered by ViewVC 1.1.26