/[Sack]/trunk/lib/Sack/Server.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /trunk/lib/Sack/Server.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 232 by dpavlin, Mon Nov 23 23:15:31 2009 UTC revision 247 by dpavlin, Thu Nov 26 22:08:36 2009 UTC
# Line 19  use lib '/srv/Sack/lib'; Line 19  use lib '/srv/Sack/lib';
19  use Sack::Merge;  use Sack::Merge;
20  use Sack::Server::HTTP;  use Sack::Server::HTTP;
21  use Sack::Server::HTML;  use Sack::Server::HTML;
22    use Sack::Server::Gnuplot;
23    
24  my @cloud;  my @cloud;
25  my $cloud_path = $ENV{CLOUD} || "etc/cloud";  my $cloud_path = $ENV{CLOUD} || "etc/cloud";
# Line 94  sub load_shard { Line 95  sub load_shard {
95                  return;                  return;
96          }          }
97    
98          $info->{shard}->{$_} = 'wait' foreach @shards;          foreach my $s ( @shards ) {
99          warn "loading shard $shard from ", dump( @shards );                  next if $info->{shard}->{$s} =~ m{^\d+$};
100                    $info->{shard}->{$s} = 'wait';
101          push @shard_load_queue, @shards;                  push @shard_load_queue, $s;
102                    warn "queued $s for loading\n";
103            }
104          to_all { load => $shard };          to_all { load => $shard };
105  }  }
106    
# Line 110  sub run_view { Line 113  sub run_view {
113          my $code = read_file $path;          my $code = read_file $path;
114          Sack::Merge->clean;          Sack::Merge->clean;
115          delete( $info->{view} );          delete( $info->{view} );
116            delete( $info->{merge} );
117          to_all { code => $code, view => $path };          to_all { code => $code, view => $path };
118  };  };
119    
120    our @responses;
121    
122  while (1) {  while (1) {
123          for my $sock ($sel->can_read(1)) {          for my $sock ($sel->can_read(1)) {
124                  if ($sock == $lsn) {                  if ($sock == $lsn) {
# Line 138  while (1) { Line 144  while (1) {
144                                          print $send "HTTP/1.0 200 OK\r\nContent-Type: text/html\r\n\r\n";                                          print $send "HTTP/1.0 200 OK\r\nContent-Type: text/html\r\n\r\n";
145                                          Sack::Server::HTML::send_out( $send, Sack::Merge->out, $1, $param );                                          Sack::Server::HTML::send_out( $send, Sack::Merge->out, $1, $param );
146                                          return 1;                                          return 1;
147                                    } elsif ( $method =~ m{^/gnuplot} ) {
148                                            eval {
149                                                    my $path = Sack::Server::Gnuplot::date( Sack::Merge->out, $param );
150                                                    if ( -e $path ) {
151                                                            print $send "HTTP/1.0 200 OK\r\nContent-Type: image/png\r\n\r\n";
152                                                            open(my $fh, '<', $path) || die $path;
153                                                            my $b;
154                                                            while ( read($fh, $b, 4096) ) {
155                                                                    print $send $b;
156                                                            }
157                                                            return 1;
158                                                    } else {
159                                                            print $send "HTTP/1.0 404 no graph\r\n\r\n";
160                                                            return 1;
161                                                    }
162                                            };
163                                            warn "ERROR: $@" if $@;
164                                  }                                  }
165    
166                                  print $send "HTTP/1.0 200 OK\r\nContent-Type: text/html\r\n\r\n";                                  print $send "HTTP/1.0 200 OK\r\nContent-Type: text/html\r\n\r\n";
# Line 185  while (1) { Line 208  while (1) {
208                                                  if ( my $s = $info->{view}->{$view} ) {                                                  if ( my $s = $info->{view}->{$view} ) {
209                                                          my @nodes = sort keys %$s;                                                          my @nodes = sort keys %$s;
210                                                          my $total = 0;                                                          my $total = 0;
211                                                          $html .= qq|<table><tr><th>node</th><th>rows</th><th>shards</th><th>&sum;</th></tr>|;                                                          $html .= qq|<table><tr><th>node</th><th>rows</th><th>shards</th><th>&sum;</th><th>merge</th></tr>|;
212                                                          foreach my $node ( @nodes ) {                                                          foreach my $node ( @nodes ) {
213                                                                  my $h = '';                                                                  my $h = '';
214                                                                  my $shard = 0;                                                                  my $shard = 0;
215                                                                  foreach my $path ( sort keys %{ $s->{$node} } ) {                                                                  foreach my $path ( sort keys %{ $s->{$node} } ) {
216                                                                          my $affected = $s->{$node}->{$path};                                                                          my $affected = $s->{$node}->{$path};
217                                                                          $h .= qq|<span title="$affected $path">*</span>|;                                                                          my $n = '?';
218                                                                            $n = $1 if $path =~ m{/(\w)\w+/\d+};
219                                                                            my $class = $affected == 0 ? 'style="color: #888"' : '';
220                                                                            $h .= qq|<tt title="$affected $path"$class>$n</tt>|;
221                                                                          $shard += $affected;                                                                          $shard += $affected;
222                                                                          $total += $affected;                                                                          $total += $affected;
223                                                                  }                                                                  }
224                                                                  $html .= qq|<tr><td><tt>$node</tt></td><td>$shard</td><td>$h</td><td>$total</td></tr>\n|;                                                                  my $merge = $info->{merge}->{$view}->{$node} || '?';
225                                                                    $html .= qq|<tr><td><tt>$node</tt></td><td>$shard</td><td>$h</td><td>$total</td><td>$merge</td></tr>\n|;
226                                                          }                                                          }
227    
228                                                          $html .= qq|</table>|;                                                          $html .= qq|</table>|;
# Line 206  while (1) { Line 233  while (1) {
233                                          ;                                          ;
234    
235                                  my $out = Sack::Merge->out;                                      my $out = Sack::Merge->out;    
236                                  print $send qq|<h1>Results</h1><ul>|                                  if ( my $li = join("\n", map { qq|<li><a href="/out/$_" target="$_">$_</a>| } keys %$out ) ) {
237                                          , join("\n", map { qq|<li><a href="/out/$_" target="$_">$_</a>| } keys %$out )                                          print $send qq|<h1>Results</h1><ul>$li</ul><img src="/gnuplot/">\n|;
238                                          , qq|</ul>|                                  }
                                         ;  
239    
240                                  print $send qq|<h1>Nodes</h1>                                  print $send qq|<h1>Nodes</h1>
241                                  |, join("\n", map {                                  |, join("\n", map {
# Line 228  while (1) { Line 254  while (1) {
254                                  }                                  }
255                                  print $send qq|</ul>|;                                  print $send qq|</ul>|;
256    
257                                  print $send '<pre>', dump($info), '</pre>' if $param->{debug};                                  if ( $param->{info} ) {
258                                            print $send qq|<a href="?info=0">hide info</a>|;
259                                            print $send '<pre>', dump($info), '</pre>'
260                                    } else {
261                                            print $send qq|<a href="?info=1">show info</a>|;
262                                    }
263                                  return 1;                                  return 1;
264                          } );                          } );
265                  } else {                  } else {
# Line 257  while (1) { Line 287  while (1) {
287                                                  load_shard $1;                                                  load_shard $1;
288                                          } elsif ( $repl =~ m{view\s*(\S+)?} ) {                                          } elsif ( $repl =~ m{view\s*(\S+)?} ) {
289                                                  run_view $1;                                                  run_view $1;
                                         } elsif ( $repl =~ m{debug\s*(.+)?} ) {  
                                                 to_all { debug => $1 };  
290                                          } elsif ( $repl =~ m{out} ) {                                          } elsif ( $repl =~ m{out} ) {
291                                                  my $out = Sack::Merge->out;                                                      my $out = Sack::Merge->out;    
292                                                  warn "out ",dump( $out );                                                  warn "out ",dump( $out );
# Line 270  while (1) { Line 298  while (1) {
298                                                  to_all { exit => 1 };                                                  to_all { exit => 1 };
299                                                  sleep 1;                                                  sleep 1;
300                                                  exit;                                                  exit;
301                                            } elsif ( $repl eq '.' ) {
302                                                    $response->{'.'} = [ @responses ];
303                                                    @responses = ();
304                                            } elsif ( $repl =~ m{(\w+)\s*(.+)?} ) {
305                                                    to_all { $1 => $2 };
306                                          } else {                                          } else {
307                                                  $response->{error}->{unknown} = $data;                                                  $response->{error}->{repl} = $repl;
308                                          }                                          }
309                                          Storable::store_fd( $response, $sock );                                          Storable::store_fd( $response, $sock );
310                                  } elsif ( $data->{ping} ) {                                  } elsif ( $data->{ping} ) {
# Line 288  while (1) { Line 321  while (1) {
321                                          } else {                                          } else {
322                                                  warn "no more shards for [", $data->{port}, "]\n";                                                  warn "no more shards for [", $data->{port}, "]\n";
323                                          }                                          }
324                                  } elsif ( defined $data->{out} ) {                                  } elsif ( exists $data->{out} ) {
325                                          Sack::Merge->add( $data->{out} );                                          my $added = Sack::Merge->add( $data->{out} ) if defined $data->{out};
326                                          $info->{view}->{ $data->{view} }->{ $data->{port} } = $data->{on_shard};                                          $info->{merge}->{ $data->{view} }->{ $data->{port} } = $added;
327                                            $info->{view }->{ $data->{view} }->{ $data->{port} } = $data->{on_shard};
328                                    } elsif ( exists $data->{port} ) {
329                                            push @responses, $data;
330                                            warn "# ",dump($data),$/;
331                                  } else {                                  } else {
332                                          warn "UNKNOWN ",dump($data);                                          warn "UNKNOWN ",dump($data);
333                                  }                                  }
Legend:
Removed from v.232  
changed lines
  Added in v.247
  ViewVC Help
Powered by ViewVC 1.1.26