/[Grep]/lib/Grep/Action/Fetch.pm
This is repository of my old source code which isn't updated any more. Go to git.rot13.org for current projects!
ViewVC logotype

Diff of /lib/Grep/Action/Fetch.pm

Parent Directory Parent Directory | Revision Log Revision Log | View Patch Patch

revision 31 by dpavlin, Mon Feb 19 20:40:55 2007 UTC revision 89 by dpavlin, Fri Feb 23 21:54:39 2007 UTC
# Line 13  use base qw/Grep::Action Jifty::Action/; Line 13  use base qw/Grep::Action Jifty::Action/;
13  use XML::Feed;  use XML::Feed;
14  use LWP::UserAgent;  use LWP::UserAgent;
15    
16    use Grep::Search;
17    use Grep::Source;
18    
19  use Data::Dump qw/dump/;  use Data::Dump qw/dump/;
20    
21  use Jifty::Param::Schema;  use Jifty::Param::Schema;
# Line 45  use Jifty::Action schema { Line 48  use Jifty::Action schema {
48  #               available are qw/result result_short/;  #               available are qw/result result_short/;
49                  available are qw/long short title/;                  available are qw/long short title/;
50    
         param publish =>  
                 label is 'In which queue?';  
   
51  };  };
52    
53  =head2 take_action  =head2 take_action
# Line 62  sub take_action { Line 62  sub take_action {
62            
63      # Custom action code      # Custom action code
64    
65          my $feed = Grep::Model::Feed->new();          my $feed_id = $self->argument_value('feed') or die "no feed?";
66          my $feed_id = $self->argument_value('feed');          my $q = $self->argument_value('q') or die "no q?";
         my $publish = $self->argument_value('publish');  
         my $q = $self->argument_value('q');  
   
         if (! $feed_id) {  
                 $self->result->message("Need feed ID");  
                 return 0;  
         }  
67    
68            my $feed = Grep::Model::Feed->new();
69          $feed->load_by_cols( id => $feed_id );          $feed->load_by_cols( id => $feed_id );
70            die "can't load feed ", $feed_id unless ($feed->id);
71    
72          if (! $feed->id) {          my $source = Grep::Source->new({ feed => $feed });
73          $self->result->message("Can't fetch feed $feed_id");          my $items = $source->search( $q );
74                  return 0;          my $new = $source->new_items;
75          }  
76            if ( my $count = $items->count ) {
77          my $uri = $feed->uri;  
78          if ($uri =~ m/%s/) {                  # construct a proper sentence :-)
79                  $uri = $feed->search_uri( $q );                  my $message = $count
80                  Jifty->log->info("Searching ", $feed->title, " at $uri");                          . ( $new == $count ? ' new' : '' )
81          } else {                          . ( $new == 0 ? ' old' : '' )
82                  Jifty->log->info("Fetching ", $feed->title, " at $uri");                          . ' results '  
83          }                          . ( $new && $new < $count ? "of which $new new " : '' )
84                            . "for '$q' in " . $source->feed->title;
85          my $items = Grep::Model::ItemCollection->new();          
   
         sub abort {  
                 my $message = join(" ", @_);  
                 if ( $publish ) {  
                         Grep::Event::Result->new({  
                                 q => $q, coll => $items,  
                                 message => $message, class => 'error',  
                         })->publish;  
                         return 0;  
                 } else {  
                         $self->result->error( $message );  
                         return 0;  
                 }  
         }  
         my $ua = LWP::UserAgent->new;  
         $ua->default_header( 'Cookie' => $feed->cookie );  
         my $r = $ua->get( $uri );  
         return abort(  
                 $feed->title . " returned " . $r->status_line . " for $uri\n"  
         ) unless ( $r->is_success );  
   
         my $content = $r->content;  
   
         return abort( "No content returned from $uri" ) unless length( $content ) > 1;  
   
   
         my $xml_feed = XML::Feed->parse( \$content )  
                 or return abort( $feed->title, " returned ", XML::Feed->errstr, " for $uri" );  
   
         warn "getting entries from ", $xml_feed->title, "\n";  
   
         for my $entry ($xml_feed->entries) {  
                 my $i = Grep::Model::Item->new();  
   
                 $i->load_or_create(  
                         in_feed => $feed,  
                         title => $entry->title,  
                         link => $entry->link,  
                         content => $entry->content->body,  
                         summary => $entry->summary->body,  
                         category => $entry->category,  
                         author => $entry->author,  
                         issued => $entry->issued ? $entry->issued->strftime("%Y-%m-%d %H:%M:%S") : undef,  
                         modified => $entry->modified ? $entry->modified->strftime("%Y-%m-%d %H:%M:%S") : undef,  
                 );  
   
                 if ( $i->id ) {  
                         $items->add_record( $i );  
   
                         Jifty->log->debug("added ", $i->id, " to collection");  
                 } else {  
                         warn "can't add entry ", dump( $entry ) unless ( $i->id );  
                 }  
   
         }  
   
         if ( $items ) {  
   
                 my $message = $q . ' => ' . $xml_feed->entries . ' results';  
   
86                  $self->result->message( $message );                  $self->result->message( $message );
87    
88                  if ( $publish ) {                  $self->result->content( items => $items );
89                          Grep::Event::Result->new({                  $self->result->content( count => $items->count );
90                                  q => $q, coll => $items,  
91                                  item_fragment => $self->argument_value('item_fragment'),                  return $items;
                                 message => $message, class => 'messages',  
                         })->publish;  
                         Jifty->log->debug( $items->count, " for '$q' published" );  
                 } else {  
                         $self->result->content( items => $items );  
                         Jifty->log->debug( $items->count, " for '$q' found" );  
                 }  
92    
93          } else {          } else {
94                  return abort( 'No results found' );                  return $self->result->error( "No results for '$q' in " . $feed->title );
95          }          }
   
         return $items;  
96  }  }
97    
98    
99  1;  1;
100    
Legend:
Removed from v.31  
changed lines
  Added in v.89
  ViewVC Help
Powered by ViewVC 1.1.26