Most of the time, you can get to the posts via RSS. Aggregator module does a pretty good job of pulling stuff in, and the author of the post that&#39;s displayed is whatever you tell it to display (see Drupal Planet for an example)<div>

<br clear="all">Thanks,<br>Cameron<br><br>
<br><br><div class="gmail_quote">On Tue, Nov 30, 2010 at 12:48, Kevin O <span dir="ltr">&lt;<a href="mailto:nowarninglabel@gmail.com">nowarninglabel@gmail.com</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">

I second the recommendation of using QueryPath. I use it almost exclusively along with drupal_http_request, though I use curl only in a few places (if you use curl I recommend <a href="http://drupal.org/project/curl" target="_blank">http://drupal.org/project/curl</a> for a dependency check). I&#39;d really recommend though creating a custom module that uses the above and then has your logic for filtering in it, I&#39;ve done this for about a dozen modules now. <div>


<br></div><div>That said, there are some more modules available out there nowadays, such as using <a href="http://drupal.org/project/feeds_xpathparser" target="_blank">http://drupal.org/project/feeds_xpathparser</a> with feeds <a href="http://drupal.org/project/feeds" target="_blank">http://drupal.org/project/feeds</a> There are about a dozen more modules that will accomplish the goal though I haven&#39;t used them, but I went through and tried most of the methods out for some recent projects. </div>


<div><br></div><div>Cheers,</div><div><br clear="all">Kevin O&#39;Brien<div>Drupal Developer</div><div><a href="http://www.coderintherye.com" target="_blank">http://www.coderintherye.com</a></div><div>415-754-0112</div><br>



<br><br><div class="gmail_quote">On Tue, Nov 30, 2010 at 11:26 AM,  <span dir="ltr">&lt;<a href="mailto:development-request@drupal.org" target="_blank">development-request@drupal.org</a>&gt;</span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">


Send development mailing list submissions to<br>
        <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
<br>
To subscribe or unsubscribe via the World Wide Web, visit<br>
        <a href="http://lists.drupal.org/mailman/listinfo/development" target="_blank">http://lists.drupal.org/mailman/listinfo/development</a><br>
or, via email, send a message with subject or body &#39;help&#39; to<br>
        <a href="mailto:development-request@drupal.org" target="_blank">development-request@drupal.org</a><br>
<br>
You can reach the person managing the list at<br>
        <a href="mailto:development-owner@drupal.org" target="_blank">development-owner@drupal.org</a><br>
<br>
When replying, please edit your Subject line so it is more specific<br>
than &quot;Re: Contents of development digest...&quot;<br>
<br>
<br>
Today&#39;s Topics:<br>
<br>
   1. Drupal module for scraping information from an    HTML/XML<br>
      document (James Benstead)<br>
   2. Re: Drupal module for scraping information from an HTML/XML<br>
      document (John Fiala)<br>
   3. Easter problem (?mon Tam?s)<br>
   4. Re: Easter problem (Carl Wiedemann)<br>
   5. Re: Easter problem (<a href="mailto:larry@garfieldtech.com" target="_blank">larry@garfieldtech.com</a>)<br>
   6. Re: Easter problem (<a href="mailto:jeff@ayendesigns.com" target="_blank">jeff@ayendesigns.com</a>)<br>
   7. Re: Easter problem (<a href="mailto:larry@garfieldtech.com" target="_blank">larry@garfieldtech.com</a>)<br>
   8. Re: Easter problem (Jennifer Hodgdon)<br>
<br>
<br>
----------------------------------------------------------------------<br>
<br>
Message: 1<br>
Date: Tue, 30 Nov 2010 18:56:09 +0000<br>
From: James Benstead &lt;<a href="mailto:james.benstead@gmail.com" target="_blank">james.benstead@gmail.com</a>&gt;<br>
Subject: [development] Drupal module for scraping information from an<br>
        HTML/XML document<br>
To: development &lt;<a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a>&gt;<br>
Message-ID:<br>
        &lt;AANLkTi=<a href="mailto:AFhBkvyURzgwNB54Z%2Bq-rRj_B_uRLZbUUd3UV@mail.gmail.com" target="_blank">AFhBkvyURzgwNB54Z+q-rRj_B_uRLZbUUd3UV@mail.gmail.com</a>&gt;<br>
Content-Type: text/plain; charset=&quot;iso-8859-1&quot;<div class="im"><br>
<br>
I&#39;ve finally got round to doing some serious work on Drupalversity, an open,<br>
web-based Drupal education project I&#39;ve had in mind for a year or so.<br>
<br>
People who use Drupalversity to learn have the option of adding Resources to<br>
the site - i.e., links to posts at Lullabot, Chapter3 etc that explain how<br>
to do specific things with Drupal. A Resource is a custom content type that<br>
includes a link to the resource and a text field containing a description of<br>
that resource.<br>
<br></div><div class="im">
What I&#39;d like to do once a Resource has been added to the site is to scrape<br>
certain information from it: at this point I&#39;m thinking the Title of the<br>
page the link points to and the provider of the resource - e.g., which<br>
Drupal shop originally created the resource. What&#39;s the best way to go about<br>
doing this? I&#39;m pretty sure there&#39;s not a Drupal module that solves the<br>
problem out of the box.<br>
<br></div><div class="im">
So far I&#39;ve considered:<br>
<br>
   - <a href="http://drupal.org/project/querypath" target="_blank">http://drupal.org/project/querypath</a><br>
   - Drupal&#39;s built-in drupal_http_request() -<br>
   <a href="http://api.drupal.org/api/drupal/includes--common.inc/function/drupal_http_request/6" target="_blank">http://api.drupal.org/api/drupal/includes--common.inc/function/drupal_http_request/6</a><br>
   - curl<br>
<br>
Thanks,<br>
<br>
--Jim<br>
--<br>
My IM and Skype details are at <a href="http://state68.com/contact" target="_blank">http://state68.com/contact</a><br></div>
-------------- next part --------------<br>
An HTML attachment was scrubbed...<br>
URL: <a href="http://lists.drupal.org/pipermail/development/attachments/20101130/5600f1fe/attachment-0001.html" target="_blank">http://lists.drupal.org/pipermail/development/attachments/20101130/5600f1fe/attachment-0001.html</a><br>



<br>
------------------------------<br>
<br>
Message: 2<br>
Date: Tue, 30 Nov 2010 12:06:33 -0700<br>
From: John Fiala &lt;<a href="mailto:jcfiala@gmail.com" target="_blank">jcfiala@gmail.com</a>&gt;<br>
Subject: Re: [development] Drupal module for scraping information from<br>
        an HTML/XML document<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID:<br>
        &lt;AANLkTi=<a href="mailto:N6WxHfigUC4ZopfxswMBv8bj7BZZJErHmko_T@mail.gmail.com" target="_blank">N6WxHfigUC4ZopfxswMBv8bj7BZZJErHmko_T@mail.gmail.com</a>&gt;<br>
Content-Type: text/plain; charset=ISO-8859-1<div><div></div><div class="h5"><br>
<br>
These days, if I&#39;m going to be trying to extract data from html/xml,<br>
I&#39;d use querypath.  Give it a try!<br>
<br>
On Tue, Nov 30, 2010 at 11:56 AM, James Benstead<br>
&lt;<a href="mailto:james.benstead@gmail.com" target="_blank">james.benstead@gmail.com</a>&gt; wrote:<br>
&gt; What I&#39;d like to do once a Resource has been added to the site is to scrape<br>
&gt; certain information from it: at this point I&#39;m thinking the Title of the<br>
&gt; page the link points to and the provider of the resource - e.g., which<br>
&gt; Drupal shop originally created the resource. What&#39;s the best way to go about<br>
&gt; doing this? I&#39;m pretty sure there&#39;s not a Drupal module that solves the<br>
&gt; problem out of the box.<br>
<br>
--<br>
John Fiala<br>
<a href="http://www.jcfiala.net" target="_blank">www.jcfiala.net</a><br>
<br>
<br></div></div>
------------------------------<br>
<br>
Message: 3<br>
Date: Tue, 30 Nov 2010 20:14:04 +0100<br>
From: ?mon Tam?s &lt;<a href="mailto:amont@5net.hu" target="_blank">amont@5net.hu</a>&gt;<br>
Subject: [development] Easter problem<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID:<br>
        &lt;<a href="mailto:AANLkTikmKoVkedks2FkWUbHRq9sNTe6r0iX%2BiMjmBtvy@mail.gmail.com" target="_blank">AANLkTikmKoVkedks2FkWUbHRq9sNTe6r0iX+iMjmBtvy@mail.gmail.com</a>&gt;<br>
Content-Type: text/plain; charset=&quot;utf-8&quot;<br>
<br>
Hello,<br>
<br>
I have the nameday module (<a href="http://drupal.org/project/nameday" target="_blank">http://drupal.org/project/nameday</a>) and I get a<br>
feature request for the Greek namedays. How I see it is based on the Easter,<br>
what is not an easy thing to count.<br>
<br>
Well, I want to find some algorithm for Easter, and similar days, what is<br>
can be stored somehow. Maybe it should be a hook or some other think what<br>
can be stored in database.<br>
<br>
<br>
Thanks<br>
<br>
--<br>
?mon Tam?s<br>
Sitefejleszt? ?s programoz?<br>
-------------- next part --------------<br>
An HTML attachment was scrubbed...<br>
URL: <a href="http://lists.drupal.org/pipermail/development/attachments/20101130/c81e61bf/attachment-0001.html" target="_blank">http://lists.drupal.org/pipermail/development/attachments/20101130/c81e61bf/attachment-0001.html</a><br>



<br>
------------------------------<br>
<br>
Message: 4<br>
Date: Tue, 30 Nov 2010 12:22:42 -0700<br>
From: Carl Wiedemann &lt;<a href="mailto:carl.wiedemann@gmail.com" target="_blank">carl.wiedemann@gmail.com</a>&gt;<br>
Subject: Re: [development] Easter problem<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID:<br>
        &lt;AANLkTinD9Xz=3inJj2GraAuqde_=<a href="mailto:3yshJDwxCJzu12zr@mail.gmail.com" target="_blank">3yshJDwxCJzu12zr@mail.gmail.com</a>&gt;<br>
Content-Type: text/plain; charset=&quot;iso-8859-2&quot;<br>
<br>
Does this help? <a href="http://php.net/manual/en/function.easter-days.php" target="_blank">http://php.net/manual/en/function.easter-days.php</a><br>
<br>
On Tue, Nov 30, 2010 at 12:14 PM, ?mon Tam?s &lt;<a href="mailto:amont@5net.hu" target="_blank">amont@5net.hu</a>&gt; wrote:<br>
<br>
&gt; Hello,<br>
&gt;<br>
&gt; I have the nameday module (<a href="http://drupal.org/project/nameday" target="_blank">http://drupal.org/project/nameday</a>) and I get a<br>
&gt; feature request for the Greek namedays. How I see it is based on the Easter,<br>
&gt; what is not an easy thing to count.<br>
&gt;<br>
&gt; Well, I want to find some algorithm for Easter, and similar days, what is<br>
&gt; can be stored somehow. Maybe it should be a hook or some other think what<br>
&gt; can be stored in database.<br>
&gt;<br>
&gt;<br>
&gt; Thanks<br>
&gt;<br>
&gt; --<br>
&gt; ?mon Tam?s<br>
&gt; Sitefejleszt? ?s programoz?<br>
&gt;<br>
&gt;<br>
-------------- next part --------------<br>
An HTML attachment was scrubbed...<br>
URL: <a href="http://lists.drupal.org/pipermail/development/attachments/20101130/55b0fb8a/attachment-0001.html" target="_blank">http://lists.drupal.org/pipermail/development/attachments/20101130/55b0fb8a/attachment-0001.html</a><br>



<br>
------------------------------<br>
<br>
Message: 5<br>
Date: Tue, 30 Nov 2010 13:24:07 -0600<br>
From: &quot;<a href="mailto:larry@garfieldtech.com" target="_blank">larry@garfieldtech.com</a>&quot; &lt;<a href="mailto:larry@garfieldtech.com" target="_blank">larry@garfieldtech.com</a>&gt;<br>
Subject: Re: [development] Easter problem<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID: &lt;<a href="mailto:4CF54F57.2030602@garfieldtech.com" target="_blank">4CF54F57.2030602@garfieldtech.com</a>&gt;<br>
Content-Type: text/plain; charset=UTF-8; format=flowed<br>
<br>
There&#39;s no need for a hook here at all.  You can either code in the<br>
algorithm for defining when Easter is (which sounds like it is in fact<br>
rather complicated) or just pre-store know pre-calculated dates for it<br>
for the next decade or so.  (10 records, one per year; totally easy.)<br>
<br>
Both options are described here, including the different mechanisms for<br>
defining when Easter is in different calendars:<br>
<br>
<a href="http://en.wikipedia.org/wiki/Easter#Date_of_Easter" target="_blank">http://en.wikipedia.org/wiki/Easter#Date_of_Easter</a><br>
<br>
--Larry Garfield<br>
<br>
On 11/30/10 1:14 PM, ?mon Tam?s wrote:<br>
&gt; Hello,<br>
&gt;<br>
&gt; I have the nameday module (<a href="http://drupal.org/project/nameday" target="_blank">http://drupal.org/project/nameday</a>) and I get<br>
&gt; a feature request for the Greek namedays. How I see it is based on the<br>
&gt; Easter, what is not an easy thing to count.<br>
&gt;<br>
&gt; Well, I want to find some algorithm for Easter, and similar days, what<br>
&gt; is can be stored somehow. Maybe it should be a hook or some other think<br>
&gt; what can be stored in database.<br>
&gt;<br>
&gt;<br>
&gt; Thanks<br>
&gt;<br>
&gt; --<br>
&gt; ?mon Tam?s<br>
&gt; Sitefejleszt? ?s programoz?<br>
&gt;<br>
<br>
<br>
------------------------------<br>
<br>
Message: 6<br>
Date: Tue, 30 Nov 2010 14:23:56 -0500<br>
From: <a href="mailto:jeff@ayendesigns.com" target="_blank">jeff@ayendesigns.com</a><br>
Subject: Re: [development] Easter problem<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID: &lt;<a href="mailto:4CF54F4C.2060409@ayendesigns.com" target="_blank">4CF54F4C.2060409@ayendesigns.com</a>&gt;<br>
Content-Type: text/plain; charset=&quot;utf-8&quot;<br>
<br>
You can google it, but I believe this is one of those things that cannot<br>
be reduced to an equation or algorithm. It&#39;s something like the first<br>
Sunday after the first full moon after the spring equinox.<br>
<br>
On 11/30/2010 02:14 PM, ?mon Tam?s wrote:<br>
&gt; Hello,<br>
&gt;<br>
&gt; I have the nameday module ( <a href="http://drupal.org/project/nameday" target="_blank">http://drupal.org/project/nameday</a>) and I<br>
&gt; get a feature request for the Greek namedays. How I see it is based on<br>
&gt; the Easter, what is not an easy thing to count.<br>
&gt;<br>
&gt; Well, I want to find some algorithm for Easter, and similar days, what<br>
&gt; is can be stored somehow. Maybe it should be a hook or some other<br>
&gt; think what can be stored in database.<br>
&gt;<br>
&gt;<br>
&gt; Thanks<br>
&gt;<br>
&gt; --<br>
&gt; ?mon Tam?s<br>
&gt; Sitefejleszt? ?s programoz?<br>
&gt;<br>
-------------- next part --------------<br>
An HTML attachment was scrubbed...<br>
URL: <a href="http://lists.drupal.org/pipermail/development/attachments/20101130/38791578/attachment-0001.html" target="_blank">http://lists.drupal.org/pipermail/development/attachments/20101130/38791578/attachment-0001.html</a><br>



<br>
------------------------------<br>
<br>
Message: 7<br>
Date: Tue, 30 Nov 2010 13:26:23 -0600<br>
From: &quot;<a href="mailto:larry@garfieldtech.com" target="_blank">larry@garfieldtech.com</a>&quot; &lt;<a href="mailto:larry@garfieldtech.com" target="_blank">larry@garfieldtech.com</a>&gt;<br>
Subject: Re: [development] Easter problem<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID: &lt;<a href="mailto:4CF54FDF.7070506@garfieldtech.com" target="_blank">4CF54FDF.7070506@garfieldtech.com</a>&gt;<br>
Content-Type: text/plain; charset=ISO-8859-2; format=flowed<br>
<br>
The Calendar PHP module is not enabled by default in a stock PHP, so I<br>
don&#39;t know that you can rely on it (unfortunately).  It does have some<br>
cool stuff in it, though.<br>
<br>
--Larry Garfield<br>
<br>
On 11/30/10 1:22 PM, Carl Wiedemann wrote:<br>
&gt; Does this help? <a href="http://php.net/manual/en/function.easter-days.php" target="_blank">http://php.net/manual/en/function.easter-days.php</a><br>
&gt;<br>
&gt; On Tue, Nov 30, 2010 at 12:14 PM, ?mon Tam?s &lt;<a href="mailto:amont@5net.hu" target="_blank">amont@5net.hu</a><br>
&gt; &lt;mailto:<a href="mailto:amont@5net.hu" target="_blank">amont@5net.hu</a>&gt;&gt; wrote:<br>
&gt;<br>
&gt;     Hello,<br>
&gt;<br>
&gt;     I have the nameday module (<a href="http://drupal.org/project/nameday" target="_blank">http://drupal.org/project/nameday</a>) and I<br>
&gt;     get a feature request for the Greek namedays. How I see it is based<br>
&gt;     on the Easter, what is not an easy thing to count.<br>
&gt;<br>
&gt;     Well, I want to find some algorithm for Easter, and similar days,<br>
&gt;     what is can be stored somehow. Maybe it should be a hook or some<br>
&gt;     other think what can be stored in database.<br>
&gt;<br>
&gt;<br>
&gt;     Thanks<br>
&gt;<br>
&gt;     --<br>
&gt;     ?mon Tam?s<br>
&gt;     Sitefejleszt? ?s programoz?<br>
&gt;<br>
&gt;<br>
<br>
<br>
------------------------------<br>
<br>
Message: 8<br>
Date: Tue, 30 Nov 2010 11:21:08 -0800<br>
From: Jennifer Hodgdon &lt;<a href="mailto:yahgrp@poplarware.com" target="_blank">yahgrp@poplarware.com</a>&gt;<br>
Subject: Re: [development] Easter problem<br>
To: <a href="mailto:development@drupal.org" target="_blank">development@drupal.org</a><br>
Message-ID: &lt;<a href="mailto:4CF54EA4.1050502@poplarware.com" target="_blank">4CF54EA4.1050502@poplarware.com</a>&gt;<br>
Content-Type: text/plain; charset=UTF-8; format=flowed<br>
<br>
<a href="http://php.net/manual/en/function.easter-date.php" target="_blank">http://php.net/manual/en/function.easter-date.php</a><br>
<br>
On 11/30/2010 11:14 AM, ?mon Tam?s wrote:<br>
&gt; I have the nameday module (<a href="http://drupal.org/project/nameday" target="_blank">http://drupal.org/project/nameday</a>) and I get a<br>
&gt; feature request for the Greek namedays. How I see it is based on the Easter,<br>
&gt; what is not an easy thing to count.<br>
&gt;<br>
&gt; Well, I want to find some algorithm for Easter, and similar days, what is<br>
&gt; can be stored somehow. Maybe it should be a hook or some other think what<br>
&gt; can be stored in database.<br>
<br>
--<br>
Jennifer Hodgdon * Poplar ProductivityWare<br>
<a href="http://www.poplarware.com" target="_blank">www.poplarware.com</a><br>
Drupal web sites and custom Drupal modules<br>
<br>
<br>
<br>
------------------------------<br>
<font color="#888888"><br>
--<br>
[ Drupal development list | <a href="http://lists.drupal.org/" target="_blank">http://lists.drupal.org/</a> ]<br>
<br>
End of development Digest, Vol 95, Issue 58<br>
*******************************************<br>
</font></blockquote></div><br></div>
</blockquote></div><br></div>