<div dir="ltr">   Hi Jerry<br><br>   I think HDF5 can help you in some way... - <a href="http://www.hdfgroup.org/HDF5/">http://www.hdfgroup.org/HDF5/</a> <br>   <br>   Rodrigo       <br><br><div class="gmail_quote">2008/10/2 Xu, Jerry <span dir="ltr"><<a href="mailto:YXU11@partners.org">YXU11@partners.org</a>></span><br>
<blockquote class="gmail_quote" style="border-left: 1px solid rgb(204, 204, 204); margin: 0pt 0pt 0pt 0.8ex; padding-left: 1ex;">Hello,<br>
<br>
 Currently I generate nearly one TB data every few days and I need to pass it<br>
along enterprise network to the storage center attached to my HPC system, I am<br>
thinking about compressing it (most tiff format image data) as much as I can, as<br>
fast as I can before I send it crossing network ... So, I am wondering whether<br>
anyone is familiar with any hardware based accelerator, which can dramatically<br>
improve the compressing procedure.. suggestion for any file system architecture<br>
will be appreciated too..  I have couple of contacts from some vendors but not<br>
sure whether it works as I expected, so if anyone has experience about it and<br>
want to share, it will be really appreciated !<br>
<br>
<br>
<br>
Thanks,<br>
<br>
Jerry<br>
<br>
Jerry  Xu  PhD<br>
HPC Scientific Computing Specialist<br>
Enterprise Research Infrastructure Systems (ERIS)<br>
Partners Healthcare, Harvard Medical School<br>
<a href="http://www.partners.org" target="_blank">http://www.partners.org</a><br>
<br>
The information transmitted in this electronic communication is intended only<br>
for the person or entity to whom it is addressed and may contain confidential<br>
and/or privileged material. Any review, retransmission, dissemination or other<br>
use of or taking of any action in reliance upon this information by persons or<br>
entities other than the intended recipient is prohibited. If you received this<br>
information in error, please contact the Compliance HelpLine at 800-856-1983 and<br>
properly dispose of this information.<br>
<br>
<br>
<br>
<br>
_______________________________________________<br>
Beowulf mailing list, <a href="mailto:Beowulf@beowulf.org">Beowulf@beowulf.org</a><br>
To change your subscription (digest mode or unsubscribe) visit <a href="http://www.beowulf.org/mailman/listinfo/beowulf" target="_blank">http://www.beowulf.org/mailman/listinfo/beowulf</a><br>
</blockquote></div><br></div>