Peter,<div><br></div><div>Whose stopping you from mentioning it? Employer or vendor?</div><div><br></div><div>Also what are you ETLing from? CSV, EDI, XML, etc.</div><div><br></div><div>At a basic level though, you can write shell scripts pipe all those commands to get your data in a format that can be bulkloaded into your database..</div>
<div><br></div><div><br><br><div class="gmail_quote">On Tue, Feb 24, 2009 at 3:21 PM, Peter Capazzi <span dir="ltr"><<a href="mailto:Peter.Capazzi@tranzactis.com">Peter.Capazzi@tranzactis.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex;">




<div>
<div><span><font face="Arial" size="2">At our work place we 
use a software that has a pretty heavy price tag. I'm actually not supposed 
to mention it by name. Anyway, the more I work with and the more I learn about 
linux I see some similarities between commands in linux and the functions in 
this application. </font></span></div>
<div><span><font face="Arial" size="2"></font></span> </div>
<div><span><font face="Arial" size="2">I was wondering if 
there was a "poor man"s ETL engine that is simply a front end to commands like 
these:</font></span></div>
<div><span><font face="Arial" size="2">sort - sorting 
datasets on a field</font></span></div>
<div><span><font face="Arial" size="2">join - merging data 
sets</font></span></div>
<div><span><font face="Arial" size="2">cut - field 
selections/exclusions</font></span></div>
<div><span><font face="Arial" size="2">cat - for input 
files</font></span></div>
<div><span><font face="Arial" size="2">sed - To modify 
fields</font></span></div>
<div><span><font face="Arial" size="2">grep - To 
filter</font></span></div>
<div><span><font face="Arial" size="2">awk - To modify 
fields and partition datasets. </font></span></div>
<div><span><font face="Arial" size="2"></font></span> </div>
<div><span><font face="Arial" size="2"></font></span> </div></div>
<br>_______________________________________________<br>
Lilug mailing list<br>
<a href="mailto:Lilug@lilug.org">Lilug@lilug.org</a><br>
<a href="http://lists.lilug.org/listinfo.cgi/lilug-lilug.org" target="_blank">http://lists.lilug.org/listinfo.cgi/lilug-lilug.org</a><br>
<br></blockquote></div><br></div>