<div dir="ltr"><div>if you run without the switch it will create the result without compression, so you will be back to a 400Gb file. Instead run everything in one single command. <br></div><div>With compression it is likely to take some extra time, as some calculation has to be done to achieve that.</div><div>If you want speed, tile the raster and also there are a few other switches to add so gdalwarp can use more than one core to make this calcs, and you can also too give more memory to it like:</div><div><span class="gmail-pl-smi"><span class="gmail-pl-smi">--config GDAL_SWATH_SIZE 2000000000 --config GDAL_CACHEMAX 2000 -wm 2000 </span>-co "tiled=yes" -co "BLOCKXSIZE=256" -co "BLOCKYSIZE=256" -wo "NUM_THREADS=<span class="gmail-text-bold gmail-bg-yellow-light gmail-rounded-1 gmail-d-inline-block">ALL_CPUS</span>" -multi -co "NUM_THREADS=<span class="gmail-text-bold gmail-bg-yellow-light gmail-rounded-1 gmail-d-inline-block">ALL_CPUS</span>" -co "bigtiff=yes" </span></div><div><br></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Mar 13, 2020 at 9:43 AM Brian <<a href="mailto:mulcahy.brianp@gmail.com">mulcahy.brianp@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">Is it faster to do a gdal_warp with compression then without? Is it safe to assume the drive write speed would be the limiting factor for speed in this case? </div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Mar 13, 2020 at 8:33 AM Cainã K. Campos <<a href="mailto:rupestre.campos@gmail.com" target="_blank">rupestre.campos@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr"><div>Hello Brian,</div><div><br></div><div>Try to add the switch   -co <span><span>"</span><span>COMPRESS</span>=<span>LZW</span><span>" to the command line to generate a compressed result with lossless compression.<br></span></span></div></div><br><div class="gmail_quote"><div dir="ltr" class="gmail_attr">On Fri, Mar 13, 2020 at 9:07 AM Brian <<a href="mailto:mulcahy.brianp@gmail.com" target="_blank">mulcahy.brianp@gmail.com</a>> wrote:<br></div><blockquote class="gmail_quote" style="margin:0px 0px 0px 0.8ex;border-left:1px solid rgb(204,204,204);padding-left:1ex"><div dir="ltr">So compressed this raster is fairly small about 120mb but running gdal_warp produces a raster that is about 416 gb, is this something this list can help with? If so I can upload the file somewhere and let you guys/gals take a look at it.</div>
_______________________________________________<br>
gdal-dev mailing list<br>
<a href="mailto:gdal-dev@lists.osgeo.org" target="_blank">gdal-dev@lists.osgeo.org</a><br>
<a href="https://lists.osgeo.org/mailman/listinfo/gdal-dev" rel="noreferrer" target="_blank">https://lists.osgeo.org/mailman/listinfo/gdal-dev</a></blockquote></div>
</blockquote></div>
</blockquote></div>