<div dir="ltr">Hello,<div><br></div><div>We haven't really focused on developing the parallel uploading of the shapefile. We have instead focused on introducing parallel spatial analysis. However, this is something we might explore in the future.</div></div><div class="gmail_extra"><br><div class="gmail_quote">On Sun, Jan 24, 2016 at 6:38 PM, Stefan Keller <span dir="ltr"><<a href="mailto:sfkeller@gmail.com" target="_blank">sfkeller@gmail.com</a>></span> wrote:<br><blockquote class="gmail_quote" style="margin:0 0 0 .8ex;border-left:1px #ccc solid;padding-left:1ex">David, PostGIS developers<br>
<br>
David: Is there any update on parallelizing shp2pgsql?<br>
<br>
Devs (and David): Are there any plans to complement shp2pgsql with<br>
something like GeoPackage-to-PostGIS (gpkg2pgsql) ?<br>
<br>
I sometimes refer to vector GeoPackage as the "Shapefile of the<br>
future". Rémi's pointer to OGR is also valuable. But I'd expect that a<br>
standalone tool like gpkg2pgsql could eventually be easier to be<br>
realized and tuned.<br>
<br>
:Stefan<br>
<br>
<br>
2015-02-18 17:37 GMT+01:00 Brent Wood <<a href="mailto:pcreso@pcreso.com">pcreso@pcreso.com</a>>:<br>
> You might look at the capabilities of systems like Netezza & Teradata. They<br>
> have also adapted various tools around Postgres/Postgis to support<br>
> parallelisation.<br>
><br>
> This comment on Netezza might be of interest:<br>
> <a href="http://geothought.blogspot.co.nz/2008/09/netezza-spatial.html" rel="noreferrer" target="_blank">http://geothought.blogspot.co.nz/2008/09/netezza-spatial.html</a><br>
><br>
> Cheers<br>
><br>
> Brent Wood<br>
><br>
> ________________________________<br>
> From: David Haynes II <<a href="mailto:dahaynes@umn.edu">dahaynes@umn.edu</a>><br>
> To: PostGIS Development Discussion <<a href="mailto:postgis-devel@lists.osgeo.org">postgis-devel@lists.osgeo.org</a>><br>
> Sent: Thursday, February 19, 2015 5:15 AM<br>
> Subject: Re: [postgis-devel] shp2pgsql<br>
><br>
> Nothing published yet, but we are developing a working document.<br>
> Mostly we are testing this viability of spatial datasets and if a platform<br>
> supports complex spatial queries (i.e. vector raster overlay distributed<br>
> across a series of nodes). In addition we plan to conducting testing on tile<br>
> size and raster density in relation to these complex queries.<br>
><br>
><br>
><br>
> On Wed, Feb 18, 2015 at 9:48 AM, Rémi Cura <<a href="mailto:remi.cura@gmail.com">remi.cura@gmail.com</a>> wrote:<br>
><br>
> Hey,<br>
> I find this research type very interesting.<br>
> Do you have something published about your experiment and test of various<br>
> cluster-postgres flavours?<br>
><br>
> About loading geometry into your cluster, you may prefer to change OGR,<br>
> which can read a lot more formats<br>
> (and is however slower than postgis shp2pgsql).<br>
><br>
> Cheers,<br>
> Rémi-C<br>
><br>
> 2015-02-18 16:37 GMT+01:00 Stephen Woodbridge <<a href="mailto:woodbri@swoodbridge.com">woodbri@swoodbridge.com</a>>:<br>
><br>
> On 2/18/2015 10:21 AM, David Haynes II wrote:<br>
><br>
> Hello,<br>
><br>
> I am working on a project that conducts high performance spatial<br>
> analysis using postgresql and PostGIS. We have been searching for<br>
> platforms that allow PostGIS to run in parallel. We have evaluated<br>
> Postgres-xc and postgres-xl and determined that they do not meet our use<br>
> case. Currently, I am evaluating CitusDB, but there seem to be some<br>
> obstacles there as well. However, we are working on developing our own<br>
> platform using Stado, which is dervied from GridSQL.<br>
><br>
> We have had some initial results that look pretty promising and we are<br>
> looking to modify the source code of the shp2pgsql to work with our new<br>
> platform. If someone could provide the location of the code we would<br>
> greatly appreciate it. Currently we are creating are geometries using<br>
> the ST_GeomFromTxt function.<br>
><br>
><br>
> <a href="http://trac.osgeo.org/postgis/browser/trunk/loader" rel="noreferrer" target="_blank">http://trac.osgeo.org/postgis/browser/trunk/loader</a><br>
><br>
> _______________________________________________<br>
> postgis-devel mailing list<br>
> <a href="mailto:postgis-devel@lists.osgeo.org">postgis-devel@lists.osgeo.org</a><br>
> <a href="http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel" rel="noreferrer" target="_blank">http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel</a><br>
><br>
><br>
><br>
> _______________________________________________<br>
> postgis-devel mailing list<br>
> <a href="mailto:postgis-devel@lists.osgeo.org">postgis-devel@lists.osgeo.org</a><br>
> <a href="http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel" rel="noreferrer" target="_blank">http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel</a><br>
><br>
><br>
><br>
><br>
> --<br>
> David Haynes, Ph.D.<br>
> Research Associate Terra Populus<br>
> Minnesota Population Center<br>
> <a href="http://www.terrapop.org" rel="noreferrer" target="_blank">www.terrapop.org</a><br>
><br>
> _______________________________________________<br>
> postgis-devel mailing list<br>
> <a href="mailto:postgis-devel@lists.osgeo.org">postgis-devel@lists.osgeo.org</a><br>
> <a href="http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel" rel="noreferrer" target="_blank">http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel</a><br>
><br>
><br>
><br>
> _______________________________________________<br>
> postgis-devel mailing list<br>
> <a href="mailto:postgis-devel@lists.osgeo.org">postgis-devel@lists.osgeo.org</a><br>
> <a href="http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel" rel="noreferrer" target="_blank">http://lists.osgeo.org/cgi-bin/mailman/listinfo/postgis-devel</a><br>
_______________________________________________<br>
postgis-devel mailing list<br>
<a href="mailto:postgis-devel@lists.osgeo.org">postgis-devel@lists.osgeo.org</a><br>
<a href="http://lists.osgeo.org/mailman/listinfo/postgis-devel" rel="noreferrer" target="_blank">http://lists.osgeo.org/mailman/listinfo/postgis-devel</a></blockquote></div><br><br clear="all"><div><br></div>-- <br><div class="gmail_signature"><div dir="ltr"><div><div dir="ltr">David Haynes, Ph.D.<div>Research Associate Terra Populus</div><div>Minnesota Population Center</div><div>612-626-3933</div><div><a href="http://www.terrapop.org" target="_blank">www.terrapop.org</a></div></div></div></div></div>
</div>