logo
publist
写文章

简介

该用户还未填写简介

擅长的技术栈

可提供的服务

暂无可提供的服务

python使用scrapy爬取百度地图POI数据

前面已经介绍过使用scrapy爬取百度图片内容,这里介绍一下通过百度地图提供的接口爬取POI数据,并且保存到postgresql数据库中。图片爬虫与数据爬虫处理的方式还是有一些不一样的。在百度地图开放平台上可以找到相关的地点检索的文档,关于接口的使用方法有很详细的描述,主要还是通过关键词和POI分类进行检测,注意不同的关键词可能得到的数据有重复,注意通过uid来去重。具体的创建项目的过程,前面的博

文章图片
#python#scrapy#爬虫 +1
使用python基于DeepLabv3实现对图片进行语义分割

DeepLabv3 是一种先进的语义分割模型,由 Google Research 团队提出。它在 DeepLab 系列模型的基础上进行了改进,旨在提高图像中像素级分类的准确性。概述DeepLabv3 是 DeepLab 系列中的第三代模型,专门用于解决语义分割任务。语义分割是指将图像中的每个像素分配给特定类别的过程,例如将图像中的不同对象(如人、车、建筑物等)进行精确划分。主要特点。

文章图片
#python#开发语言#机器学习
python调用tippecanoe实现矢量切片

前言mapbox提供的官方的切片工具tippecanoe,可以快速进行矢量切片,生成pbf格式切片或者mbtiles。也可以将矢量瓦片反向合成为具体数据。这里主要实现,用python调用tippecanoe实现将geojson转换为pbf切片。环境部署可以参考我之前的博文https://hanbo.blog.csdn.net/article/details/113172570实现代码import

#python
MongoDB数据库迁移的两种办法

在做系统运维时,经常需要对数据库进行迁移,今天这里分享一下MongoDB数据库数据迁移的办法。两种方法。

文章图片
#postcss
使用kabeja库解析DXF格式文件

DXF格式是一种开源的CAD文件格式,如何实现Java代码对齐的解析,在网上找了很久,也没有找到非常成熟的库。很奇怪,开源的格式,正常应该会有很多的库来支持。只找到了一个kabeja库,最新版本还是2008年出的0.4版本,而且官网还是提供jar和exe运行文件的支持方式。在研究它的过程中遇到了一些问题,这里记录下来,希望大家少踩一些坑吧。

文章图片
#java#maven
前端实现geoJson与wkt格式互转

geoJson与wkt都是WebGIS开发中经常用到的格式,很多时候WebGIS前端开发人员需要在二者之间进行互相转换。去让后端开发人员写个接口,太浪费时间,可以尝试用terraformer-wkt-parser进行一下二者的转换。虽然很简单,网上有些地方对其用法说的却不对。这里我说一下,这个插件主要有两个函数parse(string)wkt转为geojsonconvert(string)geoj

Mapbox矢量瓦片pbf文件信息解析

Mapbox由于配合其矢量瓦片pbf格式文件,有突出的渲染性能,被很多公司和开发者所使用。矢量瓦片的格式有很多种,其中pbf格式是一种二进制文件,直接把数据信息压缩位二进制了。矢量瓦片优势主要优势有数据传输量小相对与栅格瓦片数据量大大缩小不受分辨率影响矢量瓦片无论在地图放大到各种级别都是清晰的,都不会出现栅格放大后显示像元的问题。动态样式矢量瓦片会根据用户的定制的样...

Centos7配置网络桥接,无法访问网络的问题

安装VirtualBox,在里面部署了Centos的系统,设置网络桥接可以让虚拟机和自己的电脑相互访问,在设置里设置桥接之后,仍然无法连接到网络,网上的说法比较杂乱,这里我就系统地描述一下解决方案。VirtualBox设置桥接centos配置查看本机硬件地址,并记录ip addr找到自己的网络配置文件cd /etc/sysconfig/network-scrip...

#网络
通过nginx转发ssh请求,实现一个公网ip连接多个华为云服务器

问题引出华为搞活动,送了多台虚拟服务器,但只给了两个弹性公网ip,没有赠送NAT网关。一个弹性公网ip只能绑定到一个虚拟服务器,在本地控制服务器、部署环境的时候,很不方便。最后研究了很久终于实现了,把不同服务器的ssh映射的到一个弹性公网ip的不同端口上。主要实现原理,在绑定了公网ip的服务器上安装nginx实现ssh转发。解决过程vpc准备在华为云官网控制台建立虚拟私有云VP...

#nginx#服务器#centos +2
ArcGIS Server10.5单机版WMS服务并发测试,结果想哭

基于前一次对GeoServer的并发测试,-------GeoServer的WMS地图服务高并发测试,与虚拟机内存对并发响应时间的影响这次的计算机配置与上次一致,唯一可惜的就是系统重装了,上次的测试影像丢失了,这次重新下载了一份,大小有变化。测试设置100并发测试显著低于GeoServer,真不明白为什么1000并发测试话说这68%的错误率是哪里来的,查看错...

#jmeter
    共 50 条
  • 1
  • 2
  • 3
  • 4
  • 5
  • 请选择