[Feature]建议：自动生成经纬度信息 #1

eng-cc · 2020-01-26T07:39:37Z

同步过程中可以根据地址文字处理出经纬度信息，方便后续数据分析和可视化

frank-zsy · 2020-01-28T01:41:38Z

非常好的建议！

tyisme614 · 2020-01-28T09:33:09Z

这个工具接口我来写吧，打算用百度的正逆地理编码来实现。

nwljy · 2020-01-28T10:02:40Z

https://restapi.amap.com/v3/geocode/geo

nwljy · 2020-01-28T10:03:00Z

建议高德也弄了

wangzhen11aaa · 2020-01-28T10:04:28Z

https://restapi.amap.com/v3/geocode/geo
测试通过了吗?

nwljy · 2020-01-28T10:05:13Z

这本来就是高德的api

tyisme614 · 2020-01-28T10:06:20Z

嗯好的

wangzhen11aaa · 2020-01-28T10:06:44Z

这个有访问的上限次数吗？如果有上限，我们可否把这些数据存储到一个小数据库。

nwljy · 2020-01-28T10:07:16Z

有   生活来源于简单，责任和担待构成生活的全部  

…

------------------ 原始邮件 ------------------ 发件人: "Thomas.Wang"<notifications@github.com>; 发送时间: 2020年1月28日(星期二) 晚上6:06 收件人: "wuhan2020/data-sync"<data-sync@noreply.github.com>; 抄送: "nwljy"<nwljy@qq.com>; "Comment"<comment@noreply.github.com>; 主题: Re: [wuhan2020/data-sync] [Feature]建议：自动生成经纬度信息 (#1) 这个有访问的上限次数吗？如果有上限，我们可否把这些数据存储到一个小数据库。 — You are receiving this because you commented. Reply to this email directly, view it on GitHub, or unsubscribe.

wangzhen11aaa · 2020-01-28T10:08:01Z

毕竟高德api应该也是商用的，我们目前是不是只对经纬度有需求？不用每次都去访问他的api。如果需要账号，我们可以搜集一些账号，分省市把数据弄下来。然后导入到我们可用的数据库。

nwljy · 2020-01-28T10:08:16Z

1000 个人开发者

nwljy · 2020-01-28T10:09:21Z

先走数据库查询一下是否有值，没有走接口查询相关信息

nwljy · 2020-01-28T10:10:08Z

写错 6000次/日

wangzhen11aaa · 2020-01-28T10:14:05Z

我们这里的地址信息不同于快递，目前精确到县就可以吧。全国县级行政区划单位有2845个，其中市辖区963个、县级市382个、县1329个。如果有缓存，应该没有问题的。不需要单独存储。

wangzhen11aaa · 2020-01-28T10:15:36Z

我觉得可以使用高德的API。理论上位置精确到县，需要3个账号就能够了。大家觉得怎么样？如果可以，nwljy你去联系一下这个项目的架构同学?

nwljy · 2020-01-28T11:14:44Z

配置保存在config目录的config.default.ts，然后调用 ctx.app.config.

var XMLHttpRequest=null

var request=null
/**

Open the connection. Currently supports local server requests.
@param string method Connection method (eg GET, POST)
@param string url URL for the connection.
@param boolean async Asynchronous connection. Default is true.
@param string user Username for basic authentication (optional)
@param string password Password for basic authentication (optional)
*/
var requestDatautils = {

getHttpReponseData:function(option,responseCallBack){
XMLHttpRequest= require("xmlhttprequest").XMLHttpRequest;
var xmlhttp = new XMLHttpRequest();

if(option.requestData!=null){
    console.dir("send-----------"+option.requestData);
   var url=option.url+"?"+encodeFormData(option.requestData);
   console.log(url);
    xmlhttp.open("GET",url, option.asynch,option.user, option.password);
    
}else{
    xmlhttp.open("GET",option.url, option.asynch,option.user, option.password);
   
}
if(option.headers!=null)  {
    for(var key in option.headers)  {
        if(option.headers.hasOwnProperty(key)){
            xmlhttp.setRequestHeader(key,option.headers[key]);
        }
    }

}

xmlhttp.onreadystatechange = function(){
	//debugger;
	//console.log(xmlhttp.readyState);
	//console.log(xmlhttp.status);
		if(xmlhttp.readyState == 4){
				if(xmlhttp.status == 200){	
                    return responseCallBack(xmlhttp.responseText);
				}else if(xmlhttp.status == 404){
					return responseCallBack(xmlhttp.responseText);
				}else if(xmlhttp.status == 0){	
					return responseCallBack(xmlhttp.responseText);
				}
		}
};
xmlhttp.send(null);

},postHttpReponseData:function(option,responseCallBack){
XMLHttpRequest= require("xmlhttprequest").XMLHttpRequest;
var xmlhttp = new XMLHttpRequest();
xmlhttp.open("POST", option.url, asynch,option.user, option.password);
if(option.headers!=null) {
for(var key in option.headers) {
if(option.headers.hasOwnProperty(key)){
xmlhttp.setRequestHeader(key,option.headers[key]);
}
}

}
if(option.requestData!=null){
console.dir("send-----------"+option.requestData)
xmlhttp.send(option.requestData)
}else{
console.log("send-----------")
xmlhttp.send(null);
}
xmlhttp.onreadystatechange = function(){
//debugger;
console.log(xmlhttp.readyState);
console.log(xmlhttp.status);
if(xmlhttp.readyState == 4){
if(xmlhttp.status == 200){
return responseCallBack(xmlhttp.responseText)
}else if(xmlhttp.status == 404){
return responseCallBack(xmlhttp.responseText)
}else if(xmlhttp.status == 0){
return responseCallBack(xmlhttp.responseText)
}
}
};

},getHttpsReponseData:function(option,responseCallBack){
XMLHttpRequest = require("xmlhttprequest-ssl").XMLHttpRequest;
var xmlhttp = new XMLHttpRequest();
if(option.requestData!=null){
console.dir("send-----------"+option.requestData)
var url=option.url+"?"+encodeFormData(option.requestData);
xmlhttp.open("GET",url, option.asynch,option.user, option.password);

}else{
    xmlhttp.open("GET",option.url, option.asynch,null,null);
    
    
}

if(option.headers!=null)  {
    for(var key in option.headers)  {
        if(option.headers.hasOwnProperty(key)){
            xmlhttp.setRequestHeader(key,option.headers[key]);
        }
    }

}
xmlhttp.onreadystatechange = function(){
//debugger;
console.log(xmlhttp.readyState);
console.log(xmlhttp.status);
if(xmlhttp.readyState == 4){
if(xmlhttp.status == 200){

                    return responseCallBack(xmlhttp.responseText)
				}else if(xmlhttp.status == 404){
					return responseCallBack(xmlhttp.responseText)
				}else if(xmlhttp.status == 0){	
					return responseCallBack(xmlhttp.responseText)
				}
		}
};
xmlhttp.send(null);

},postHttpsReponseData:function(option,responseCallBack){
XMLHttpRequest = require("xmlhttprequest-ssl").XMLHttpRequest;
var xmlhttp = new XMLHttpRequest();
xmlhttp.open("POST", option.url, option.asynch,option.user, option.password);
if(option.headers!=null) {
for(var key in option.headers) {
if(option.headers.hasOwnProperty(key)){
xmlhttp.setRequestHeader(key,option.headers[key]);
}
}

}
if(option.requestData!=null){
console.dir("send-----------"+option.requestData)
xmlhttp.send(option.requestData)
}else{
console.log("send-----------")
xmlhttp.send(null);
}

xmlhttp.onreadystatechange = function(){
	//debugger;
	console.log(xmlhttp.readyState);
	console.log(xmlhttp.status);
		if(xmlhttp.readyState == 4){
				if(xmlhttp.status == 200){	
                    return responseCallBack(xmlhttp.responseText)
				}else if(xmlhttp.status == 404){
					return responseCallBack(xmlhttp.responseText)
				}else if(xmlhttp.status == 0){	
					return responseCallBack(xmlhttp.responseText)
				}
		}
};

}
};

//将对象{find:"pizza",zipcode:01234,radius:"1km"}变成表单编码的格式 find=pizza&zipcode=01234$radius=1km 的形式
function encodeFormData(data){
if(!data) return "";
var pairs=[];
for(var name in data){
if(!data.hasOwnProperty(name)) continue; //跳过继承方法
if(typeof data[name] == "function") continue;//跳过方法
var value=data[name].toString();
name=encodeURIComponent(name.replace("%20","+"));
value=encodeURIComponent(value.replace("%20","+"));
pairs.push(name+"="+value);
}
return pairs.join('&');
}
module.exports =requestDatautils;

用到的npm i xmlhttprequest和 npm i xmlhttprequest-ssl

nwljy · 2020-01-28T11:15:09Z

@tyisme614

tyisme614 · 2020-01-28T17:04:03Z

先提交了高德的版本。百度的SN验证折腾了一下午没搞定，一直报错误代码211，SN校验错误。明天再找找解决方案。高德的版本比较简单，测试了一下坐标转换没什么问题。当然一个地址可能会对应多个坐标点，所以可以根据需要取所需要的坐标点，或者直接取第一个结果我觉得都OK。

frank-zsy · 2020-01-28T17:09:39Z

为何同时需要两个版本的库一起做？用一个 API 库是不是就可以了？以及精确到坐标存储应该支持一下，方便做 POI 查询，我会在数据存入时校验，如果原来获取过经纬度而地址没有发变化的字段，则不再获取，这样访问频次不会很高，只有新数据和地址变更数据才会请求。

tyisme614 · 2020-01-29T08:24:29Z

已经提交PR，新的代码里增加了本地缓存，可以按照地址，将数据进行缓存。使用getLocationFromCache函数可以直接获取缓存的数据，如果返回null，则未找到该数据。缓存中的地址可进行模糊匹配，目前的模糊匹配算法比较简单，就是字符串相似度。
代码里也删除了百度API相关配置。

frank-zsy · 2020-01-29T08:47:28Z

已经提交PR，新的代码里增加了本地缓存，可以按照地址，将数据进行缓存。使用getLocationFromCache函数可以直接获取缓存的数据，如果返回null，则未找到该数据。缓存中的地址可进行模糊匹配，目前的模糊匹配算法比较简单，就是字符串相似度。
代码里也删除了百度API相关配置。

PR 相关说明，直接在 PR 里评论哈

frank-zsy added the kind/feature Category issues or prs related to feature request. label Jan 28, 2020

dz85 changed the title ~~建议：自动生成经纬度信息~~ [Feature]建议：自动生成经纬度信息 Jan 28, 2020

Provide feedback

Saved searches

Use saved searches to filter your results more quickly

[Feature]建议：自动生成经纬度信息 #1

[Feature]建议：自动生成经纬度信息 #1

eng-cc commented Jan 26, 2020

frank-zsy commented Jan 28, 2020

tyisme614 commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020

tyisme614 commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020 via email

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

tyisme614 commented Jan 28, 2020

frank-zsy commented Jan 28, 2020

tyisme614 commented Jan 29, 2020

frank-zsy commented Jan 29, 2020

[Feature]建议：自动生成经纬度信息 #1

[Feature]建议：自动生成经纬度信息 #1

Comments

eng-cc commented Jan 26, 2020

frank-zsy commented Jan 28, 2020

tyisme614 commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020

tyisme614 commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020 via email

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

wangzhen11aaa commented Jan 28, 2020

nwljy commented Jan 28, 2020

nwljy commented Jan 28, 2020

tyisme614 commented Jan 28, 2020

frank-zsy commented Jan 28, 2020

tyisme614 commented Jan 29, 2020

frank-zsy commented Jan 29, 2020