2020年2月 - ZhangTory's NoteBlog

2020年2月

记一次多线程数据拉取的网络优化思路

我们公司之前从京东慧采平台拉取的300W+条商品数据中,发现有大约78W条商品的marketPrice为空。
其中一部分是因为不在我们商品池,拉取不到价格数据;而另外一部分可能是最早拉取的代码有问题造成的,因为要得到marketPrice需要另外添加参数才能拉取到。
现在我需要对这78W条数据重新拉取价格信息。



查看全文 »

DDNS的替代品:WayHome 回家之路

在家的树莓派上搭建了HomeAssistant,有时需要在外网访问,查阅了一些外网访问的方案,如ngrok、frp、DDNS等。
他们各有优势,但是ngrok、frp这种内网穿透工具,需要有自己的服务器,而且所有的流量都需要从服务器绕一次,没有必要。
DDNS不错,只需要有自己的域名即可,但是DNS同步可能最慢会有10分钟的窗口期不能访问,当然遇到的可能性比较小。
本来对于我自己来说用DDNS是个比较好的选择,但是我在查资料的时候发现很多搭建NAS的人也有类似的需求,而他们却没有必要买一个域名,所以我觉得自己可以撸一个轮子来解决这个问题。
于是WayHome就诞生了。

查看全文 »