网站建设没业务,canva在线平面设计官网,思睿鸿途北京网站建设,wordpress如何改标题优质博文#xff1a;IT-BLOG-CN
一、挑战/注意事项
【1】因文件系统HDFS没有关联信息OrderId等#xff0c;不能对存量数据进行有策略的同步#xff0c;因此目前是将所有的文件同步至云服务器SIN#xff1b; 【2】海外数据和国内数据上传到各自的文件服务器后#xff0c;…优质博文IT-BLOG-CN
一、挑战/注意事项
【1】因文件系统HDFS没有关联信息OrderId等不能对存量数据进行有策略的同步因此目前是将所有的文件同步至云服务器SIN 【2】海外数据和国内数据上传到各自的文件服务器后读取文件的地址国内和国外的前缀就会不同因此需要通过代理的方式解决该问题
二、简介
存储底层存储使用的FastDFS系统一个文件4个备份分别存储在2个IDC。 【1】内网域名流量会回流SHA文件保存在SHA 【2】如果文件只想保存SIN FRA环境前提条件是使用外网域名 【3】外网域名和内网域名请求参数/返回报文格式有差别 【4】外网域名需要用Proxy调用
环境上传文件域名下载文件域名是否需要代理内网域名http://uploadfile.xxx.comhttp://downloadfile.xxx.com不需要外网域名http://file.xxx.comhttp://file.xxx.comFRAproxy-nwl.fraaws.xxx.com:8080 SINproxy-nwl.sinaws.xxx.com:8080
Channel频道名上传的文件都是保存在自己申请的Channel下
三、文件同步
【1】目前灰度阶段默认SHA/SIN/FRA3个机房之间文件是相互同步的 【2】SHA与SIN/FRA机房之间是否同步文件是根据Channel维度可以配置的 【3】SIN与FRA是相通的都是外网SIN或者FRA可以访问对象上传的文件
四、SIN上云方案
方案一用新Channel过渡期间文件保存在SHA和SINFRA也可以访问。将海外文件从旧Channel删除然后再上传至新Channel。最终要配置为不同步回SHA时需要删除上海侧的文件。
方案二和国内公用Channel最终国内和海外要隔离时把国内订单的文件迁移至新建Channel配置数据隔离。
五、代码修改
【1】添加ProxyRequest设置代理服务器地址即可。
String httpProxyURL CertificateConfig.getHttpProxyURL(); // proxy-nwl.fraaws.xxx.com:8080
String[] tmpList httpProxyURL.split(:);
HttpHost proxy new HttpHost(tmpList[0], NumberUtil.parseInt(tmpList[1]));
requestConfigBuilder.setProxy(proxy);
