唯一小编 发布时间:2022-11-06
一、2022(第五届)行业信息化技术创新发展峰会 2022年11月3日,由赛迪网主办的2022行业信息化技术创新发展峰会在北京隆重召开。会上,赛迪网重磅发布了“2022行业信息化竞争力百强”,揭晓了2022行业信息化竞争力百强和行业信息化优秀奖项。经过层层筛选,唯一网络凭借十余年的行业深耕和在数字化浪潮下对众多行业数字化转型的贡献,获得“2022行业信息化优秀企业”荣誉,彰显了唯一网络在行业信息化、数字化转型领域的实力。 本届峰会以“赛道转换时代信创启迪未来”为主题,旨在进一步探索前沿数字技术创新和行业数字化转型,以创新促改革,以创新推发展,助力各行业在数字经济发展竞争浪潮中战略突围,实现企业业务、价值创造的高质量发展。来自信息技术头部企业、高等研究院所的专家、高管齐聚一堂,共话中国信息化创新的成就和未来。 中国工程院院士郑纬民 赛迪网副总裁李滨 信创产业是数字时代“新基建”,创新是引领发展的第一动力,是建设现代化经济体系的战略支撑。创新引领着生产力的发展方向,促进生产要素的提升,推动生产力的发展。信息化是建设现代化工业强国的动力,是企业数字化转型的基础。因此推动信创产业大发展是国家的重要战略环节。 二、创新赋能企业数字化转型 当下,数字化转型已成为各行各业打造新增长动力并持续创新发展的必经之路,唯一网络作为国内领先的数字经济基础设施服务提供商,聚焦国家数字经济发展战略规划,结合公司在数据中心、云计算、云联网领域的多年沉淀与核心优势,为客户打造适应数字经济发展需要的“算力、网络、传输”的坚实基础,助力企业高质量发展。 作为本届行业信息化优秀企业,唯一网络以云网融合为方向,专注于打造云-网-端一体的全球化核心能力,并在全国建立及运营80多个数据中心节点,覆盖近30多个省市,拥有100+全球POP点以及全国骨干环网资源的云网服务能力,构建起支撑数字化转型升级的数字基础设施,面向人工智能、互联网、数字娱乐、政企、金融、电子商务、教育、医疗、物流、智能制造等应用场景,进行数字化创新和重塑,驱动社会的创新和发展,帮助企业实现高质量的发展,实现数字化转型与增长。
唯一小编 发布时间:2022-10-22
唯一网络,成立于2006年,是一家数字经济基础设施服务提供商,专业提供数据中心、云计算、云联网、绿色能源等服务。2018年4月通过中国证券监督管理委员会上市公司并购重组审核委员会审核,正式成为南兴装备股份有限公司(股票代码:002757)的全资子公司。 基本信息栏 公司名称:广东唯一网络科技有限公司 英文名称:GUANGDONG WEIYI NETWORK TECHNOLOGY CO., LTD. 总部地点:东莞市南城区黄金路1号天安数码城B1区4楼 成立时间:2006年10月25日 经营范围:一般项目:信息系统集成服务;销售代理;计算机软硬件及辅助设备零售。许可项目:第一类增值电信业务;第二类增值电信业务;基础电信业务。 公司类型:有限责任公司 注册资本:人民币10,000万(元) 创始人:王宇杰 公司简介 王宇杰在东莞创办了广东唯一网络科技有限公司,经过多年发展,确立了“东莞+厦门”双总部格局和“厦门、深圳、北京、广州、香港”子公司的战略发展模式。唯一网络聚焦国家数字经济发展战略规划,结合公司在数据中心、云网服务领域的多年沉淀与核心优势,致力为客户打造适应数字经济发展需要的“算力、传输、架构”的坚固基础,服务行业包括人工智能、互联网、数字娱乐、政企、金融、电子商务、教育、医疗、物流、智能制造等。 企业文化 公司愿景 助力企业全面上云,赋能数字创新生态 公司使命 为客户创造价值 为伙伴创造未来 为社会贡献正能量 核心价值观 客户第一、拼搏创新、使命担当、 成长共赢 产品服务 数据中心 唯一网络现后自建两座东莞志享(华南)和东莞沙田绿色数据中心,并配备高规格的基础设施和专业的建维团队,可为客户业务提供安全稳定的运行环境和丰富高效的云网服务。在全国范围内运营的边缘数据中心节点超80个,覆盖国内近30多个地市。同时可基于客户定制需求,为客户打造专属模块及企业自有数据中心,实现设计、建设、代维、运营、服务全生命周期业务的数据联通,赋能数字中心成为企业IT和通信服务的“战略服务中心”。 云计算 唯一网络从场景功能需求,服务质量,性价比等多个维度,帮助客户选择最优的云产品和云服务。同时,融合自身丰富的数据中心及IP与互联网带宽资源,基于OpenStack开源技术为企业客户深度定制开发的公有云平台WCloud 唯云,提供从产品咨询,产品选型,架构规划,环境搭建,应用迁移,基础架构代运维,行业解决方案等技术支撑服务,为客户实现“灵活弹性、安全稳定、简单易用、降本增效“的业务价值。 云联网 依托国内丰富的数据中心线路资源,以及覆盖全球主要国家、地区的PoP点资源,海外交换中心接入14+,全网互联网带宽30T+,同时与主流公有云节点互通互联,通过专业技术解决方案,提供优质、安全、稳定、性价比的专属连接通道,为企业提供数据中心、公有云、客户端之间的互联互通专业化服务。 绿色能源 唯一网络开发以光伏、储能为核心的绿色能源产品,致力于为客户提供高标准、高品质、高效益的一站式能效管理服务。 发展历程 起航(2006年) 2006年,广东唯一网络科技有限公司成立。 扬 帆(2007-2016年) 2010年,广东唯一网络科技有限公司深圳分公司成立; 2011年,广东唯一网络科技有限公司厦门分公司成立; 2014年,广东唯一网络科技有限公司北京分公司成立; 2015年,广东唯一网络科技有限公司广州分公司成立; 2016年,成功获得东莞证券和宏商资本的5000万元战略融资。 乘 风(2017-2020年) 2017年,首个自建T3+数据中心投产:唯一·志享(华南)数据中心; 2018年,通过证监会审核,与南兴股份(股票代码002757)完成并购重组; 2019年,营收规模突破6亿元; 2020年,发布“唯一Wcloud MSP云管理综合解决方案”。 破浪(2021年-至今) 2021年,自建T3+绿色数据中心投入运营: 唯一网络东莞沙田数据中心; 2021年,营收规模突破10亿元; 2022年,定位升级“领先的数字经济基础设施服务提供商”。 企业荣誉 2016-2020 年,连续5年获选“广东省守合同重信用企业”; 2017-2022 年,连续6年入选东莞“倍增计划”试点企业; 2018年,获选东莞市电子商务示范企业; 2018 年至今,入选国家高新技术企业; 2019 年,“唯云公有云服务平台”入选广东省高新技术产品,获“SD-WAN Ready”权威推荐; 2020年,荣获中国互联网成长型企业 2021年,获选国家“专精特新”小巨人企业; 2022年,获选“东莞首批数字经济转型服务商”。
唯一小编 发布时间:2022-09-30
9月26日,福建省工商联在福州发布“2022福建省民营企业100强榜单”。唯一网络全资子公司“厦门市世纪网通网络服务有限公司”凭借在科技创新、产品研发等方面的投入和突出成果,入选2022年“福建省创新型民营企业100强”榜单。 同期入围的还有唯一网络全资子公司“厦门市唯云网络科技有限公司”。 今年是福建省工商联第5年发布民企百强,主要从专利、商标、标准、研发主体、新产品销售五个方面构建福建省民营企业评价指标体系,评选出2022福建省创新型民营企业100强。 福建省是民营经济大省,民营经济发展始终得到全社会有力支持、充分鼓励,发展规模质量持续提升、稳健发展。福建省民营企业100强是福建省工商联深化改革、服务发展的重要品牌工作,见证了福建民营经济的蓬勃发展。 唯一网络成立于2006年,始终将企业发展融入国家发展战略,积极参与区域经济发展,促进数字经济提质增效。 唯一网络作为国内领先的数字经济基础设施服务提供商,坚持“科技是第一生产力”的实践发展观,不断推进高水平技术人才队伍的建设,拥有一支经验丰富的高级职称专业人员团队,其中技术研发人员超过100人,研发费用投入逐年增长40%以上,不断提高自主知识产权创造和应用能力,支撑企业高质量发展、提升企业核心竞争力。 成立至今,唯一网络获得国家级、省市级奖项及全国行业荣誉奖项超过70项,获得各项专利、软件著作权超过150项,广泛服务于人工智能、互联网、数字娱乐、政企、金融、电子商务、教育、医疗、物流、智能制造、绿色能源等多个领域,见证了中国互联网行业的高速发展与数字经济的蓬勃生机。 此次入选“福建省创新型民营企业100强”榜单,极大肯定了唯一网络在自主创新能力、经济效益、行业影响力、创新管理水平等方面所取得的成效。 未来,唯一网络将持续聚焦国家数字经济发展战略规划,不断加大研发投入和科技创新力度,结合公司在数据中心、云计算、云联网领域的多年沉淀与核心优势,为客户打造适应数字经济发展需要的“算力、网络、传输”的坚实基础,赋能各行业产业数字化转型升级,为促进社会经济高质量发展作出新的贡献!
唯一小编 发布时间:2022-08-27
近日,由中国信息通信研究院和中国通信标准化协会联合主办的“2022数字化转型发展高峰论坛”在北京召开,会上发布了《2022数字政府产业图谱》,该图谱是当前我国数字政府产业全景图,重点围绕政务云、智慧中台、行业应用、城市大脑、安全五大核心领域,覆盖了产业链上下游关键环节的服务提供商,全面客观展现数字政府产业现状和发展趋势。 唯一网络凭借在网络安全领域多年的技术沉淀和产品优势,成功入选《2022数字政府产业图谱》“安全”服务提供商,充分体现了业界对唯一网络实力的认可,标志着唯一网络在网络安全领域的技术实力和行业影响力再上新高。 今年6月,国务院发布《关于加强数字政府建设的指导意见》,我国数字政府建设进入快车道。安全管理作为数字政府建设的关键保障,通过数字政府安全评估、关键信息基础设施安全保护等手段,提升安全保障能力,确保数字政府建设安全、应用安全和管理安全,助推数字政府建设行稳致远。 作为国内领先的数字经济基础设施服务提供商,唯一网络致力于通过数据中心、云计算、云联网等领先技术和服务推动数字政府的建设,以实际创新行动助力数字经济健康发展。 数字政府网络资产安全管理是唯一网络发展规划中的重要战略发展板块。目前,唯一网络已参与多个地市的数据孪生城市中台、互联网资产安全监管平台、数据可视化平台及国产化改造、验真溯源平台建设以及各专题应用场景开发,并在探索中不断积累经验,树立数字经济建设标杆。 唯一网络自主研发的“网络资产测绘监管平台”作为数字政府安全管理的服务系统,已经连续多年通过相关政府部门的实践运用,获得了使用单位的高度认可,体现了唯一网络在安全领域的先进技术和服务能力。 本次上榜《2022数字政府产业图谱》,再次体现了唯一网络在数字政府建设领域的领先地位,是业界对唯一网络实力的认可与肯定。 未来,唯一网络将继续在该行业深耕,携手合作伙伴共同为推动中国数字政府的建设贡献一份力量。
唯一小编 发布时间:2022-07-09
为让学生更清晰了解IT人员的职业发展及当前形势下企业人才需求,2022年7月7日下午,唯一网络盛情接待了由南城团工委副书记邱昕带领的东莞理工学院20多名同学组成的考察团。 唯一网络人力行政部招聘经理黄裕后对南城团工委副书记邱昕和来访的同学们表示欢迎,随后由人力行政副经理苏海燕热情接待同学们参观唯一网络展厅,并详细地介绍了唯一网络的发展历史和整体情况,回答同学们对数据中心、云计算和云联网等业务的提问。 在座谈会上,唯一网络人力行政部招聘经理黄裕后、解决方案专业经理李星星等同事分别给同学们分享了唯一网络员工的职业生涯规划,从行业发展、技术迭代、公司发展变化、市场需求等方面,结合自身的从业经历让同学们深入了解了唯一网络的人才价值观。 双方的交流在友好气氛中进行,同学们也分别提出了关于专业选择、职业发展、就业择业等方面的问题。黄裕后表示,大学生需要关注社会招聘单位的用人需求,结合自身专业和个人发展规划,有针对性的加强个人专业能力,强化职业素养,积极融入团队建设当中,发挥创新能力,实现个人价值。唯一网络一贯欢迎优秀人才加盟,公司为员工的成长提供了发展空间,公司与员工共成长,共同创造美好的未来! 此次参观活动,可以让同学们了解唯一网络的人才价值观和就业前景,提前进行就业规划,帮助莘莘学子提升就业竞争力,同时也吸引更多优秀人才加入到唯一网络大家庭,用专业和能力为中国的互联网事业做出更大的贡献。
唯一小编 发布时间:2022-07-08
根据市委、市政府统一部署,为落实省党代会关于经济稳增长工作相关要求,7月5日下午,东莞市人大常委会副主任郑国洪率队赴南城街道开展经济稳增长走访活动,首先走访唯一网络深入了解公司的运营情况及发展现况。市人大常委会环境资源工委主任何伟光、副主任温晓红、办公室主任范晓嘉,南城人大办主任黄坚艺,南城经济发展局副局长张志豪等陪同走访。 唯一网络董事长王宇杰、党支部书记王毓敏等领导热情接待市人大常委会副主任郑国洪一行。 在座谈会上,唯一网络董事长王宇杰对东莞市人大常委会领导们的到访表示欢迎,随后由党支部书记王毓敏向领导一行汇报了唯一网络的发展情况,详细介绍了唯一网络的发展历程、业务情况、客户资源等内容。 郑国洪对唯一网络自2006年成立以来的发展历程和发展成果表示高度认可,对企业近年来所取得的各项成就表示赞许,并详细询问了企业目前的生产经营情况、面临的困难以及企业的发展需求和意见建议。 王宇杰向市人大常委会领导们对企业的关心表示感谢。他表示,唯一网络的发展离不开东莞市各级领导的关怀和支持,企业将一如既往地立足东莞,融入粤港澳大湾区建设深耕全国市场,持续凝聚各方力量做大做强东莞互联网行业。同时,王宇杰向领导们汇报了行业发展的现状以及唯一网络目前所面临的困难和挑战,并期盼东莞市政府在人才引进、金融优惠等政策方面给予企业更多的帮助和扶持。 郑国洪指出,唯一网络所取得的成就值得肯定,当前行业发展所存在的问题值得重视。针对企业发展需求,他强调各级政府部门,要围绕经济稳增长的中心工作,加强统筹谋划,承接落实好国家和省、市扶持政策,及时协调解决企业实际困难。最后,郑国洪表示,支持唯一网络继续深度扎根东莞南城,利用好资源优势做大做强,为夯实南城经济稳步增长后劲,为东莞市经济社会高质量发展作出更大的贡献。 唯一网络自2006年成立以来,发展成为优秀的互联网知名企业,这十六年来的稳健发展、不断创新以及所取得的成就,离不开东莞市政府及各级领导部门的关怀、肯定和指导,离不开广大客户的认同和支持。唯一网络将一如既往围绕产业发展方向,为产业发展赋能,为东莞市经济社会发展增添新动力,为东莞市互联网行业发展添砖加瓦。
唯一小编 发布时间:2022-07-01
导读:6月30日,由工信部旗下赛迪网、《互联网经济》杂志联合发起的“赋能数字经济 创新发展动能-2022(第三届)工业互联网创新峰会”于线上开幕。本期峰会举行了系列颁奖活动,唯一网络凭借十余年的行业深耕和品牌影响力,荣获“2021-2022年度产业互联网值得信赖品牌”大奖。 峰会背景 当前,全球新一轮科技革命和产业变革方兴未艾,互联网、大数据、人工智能和实体经济持续深度融合,产业数字化发展在供给侧结构性改革等方面的推动作用日益凸显。工业互联网是数字浪潮下,工业体系和互联网体系的深度融合的产物,是新一轮工业革命的关键支撑。 发展工业互联网,是推进制造强国、网络强国建设的重要支撑,对促进产业生态、大中小企业融通发展,深化供给侧改革,加快现代化经济体系建设的意义重大。国家先后出台了《关于深化“互联网+ 先进制造业”发展工业互联网的指导意见》、《工业互联网创新发展行动计划(2021-2023年)》,并组建工业互联网专项工作组,加快推动工业互联网产业发展。“十四五”时期,将是工业互联网结合5G、大数据、人工智能等新一代信息技术,加速推进制造业转型升级的关键阶段。国家经济战略的鼓励叠加传统行业的数字化转型诉求,工业互联网成为推进制造业数字化转型的关键抓手。 为了进一步促进产业转型升级,释放经济发展新动能,应对疫情“黑天鹅”,突破发展瓶颈,把握时代机遇,赛迪网、《数字经济》杂志联合主办“赋能数字经济 创新发展动能-2022(第三届)工业互联网创新峰会”。利用新技术、新思维、新应用赋能企业实现业务模式的创新升级变革,推动各行各业转型升级,创造新产品、新业务、新模式提升企业综合竞争力,赋能数字经济高质量发展。 本次峰会期间展示的创新优秀成果涉及国内外企业、服务商、产品及解决方案,体现了2021-2022年度在工业互联网、智能制造、数字化转型等领域的一系列亮点,在行业标准、关键技术、工业互联网平台、特定领域特定行业平台、工业技术软件化、智能制造、数字孪生等领域的最新进展与成就。 唯一网络作为国内知名的数据中心、云网服务及数字化解决方案提供商,在产业互联网领域,聚焦智慧城市相关的政务客户及数字化转型的细分行业客户,以云网技术能力优势为基础,为客户提供综合数字化解决方案,助力客户挖掘数字化转型价值,实现数字化的转型升级。 本次大会获奖是唯一网络继今年5月份第五届南方信息大会获得“CIO优选数字化服务商”荣誉后,再次收获业界肯定。 这份肯定得益于唯一网络多年来对行业的深耕和精准洞察,以优质的服务打造企业级综合服务平台,并持续完善“数据中心+云计算+云联网+绿色能源”的业务布局,以自身数字化优势服务更多企业融入产业互联网,助力更多企业进行数字化转型升级。这份荣誉也是唯一网络在互联网行业发展路上,与所有客户、合作伙伴共同成长、互赢互利的结果。 近年来,国家陆续出台多项关于产业互联网深化发展的利好政策,加强了企业数字化发展的信心。唯一网络将在数字化发展阶段持续进行创新和实践,不断夯实、提升数字化能力,助力更多企业加速发展,继而协助产业互联网完善行业生态体系,与合作伙伴共同建立共赢、创新、坚实的产业生态。
唯一小编 发布时间:2022-06-08
近日,广东省人民政府发展研究中心创新产业处处长张冬霞带队莅临广东唯一网络科技有限公司(以下简称“唯一网络”),实地调研我司创新驱动发展情况。 唯一网络党支部书记王毓敏热情接待了调研组一行,陪同参观了唯一网络业务展厅,并向调研组领导介绍了唯一网络的发展历程和公司主营业务情况,对于调研组所关心的数据中心业务也作了详细讲解,特别是唯一网络自营自建的唯一•志享(华南)数据中心、唯一•东莞沙田数据中心,获得了调研组的更多关注。 在调研会上,我司党支部书记王毓敏向调研组一行详细介绍了数据中心行业的整体情况,以及唯一网络在该领域所取得的成就。王毓敏表示,当前唯一网络在基于数据中心的业务基础上,聚焦于云计算、云联网、数字化解决方案等领域,紧跟市场需求,加强技术研发和创新,驱动企业不断创新发展,为行业客户数字化转型升级提供优质服务。 同时唯一网络积极响应国家绿色能源发展战略,促进粤港澳大湾区新能源产业加速发展,充分利用公司现有资源,进行产业升级,开展光伏、储能、节能等新能源业务的应用,通过在自有数据中心安装分布式光伏发电系统,有效地降低了数据中心的pue值,减少数据中心碳排放。 调研组一行认真听取了报告,了解了唯一网络在数据中心,云计算、云联网以及数字化解决方案等领域所取得的成绩。张冬霞处长对唯一网络自2006年成立以来所付出的努力和取得的成果表示肯定;同时鼓励企业在数字创新领域充分发挥优势,继续做大做强数字经济,并对企业未来的发展充满期待。 会议最后,王毓敏对张冬霞处长一行上门指导工作表示衷心的感谢,在省政府发展研究中心领导的指导和关怀下,唯一网络将会继续坚持“党建引领企业发展”的思想,不断深入研究政策,准确把握发展方向,同时结合自身优势与客户需求,前瞻布局产业化创新发展,持续提升核心业务竞争力,为“数字强国”贡献应有的力量。
唯一小编 发布时间:2022-06-03
唯一小编 发布时间:2022-05-26
近日,东莞市工业和信息化局倍增办发布2022年东莞市“倍增计划”试点企业名单,共有521家企业上榜单,唯一网络(南兴股份全资子公司)连续六年成功入选!同时入选的还有唯一网络母公司南兴装备(股票代码:002757),以及控股子公司志享科技。 何为“倍增计划”? 倍增计划是东莞按照“选好选优、培优培强”的原则,选取一批存量优势企业进行重点培育,支持企业通过科技创新、发展总部经济、推进兼并重组、加强产业链整合、强化资本运作等提升综合竞争力,力争用3-5年时间,推动试点企业实现规模和效益的倍增。 入选这份名单意味着什么? 自2017年东莞实施“倍增计划”以来,“倍增企业”高标准、高质量地完成了3年、5年倍增目标,多家企业效益、规模呈多倍增长,“倍增企业”已成为东莞高质量发展的“闪亮名片”,在支撑经济稳定增长和带头示范中起到关键作用。 从2017年至2022年,唯一网络已连续6年入选东莞市“倍增计划”试点企业!无论是产品、技术还是人才等方面,唯一网络均实现了效益与规模倍增,企业员工就业人数逐年增加,主营业务收入持续增长。 唯一网络成立16年来,先后设立了深圳、厦门、北京、广州、香港等子公司,申请成功软件著作、专利等150+件,拥有60+项企业资质,获得80+项企业荣誉,数据中心、云计算、云联网、行业解决方案等主营业务稳步发展。多年来,凭过硬的实力和良好的口碑赢得客户、政府以及同行的赞誉。 未来,在国家新基建战略、数字经济等新兴产业战略引导下,5G、云计算、物联网、虚拟现实等新兴技术的广泛商用,将带来更加丰富的互联网内容呈现、更加繁多的应用场景、更加复杂的数据结构以及更加频繁的数据处理及信息交互,IDC业务需求、增值服务需求将进一步得到快速增长。唯一网络将会持续结合自身优势与客户需求,持续保持核心业务竞争力,大力拓展行业潜力客户,加速全国市场布局,实现规模与效益持续倍增!
2020年,笔者负责的一个高德打车弹外订单系统进行了一次扩分库分表和数据库迁移。该订单系统全局部署在阿里云上,服务应用阿里云ECS部署,数据库采纳阿里云RDS,配置中心基于阿里云ACM自研,数据同步基于阿里云DTS自研以及自研分库分表组件、分布式ID组件等等。 此次进行扩分库分表的背景是,原4实例4库、各个库64张表一共256张表,部分单表已超千万量级,按目前每日单量量级,一年内单表会达到上亿条记载,单表数据量过大会带来数据库性能问题。 4实例(16C/64G/3TSSD),4库(各个实例一个库),每库64张表,共256张表。 经过RDS后台一键诊断功能,来计算表空间应用情形(这里拿测试情境数据库举例)。 数据库的瓶颈主要表现在:磁盘、CPU、内存、互联网、联结数,而联结数主要是受CPU和内存作用。CPU和内存可以经过动态升配来提高,可是SSD磁盘容量最大支持到6T(32C以下最大3T、32C及以上最大6T)。 可是现阶段兼顾成本,可先将实例扩容一倍,采纳8个实例(16C/64G/3TSSD),各个实例建4个库(database)、各个库128张表(这里实质上是一个成本取舍的流程,理论上应该采取”多库少表”的准则,单库128张表其实太多了,单库建议32或64张表为宜)。 接下来如果实例压力提高可进行实例配置改进(16C/128G、32C/128G、32C/256G等);将来如出现单实例升配无法解决,在考虑扩容实例,只需求将database迁移至新实例,迁移成本较小。 按单表最多1000w条数据评估,4096张表可支持日5000w单3年(10.1压测标准)、日2000w单5年的架构。(因业务表比较多,此处忽略掉单条数据大小的计算流程) 32个库,各个库128张表。将来可最大扩容到32个实例,无需rehash,只需求迁移数据。 阿里云RDS规格和价钱一览 因扩分库分表涉及到rehash流程(256表变4096表),而阿里云DTS只支持同构库数据迁移,所以我们基于DTS的binlog转kafka实力自研了数据同步中间件。 整体数据迁移工作包含:前期预备、数据同步环节(历史数据全量同步、增量数据实时同步、rehash)、数据校验环节(全量校验、实时校验、校验规章配置)、数据修复工具等。 在进行数据同步前,需求先整理一切表的惟一业务ID,只有确定了惟一业务ID才学兑现数据的同步操作。 需求重视的是: 一旦表中没有惟一索引,就会在数据同步流程中造成数据重复的危险,所以我们先将没有惟一索引的表依据业务场景增加惟一索引(有也许是联合惟一索引)。 在这里顺便提一下,阿里云DTS做同构数据迁移,应用的是数据库自增ID做为惟一ID应用的,这种情形如果做双向同步,会造成数据覆盖的问题。解决案例也有,之前我们的做法是,新旧实物采纳自增ID单双号解决,担保新旧实例的自增ID不会出现冲突就行。由于这次我们应用的自研双向同步组件,这个难题这里不细聊。 分表规章不同决定着rehash和数据校验的不同。需逐个表整理是用户ID纬度分表还是非用户ID纬度分表、是否只分库不分表、是否不分库不分表等等。 数据同步全局案例见下图,数据同步基于binlog,独立的中间服务做同步,对业务代码无侵入。 后续对每一个环节进行介绍。 单独一个服务,应用游标的方法从旧库分批select数据,通过rehash后批量插入(batchinsert)到新库,此处需求配置jdbc联结串参数rewriteBatchedStatements=true才学使批处理操作生效。 另外特殊需求重视的是,历史数据也会存在不断的更新,如果先开启历史数据全量同步,则刚同步达成的数据有也许不是最新的。所以这里的做法是,先开启增量数据单向同步(从旧库到新库),此时只是开启积压kafka消息并不会真正消费;然后在开始历史数据全量同步,当历史全量数据同步达成后,在开启消费kafka消息进行增量数据同步(提升全量同步效率变少积压也是核心的一环),这样来担保迁移数据流程中的数据一致。 增量数据同步考虑到灰度切流稳定性、容灾和可回滚实力,采纳实时双向同步案例,切流流程中一旦新库出现稳定性问题或者新库出现数据一致问题,可迅速回滚切回旧库,担保数据库的稳定和数据稳妥。 增量数据实时同步采纳基于阿里云DTS的数据订阅自研数据同步组件data-sync兑现,主要案例是DTS数据订阅实力会自动将被订阅的数据库binlog转为kafka,data-sync组件订阅kafka消息、将消息进行过滤、合并、分组、rehash、拆表、批量insert/update,最后再上交offset等一系列操作,最终达成数据同步工作。 整体流程中有几个问题需求重视: 问题1:怎样预防因异步消息无顺序而致使的数据一致问题? 第一kafka异步消息是存在顺序问题的,可是要知道的是binlog是顺序的,所以dts在对具体进行kafka消息投递时也是顺序的,此处要做的就是一个库担保只有一个顾客就能保障数据的顺序问题、不会出现数据状态覆盖,从而解决数据一致问题。 问题2:是否会有丢消息问题,假如顾客服务重启等情形下? 这里没有采纳自动上交offset,而是每次消费数据最终入库达成后,将offset异步存到一个mysql表中,如果顾客服务重启宕机等,重启后从mysql拿到最新的offset开始消费。这样惟一的一个问题也许会出现瞬间部分消息重复消费,可是由于上面介绍的binlog是顺序的,所以能担保数据的最终一致。 问题3:update转insert会不会丢字段? binlog是全字段发送,不会存在丢字段情形。 问题4:循环消息问题。 后面进行单独介绍。 前文有提到,由于是256表变4096表,所以数据每一条都需求通过一次rehash重新做分库分表的计算。 要说rehash,就必须先介绍下目前订单数据的分库分表策略,订单ID中冗余了用户ID的后四位,经过用户ID后四位做hash计算确定库号和表号。 数据同步流程中,从旧库到新库,需求拿到订单ID中的用户ID后四位模4096,确定数据在新库中的库表位置;从新库到旧库,则需求用用户ID后四位模256,确定数据在旧库中的库表位置。 想象一下,业务写一条数据到旧实例的一张表,于是诞生了一条binlog;data-sync中间件接到binlog后,将该记载写入到新实例,于是在新实例也诞生了一条binlog;此时data-sync中间件又接到了该binlog……不断循环,消息愈来愈多,数据顺序也被打乱。 怎样解决该问题呢?我们采纳数据染色案例,只要能够标识写入到数据库中的数据使data-sync中间件写入而非业务写入,当下次接收到该binlog数据的时候就不必进行再次消息流转。 所以data-sync中间件需求,各个数据库实例创建一个事务表,该事务表tb_transaction只有id、tablename、status、create_time、update_time几个字段,status默认为0。 再回到上面的问题,业务写一条数据到旧实例的一张表,于是诞生了一条binlog;data-sync中间件接到binlog后,如下操作: 此时data-sync中间件将上面这些语句打包全体上交到新实例,新实例更新数据后也会生产对应上面语句的binlog;当data-sync中间件再次接收到binlog时,只要推断碰到tb_transaction表status=1的数据开始,后面的数据都直接舍弃不要,直到碰到status=0时,再陆续接收数据,以此来担保data-sync中间件只会流转业务诞生的消息。 数据校验模块由数据校验服务data-check模块来兑现,主要是基于数据库层面的数据对照,逐条核对每一个数据字段是否一致,不一致的话会通过配置的校验规章来进行重试或者报警。 通过数据校验,一旦发觉数据不一致,则需求对数据进行修复操作。 数据修复有两种案例,一种是适用于大范围的数据不一致,采纳重置kafkaoffset的方法,重新消费数据消息,将有问题的数据进行覆盖。 全局灰度案例:SP+用户纬度来兑现,SP纬度:凭仗灰度情境切量来做,用户纬度:依靠用户ID后四位百分比切流。 灰度切量的流程肯定要配合停写(秒级),为什么要停写,由于数据同步存在肯定拖延(正常毫秒级),而一切业务操作肯定要保障都在一个实例上,否则在旧库中业务刚刚调整了一条数据,此时切换到新库如果数据还没有同步过来就是旧数据会有数据一致问题。所以流程应该是: 虽然在切流之前,在测试情境进过了大量的测试,可是测试情境毕竟和生产情境不相同,生产情境数据库一旦出问题就也许是灭顶之灾,虽然上面介绍了数据校验和数据修复步骤,可是把问题拦截在发生之前是做服务稳定性最重大的工作。 因此我们提出了ABC验证的概念,灰度情境ABC验证预备: 详细灰度案例和数据源切换步骤: 整体数据迁移流程还是比较复杂的,时光也不是非常充裕(流程中还穿插着十一全链路压测改变),在有限的时光内集大家之力重复探讨发掘也许存在的问题,然后论证解决案例,不放过任何一个也许出现问题的环节,还是那句话,把问题拦截在发生之前是做服务稳定性最重大的工作。 流程中的细节还是非常多的,从数据迁移的预备工作到数据同步测试,从灰度步骤确定到正式生产切换,尤其是融合业务和数据的特色,有非常多需求考虑的细节,文中没有一一列出。 最终通过近两个月的紧张工作,无业务代码侵入、零事故、平稳地达成了扩分库分表和数据迁移的工作。
唯一小编 2021-03-01 阿里云服务器
改进terraform到v0.13后,初始化terraform也许会出现以下问题 因素是terraform自v0.13后就交给provider自己维持了。解决案例: 1.应用命令查看自己版本 示例得到 +provider.tencentcloudv1.53.0 2.粘贴以下代码至terraform配置中,version采纳自己的tencentcloudterraform版本
唯一小编 2021-03-01 腾讯云服务器
在网络相关的业务中,高弹性是往往被提及的一个架构设计目的,前两个我就碰到一个用户需求我们帮助设计一个高弹性的架构以承载他们周期性暴增的业务压力,用户90%以上的业务压力都集合在业务高峰期,因此在设计这个架构之初,我和用户就在纠结,到底是采纳更了解的“堆”服务器的想法呢,还是采取更具弹性的容器化的案例呢?其实作为一个技术人员,在问这个难题的时候就已经有确定的答案了,最终我们设计出了这样的一个架构: 容器平台选择阿里云的ACK(阿里云容器服务Kubernetes版)。其中ACK分成专有版和托管版,区分是专有版的管控节点需求用户自行预备,而托管版应用阿里云的资源进行资源管控,在托管版中又分成标准版和Pro版,其中Pro版有确定的SLA保障,生产系统建议选择Pro版。同时为了保障worker节点的内容安全,建议为充当worker节点的ECS配置云安全中心服务进行主机安全防护。 除了ACK,阿里云还提供无服务器架构的ASK,区分是ACK有ECS服务器充当worker节点,创建POD所需的资源经过ECS进行安排,而ASK没有worker节点,ASK直接在阿里云的分享资源池中经过ECI(弹性容器节点)来安排资源创建POD。 在这个项目中为了担保永远有肯定量的稳定资源供给,我们决定应用ACK再融合阿里云的ECI来兑现资源的弹性供给。ECI资源的申请和释放可经过ACK的ack-virtual-node插件出自动达成,动态增加的POD将自动运行在ECI之上。 考虑到业务高峰期和平常存在庞大的应用量落差,选择应用按流量的方法购入手互联网带宽资源,并经过购入手分享流量包将一切的互联网流量进行集合抵扣。这个项目所用到的互联网流量主要有如下三个: 鉴于ECI节点上服务的启动需求肯定的时光,而业务流量也许瞬间到达峰值,因此经过MQ来缓冲瞬时的业务压力,为运行在ECI弹性资源上的服务争取启动时光。 阿里云MQ服务依据访问协议的不同分成RocketMQ、AMQP、Kafka三个系列,对于海量的业务交易场景建议选择通过双十一检验的RocketMQ系列,在RocketMQ系列中又分成一般版和公司铂金版两个版本,公司铂金版采纳独享硬件资源,能够更充分的保障峰值吞吐实力,对于瞬时业务峰值高的业务,建议尽也许选择铂金版。 数据库采纳云原生数据库PolarDB,PolarDB可以从2个节点扩容到16个节点,单节点可改进至88核710G规格,集群采纳分布式分享存储架构,单个集群可存储100TB的数据,有赖于其采纳分布式分享存储的架构,PolarDB集群增加节点时无需进行大量的数据拷贝,因此可以在分钟级达成集群的横向扩容。 我觉得这个架构对于大部分“腰部”级其他网络行业用户都是适用的,因此共享出来,盼望对大家有所协助。
唯一小编 2021-03-01 阿里云服务器
云专线和普通专线区别,首先我们说一下云专线在定义和应用方 面的区别。 普通物理专线,是端口带宽资源被用户独占的物理专线,此种类型的物理专线由用户单独使用该物理线路,专线用户可以创建多个虚拟接口。 云专线(Direct Connect)用于搭建用户本地数据中心与云上VPC之间高速、低时延、稳定安全的专属连接通道。 传统专线主要应用于用户的局域网互联或快速浏览互联网。用户可以根据需要选择64Kbps- 2Mbps不等的速率。通过互联专线实现数据、语音、图像等业余的安全传输:实现各公司、部门间的资源交换和共享;通过拥有固定、独享的IP地址,视需要建立自己的Mail-Server. Web- Server等服务器,并可通过Internet组建公司内部的VNP业务。 云专线是连接客户局域网与行业云的专线网络,全程独立通道,能够不经互联网连接云主机,同时能保证高网速,对于银行、金融机构等高保密性要求的客户具有重要意义。 下面,我们在分别从开通时间、费用、弹性伸缩、稳定性等维度对他们之间的区别进行说明: 对比一下可以发现 , VPN是开通便捷,费用上比云专线要低很多,但是在公网的质量保障上不如专线,时延高,安全性不如云专线强。相对来说云专线低时延、服务质量稳定,但是在费用上就较高一些。而且在开通时间上,因为受限于物理专线的部署、运营商的线路资源的情况,所以部署时间要比VPN长。在这个情况下,一个量级, VPN如果双方都有internet资源的话,基本上是即开即用,双方配置好,协商起来就可以通信。但是云专线一般是将数据中心和公有云VPC对接,这个时候受限于物理链路,要运营商去核查资源,要去做物理线路的对接。这些正常情况下,就运营商的承诺。有诺的时间一般都是至少需要20个工作日。云专线线上的配置开通,现在一般也是天级,在拿到这种线路配置信息,且物理专线对接完以后,在一天内就可以完成这个线路配置打通的。 唯一网络是中国市场专业的云托管服务商( Cloud MSP ),在数据中心和云计算领域有近十年的专业交付和管理经验,目前正服务于2000多家企业级客户并与全球多家超大规模公有云服务商建立了战略合作关系。在云计算驱动产业变革的今天,安畅以客户需求为驱动,积极投资于核心技术研发和团队组织的云原生技能,致力于成为IT新生态和产业互联网的新-代连接器。 为客户提供”云+大数据+AI”的咨询、集成和管理服务,以及数字化解决方案,帮助客户利用新技术进行业务创新,实现数字化变革。
唯一小编 2021-02-19 专线