聚合国内IT技术精华文章,分享IT技术精华,帮助IT从业人士成长

  • 80 views阅读

    分库分表实战(第7期):抽丝剥茧 — 千万级数据之sql优化下篇

    「 关注“石杉的架构笔记”,大厂架构经验倾囊相授 」帮您解忧,儒猿特别打造 “跳槽训练专栏系列”内容试看(点击)   |    课程目录(点击) <<  滑动查看更多专栏  >>前 言上一期,我们讲解了sql优化的一般流程,不管是优化join语句、wher...

    分类:技术文章 时间:2022-01-25 10:46 我要评论(0个)

  • 259 views阅读

    7次KDD Cup&Kaggle冠军的经验分享:从多领域优化到AutoML框架

    1 背景与简介反馈快速、竞争激烈的算法比赛是算法从业者提升技术水平的重要方式。从若干行业核心问题中抽象出的算法比赛题目具有很强的实际意义,而比赛的实时积分榜促使参加者不断改进,以试图超越当前的最佳实践,而且获胜方案对于工业界与学术界也有很强的推动作用,例如KDD Cup比赛产出的Field-Aware Factorization Machine(FFM)算法[1]、ImageNet比赛产出...

    分类:技术文章 时间:2022-01-07 18:31 我要评论(0个)

  • 650 views阅读

    Kvrocks 在 RocksDB 上的优化实践

    以下文章来源于Kvrocks Community ,作者Myth Kvrocks Community . Kvrocks is a distributed key value NoSQL database based on RocksDB and compatible with Redis protocol. 不久前 Kvrocks 发布 2.0.5 版本,该版本不仅...

    分类:技术文章 时间:2021-12-29 14:38 我要评论(0个)

  • 487 views阅读

    但是GPU的性能依然还是DrawCall优化那一套

    Entitas的ECS系统 1. 本来在一个对象中添加一个类字段的过程,ECS需要添加一个类代表Component,并且代码生成。 这个字段一般用于描述对象的资源,处理显示的GameObject, 表示对象的类型等。 2. 本来一个对象的业务逻辑处理过程直接用方法解决的, ECS需要新加一个System,而操作对象需要使用Filter或Group查询获得。 ...

    分类:技术文章 时间:2021-12-28 00:42 我要评论(0个)

  • 506 views阅读

    来自一线大厂的云原生成本优化实践指南

    作者 | 胡忠想编辑 | 蔡芳芳前    言近年来,公有云、混合云等技术在全球迅速发展,云的普及度越来越高,Docker、Kubernetes、DevOps、Service Mesh 等云原生技术蓬勃发展。但在“上云”之后,企业却往往发现“用云”并没有那么容易。麦肯锡的一份研究报告显示,全球服务器的平均每日利用率通常最高仅为 6%。据 Gartner 统计,...

    分类:技术文章 时间:2021-12-22 18:29 我要评论(0个)

  • 404 views阅读

    后疫情时代企业云原生成本优化指南

    前言近年来,公有云、混合云等技术在全球迅速发展,云的普及度越来越高,Docker、Kubernetes、DevOps、Service Mesh等云原生技术蓬勃发展。但在“上云”之后,企业却往往发现“用云”却并不是那么容易。麦肯锡的一份研究报告表示,全球服务器的平均每日利用率通常最高仅为6%。Garter统计,全球数据中⼼利用率不足12%。以上数据都表明,数据中心的服务器成本及资源消耗方面...

    分类:技术文章 时间:2021-12-21 14:37 我要评论(0个)

  • 494 views阅读

    FlutterWeb性能优化探索与实践

    一、背景1.1 关于FlutterWeb时间回拨到 2018 年,Google 首次公开 FlutterWeb Beta 版,表露出要实现一份代码、多端运行的愿景。经过无数工程师两年多的努力,在今年年初(2021 年 3 月份),Flutter 2.0 正式对外发布,它将 FlutterWeb 功能并入了 Stable Channel,意味着 Google 更加坚定了多端复用的决心。当然 ...

    分类:技术文章 时间:2021-12-20 18:31 我要评论(0个)

  • 532 views阅读

    为余势负天工背,云原生内存数据库Tair助力用户体验优化

    #双11 7 个内容 #数据库 20 个内容 作为双11大促承载流量洪峰的利器,Tair支撑了电商交易核心体验场景。不仅在数十亿QPS的峰值下保持着亚毫秒级别的顺滑延迟,同时在电商交易核心体验场景上也做出了技术创新。一  前言2021年双十一,是天猫的第十三次双十一,也是 Tair 的第十三次双十一。每个参与备战的 Tair 同学各有不同,有的同学是第一次,感受到了技术大团建的...

    分类:技术文章 时间:2021-12-13 14:37 我要评论(0个)

  • 827 views阅读

    [原]IDC网络传输优化的罪与罚

    IDC网络中,deep buffer是原罪,延时是惩罚。 IDC网路拥塞控制,南辕北辙了。 拥塞的本质是对共享资源的争抢,这件事放到网路上,低效的做法却正常了。 操作系统实现中,针对共享资源互斥,自然而然的做法是细粒度拆分临界区,比如Linux内核per-CPU变量越来越多,诡异的是,在网络中遇到同样的问题,做法却相反。 普遍的共识是尽可能避免访问共享资源。比如,当线程进临界区失败,如还有...

    分类:技术文章 时间:2021-12-11 09:15 我要评论(0个)

  • 875 views阅读

    TensorFlow在推荐系统中的分布式训练优化实践

    1 背景TensorFlow(下文简称TF)是谷歌推出的一个开源深度学习框架,在美团推荐系统场景中得到了广泛的使用。但TensorFlow官方版本对工业级场景的支持,目前做得并不是特别的完善。美团在大规模生产落地的过程中,遇到了以下几方面的挑战:所有参数都是用Variable表达, 对于百亿以上的稀疏参数开辟了大量的内存,造成了资源的浪费;只支持百级别Worker的分布式扩展,对上千Wor...

    分类:技术文章 时间:2021-12-10 18:31 我要评论(0个)

  • 746 views阅读

    [原]Wi-Fi弱网传输优化不成功有感

    总之,就是失败了。 我曾建议不要针对Wi-Fi弱网做传输优化,因为很难有大收益。本质原因: Wi-Fi网络通过RTT变化识别拥塞不靠谱。 Wi-Fi网络通过丢包识别拥塞不靠谱。 RTT变化和丢包是端到端识别拥塞的唯二手段,两个都不靠谱,怎么办?什么都别做。当什么都不做的时候便闲了,不妨探究下Wi-Fi为什么拉胯。 同为无线网络,为什么LTE比Wi-Fi稳定太多呢?先从历史说起。 Wi-...

    分类:技术文章 时间:2021-12-04 09:15 我要评论(0个)

  • 890 views阅读

    [原]IDC网络传输优化随想录

    在IDC内部,如果你还遵循传统为广域网而生的拥塞控制逻辑做事,那就错了。当然,我下面说的也不一定都对。 正确的做法就好像我之前说的一种情况的反例,那种情况是,让你优化长肥链路传输,你却在优化spinlock。IDC的情况相反,把前面的例子反过来说,把spinlock换成ECN(可扩展)就对了。但这就够了吗? 广域网传输优化只能基于RTT为周期,你有足够的时间利用足够的资源去做运算,但IDC...

    分类:技术文章 时间:2021-11-20 09:14 我要评论(0个)