搜云库技术团队

大家好，很高兴来到GITC2016的舞台，我是来自58到家的沈剑，今天我分享的主题是《58到家从IDC到云端架构迁移之路》。 机房迁移是一个很大的动作： 15年在58同城实施过一次（“逐日”项目），几千台物理机，从IDC迁到了腾讯的天津机房...

赞(4)站长2019-10-24架构师必看 阅读(1571)

一、需求缘起 在上一篇文章《消息“时序”与“一致性”为何这么难？》中，介绍了一种为了保证“所有群友展示的群消息时序都是一致的”所使用的“id串行化”的方法：让同一个群gid的所有消息落在同一台服务器上处理。 有朋友就要问了，如何保证一个群g...

赞(1)站长2019-10-24架构师必看 阅读(1581)

一、需求缘起 【业务场景】 有一类写多读少的业务场景：大部分请求是对数据进行修改，少部分请求对数据进行读取。 例子1：滴滴打车，某个司机地理位置信息的变化（可能每几秒钟有一个修改），以及司机地理位置的读取（用户打车的时候查看某个司机的地理位...

赞(1)站长2019-10-24架构师必看 阅读(1441)

一、需求缘起 某并发量很大，数据量适中的业务线需要实现一个“标题检索”的功能： （1）并发量较大，每秒20w次 （2）数据量适中，大概200w数据 （3）是否需要分词：是 （4）数据是否实时更新：否 二、常见潜在解决方案及优劣 （1）数据库...

赞(0)站长2019-10-24架构师必看 阅读(1475)

缘起： （1）原创不易，互联网抄袭成风，很多原创内容在网上被抄来抄去，改来改去 （2）百度的网页库非常大，爬虫如何判断一个新网页是否与网页库中已有的网页重复呢？ 这是本文要讨论的问题（尽量用大家都能立刻明白的语言和示例表述）。 一、传统签名...

赞(0)站长2019-10-24架构师必看 阅读(1387)

缘起：在高并发的分布式环境下，对于数据的查询与修改容易引发一致性问题，本文将分享一种非常简单但有效的优化方法。 一、业务场景 业务场景为，购买商品的过程要对余额进行查询与修改，大致的业务流程如下： （1）从数据库查询用户现有余额 SELEC...

赞(0)站长2019-10-24架构师必看 阅读(1432)

本文内容：创业型公司如何快速搭建可扩展，可落地的立体化监控平台 一、需求缘起 创业型公司有系统监控么？来看两个case： case 1：CXO大群内贴了一张“用户微信投诉”的截图 （1）CXO大群内贴了一张“用户微信投诉”的截图 （2）技术...

赞(0)站长2019-10-24架构师必看 阅读(1475)

一、需求缘起 大伙打开微信钱包，会发现58到家入驻了微信钱包的一级入口（如下图），这个入口流量极大，微信要求被接入的H5必须能抗住n万的qps（58到家的系统是偏交易的系统，虽然一天100w订单其实也没多少请求），这是之前的业务系统没有遇到...

赞(0)站长2019-10-24架构师必看 阅读(1378)

从0开始做垂直O2O个性化推荐 上次以58转转为例，介绍了如何从0开始如何做互联网推荐产品，58转转的宝贝为闲置物品，品类多种多样，要做统一的宝贝画像比较难，而分类别做宝贝画像成本又非常高，所以更多的是进行用户画像、分类预测推荐、协同过滤推...

赞(0)站长2019-10-24架构师必看 阅读(1379)

从0开始做互联网推荐【产品+算法+实现】 一、58转转简介 58旗下真实个人闲置物品交易平台 二、从0开始设计推荐产品框架 （1）首页推荐：提取用户画像，根据线下提取出的用户年龄、性别、品类偏好等在首页综合推荐宝贝 （2）宝贝详情页推荐：买...

赞(0)站长2019-10-24架构师必看 阅读(1497)