搜云库技术团队

kafka常见的集群部署模式 1、 Hub架构。一个中心的kafka集群做中央调度，对应多个本地的kafka集群。 变种是一个关键的kafka集群对应一个非关键的跟随者 优点：只有本地用到的数据就在本地使用，多个数据中心需要用到的数据就放在...

赞(0)站长2020-08-21技术文章汇总 阅读(580)

发送生产消息的大致流程： 1、 创建生产者对象，生产者发送包装消息的ProducerRecord 2、 生产者通过send方法发送消息 3、 消息被序列化 4、 消息计算出分区 5、 根据分区消息被分配到指定主题和分区的批次中 6、 批量发...

赞(0)站长2020-08-21技术文章汇总 阅读(609)

kafka是用来干嘛的？ 一个系统通常拥有许多的应用场景，比如聊天，购物，前端交互等，每个场景的数据进行单独分析的时候需要有各自的队列来搜集数据，然后分发给各自的后台来处理数据，各自的维护成本大，kafka则可以用来解决这些问题，它提供了多...

赞(0)站长2020-08-21技术文章汇总 阅读(582)

1、 为IP模块发送和接收IP数据报 2、 为ARP模块发送ARP请求和接收ARP应答 3、 为RARP发送RARP请求和接收RARP应答 什么是以太网？ 局域网采用的通信协议标准，封装格式详见 RFC 894。 以太网链路层协议：SLIP...

赞(0)站长2020-08-21技术文章汇总 阅读(588)

pattern discovery 模式识别中的一些基本概念 模式:对于一个集合项，某些特定的子序列或者结构通常一起出现在数据集中 absolute support :某一项出现的频率[数量] relative suppor...

赞(0)站长2020-08-21技术文章汇总 阅读(581)

coursera课程 text retrieval and search engine 第六周 推荐。 推荐系统 推荐系统即把恰当的内容推送给用户，类似于在一系列文档中过滤出用户想要的。一般有两种方式: 1、 看用户喜欢什么样的东西，然后检...

赞(0)站长2020-08-21技术文章汇总 阅读(599)

coursera课程 text retrieval and search engine 第五周 推荐。 反馈的基本类型 relevance Feedback:查询结果返回后，有专门的人来识别那些信息是有用的，从而提高查询的命中率，这种方式很...

赞(0)站长2020-08-21技术文章汇总 阅读(650)

coursera课程 text retrieval and search engine 第四周 推荐。 概率模型 根据现有搜集的数据做估算，假设一个文档被用户看到了，如果文档被用户点击进去，那么认为是相关的，否则不相关[只认为相关和...

赞(0)站长2020-08-21技术文章汇总 阅读(631)

coursera课程 text retrieval and search engine 第三周 推荐。 如何评估一个算法是否有效 思路：构建一个可以重复使用的数据集，并且定义测量办法，来衡量结果。 感性的来说，使用不同的算法作用于同一个数据...

赞(0)站长2020-08-21技术文章汇总 阅读(597)

coursera课程 text retrieval and search engine 第二周 推荐。 什么是TF TF(term frequency)，根据出现的次数作为权重，出现一次，权值加1。但是仅使用这种方式无法区分重要的词和非重要...

赞(0)站长2020-08-21技术文章汇总 阅读(684)