注册
[已结束]  SM Meetup--第二讲:互联网+时代下的­数据处理技巧
时间:2015-05-23 13:30
地点:数码大厦A座2010
活动介绍:
对移动开发者来说,App用户量突增是喜忧参半的事。本次活动将邀请雪球、陌陌、节操精选等App的技术负责人就如何避免用户量突增导致服务器宕机的问题、如何打造高可用后台架构等技术话题进行讨论。随着互联网+时代的到来,更多互联网业务中的深度应用需求会越来越细化。这些需求对数据处理平台有很高的需求,更多表现在数据存储/计算平台、数据仓库技术和数据产品设计上的权衡,本期SM将邀请国内资深的数据架构师就数据存储方案、数据库技术的现状和未来发展方向展开讨论。
活动时间:

演讲征集时间

2015-04-10 09:00 - 2015-05-23 12:00

活动举办时间

2015-05-23 13:30 - 2015-05-23 17:30

100% Complete

部分演讲主题展示:
  • 陌陌数据源访问中间件介绍

    演讲嘉宾:杨建军
    陌陌基础平台组架构师  陌陌基础平台组架构师,在陌陌工作期间主要负责基础平台中间件研发,业务系统架构评审以及优化工作。加入陌陌前曾在58同城、世纪佳缘等公司从事搜索、大数据平台、推荐系统架构设计研发工作。

    陌陌的服务系统每天承载接近千亿级别的服务访问量,数据库的规模和访问压力随着业务的增长也在迅速增大。 目前陌陌的数据源中采用了多种关系和非关系型数据库,其中规模最大的redis集群已经近5000个实例。如何在业务增长的同时,不断改进和完善我们的存储方案,设计一个高可用可运维的数据存储方案显得尤为重要。这次分享主要介绍陌陌数据源访问中间件的演化进程实践。
  • reborndb:下一代分布式kv数据库

    演讲嘉宾:唐刘
    PingCAP程序员  典型宅男程序员一枚,爱好开源,爱好折腾。在腾讯,金山打过酱油,现在PingCAP跟大家一起捣鼓下一代分布式KV以及NewSQL

    很多企业使用redis进行数据存储,但随着业务发展,数据量不断增大,redis的内存问题以及动态扩容问题愈发严重,而reborndb,一个全兼容redis的分布式KV数据库。则很好的解决这些问题。
  • Docker镜像驱动选择与存储系统

    演讲嘉宾:田琪
    京东云主机及云数据库的架构及研发  10年互联网行业 从业经验,分别就职于搜狐,新浪,腾讯,京东等公司,目前负责京东云主机及云数据库的架构及研发工作,之前曾在搜狐技术产品中心负责搜狐webim,实时游戏平台等技术产品的研发与架构工作,之后加入新浪微博负责新浪微博的底层平台研发工作,主导了 redis在新浪微博的 大规模定制开发与应用。之后加入腾讯负责腾讯大规模分布式存储项目的研发与架构工作,为腾讯众多业 务产品线提供高可靠 的存储服务。个人技术方面主要关注和涉及分布式存储/缓存/数据库及Linux内核等基础技术领域,对云计算基础技术有深刻理解。

    主要介绍Docker存储端驱动的选择,包括aufs,devicemapper,overlayfs,thin provision等技术的原理与优劣,并详细介绍京东自主研发的分布式镜像存储系统架构及实现等技术细节
参加活动人员展示:
问演讲人:

问题标题: Redis Docker SQL Server

你的问题可能已经有答案

    问题补充 (选填):

     
    0
    评论

    不可不知的Redis秘籍:事务命令全攻略! 数据库 Redis

    综合技术讨论云端源想 发表了文章 • 320 次浏览 • 2024-02-23 15:36 • 来自相关话题

    在数据处理的世界里,事务(Transaction)是一个不可或缺的概念。它们确保了在一系列操作中,要么所有的操作都成功执行,要么都不执行。这就像是一个“全有或全无”的规则,保证了数据的一致性和完整性。今天,我们就来聊聊Redis事务的使用,看看如何通过它来提升... ...查看全部
    0
    评论

    掌握Redis核心:常用数据类型的高效运用秘籍! Redis

    Web开发云端源想 发表了文章 • 326 次浏览 • 2024-02-22 14:34 • 来自相关话题

    在数据驱动的时代,高效地存储和处理数据成为了开发者们的重要任务。Redis,作为一个开源的高性能键值对(key-value)数据库,以其独特的数据结构和丰富的功能,成为了众多项目的首选。今天,我们就来揭开Redis的神秘面纱,看看它是如何通过不同的数据类型,为... ...查看全部
    0
    评论

    Redis性能瓶颈揭秘:如何优化大key问题? Redis

    技术精选王二蛋和他的张大花 发表了文章 • 173 次浏览 • 2023-06-14 10:21 • 来自相关话题

    1. 什么是Redis大key问题 Redis大key问题指的是某个key对应的value值所占的内存空间比较大,导致Redis的性能下降、内存不足、数据不均衡以及主从同步延迟等问题。 到底多大的数据量才算是大key? 没有固定的判别标准,通常认为字符串类型的... ...查看全部
    0
    评论

    既然有Map了,为什么还要有Redis? Redis

    技术精选王二蛋和他的张大花 发表了文章 • 153 次浏览 • 2023-05-31 10:03 • 来自相关话题

    一、同样是缓存,用map不行吗? Redis可以存储几十个G的数据,Map行吗? Redis的缓存可以进行本地持久化,Map行吗? Redis可以作为分布式缓存,Map只能在同一个JVM中进行缓存; Redis支持每秒百万级的并发,Map行吗? Redis有... ...查看全部
    0
    评论

    Redis 使用zset做消息队列总结 Redis

    技术精选王二蛋和他的张大花 发表了文章 • 158 次浏览 • 2023-05-10 10:30 • 来自相关话题

    1.zset为什么可以做消息队列 zset做消息队列的特性有: 有序性:zset中所有元素都被自动排序。这让zset很适合用于有序的消息队列,因为可以根据一个或多个标准(比如消息的到达时间或优先级)按需检索消息。 元素唯一性:zset的每个元素都是独一无二的... ...查看全部
    0
    评论

    零散逻辑验证不再烦恼:基于Python和Redis的实践 Python Redis

    技术精选王二蛋和他的张大花 发表了文章 • 190 次浏览 • 2023-04-21 15:03 • 来自相关话题

    在开发过程中,经常需要验证某个逻辑,或者某种设计方案,但是我们Android的编译运行会随着项目的迭代变慢,此时验证问题较为麻烦,很多工程师会选择新建一个新的项目去验证,但是新建项目会面临很多基础组件的调用问题,如果在项目之外创建的项目为其配备对应的基件,由会... ...查看全部
    0
    评论

    Redis中的HotKey如何解决 Redis HotKey

    技术精选王二蛋和他的张大花 发表了文章 • 372 次浏览 • 2023-02-10 10:58 • 来自相关话题

    对于三高系统,Redis是必须/必需的,当并发高到一定的程度就可能会出现HotKey的问题,今天我们来看下Redis中的HotKey如何解决。 什么是HotKey 在较短的时间内,海量请求访问一个Key,这样的Key就被称为HotKey。 HotKey的危害 ... ...查看全部
    0
    评论

    高并发技巧-redis和本地缓存使用技巧 高并发 Redis

    技术精选王二蛋和他的张大花 发表了文章 • 474 次浏览 • 2022-10-28 15:37 • 来自相关话题

    在这篇文章中,我主要介绍的是分布式缓存和本地缓存的使用技巧,包括缓存种类介绍,各种的使用场景,以及如何使用,最后再给出实战案例。 众所周知,缓存最主要的目的就是加速访问,缓解数据库压力。最常用的缓存就是分布式缓存,比如redis,在面对大部分并发场景或者一些... ...查看全部
    0
    评论

    如何从0到1构建一个稳定、高性能的Redis集群 Redis

    综合技术讨论上帝之眼 发表了文章 • 614 次浏览 • 2022-08-02 09:27 • 来自相关话题

    这篇文章我想和你聊一聊 Redis 的架构演化之路。现如今 Redis 变得越来越流行,几乎在很多项目中都要被用到,不知道你在使用 Redis 时,有没有思考过,Redis 到底是如何稳定、高性能地提供服务的?你也可以尝试回答一下以下这些问题:我使用 Redi... ...查看全部
    0
    评论

    Redis 缓存穿透与缓存击穿 Redis

    综合技术讨论上帝之眼 发表了文章 • 660 次浏览 • 2022-04-11 23:17 • 来自相关话题

    一、🐕缓存穿透(查不到数据) 比如 用户想要查询一个数据,发现redis内存数据库没有,也就是缓存没有命中,于是先持久层数据库查询,发现也没有,于是本次查询失败,当用户很多的时候,缓存都没有命中时(一般为秒杀活动),于是都会去请求持久层数据库,这就会导致 给持... ...查看全部
    0
    评论

    如何用 docker 打造前端开发环境 Docker

    Web开发马师傅 发表了文章 • 1227 次浏览 • 2021-12-13 18:26 • 来自相关话题

    用 docker 做开发环境的好处 保持本机清爽 做开发的都知道,电脑一买回来就要安装各种各样的环境,比如前端开发需要安装 node、yarn、git 等,为了使用某些工具或者包,可能还需要安装 python 或者 java 等(比如 jenkins 就依赖了... ...查看全部
    0
    评论

    Spring Boot + Redis 解决重复提交问题,还有谁不会?? Spring Boot Redis

    技术精选王二蛋和他的张大花 发表了文章 • 764 次浏览 • 2021-12-13 10:13 • 来自相关话题

    前言 在实际的开发项目中,一个对外暴露的接口往往会面临很多次请求,我们来解释一下幂等的概念:任意多次执行所产生的影响均与一次执行的影响相同。按照这个含义,最终的含义就是 对数据库的影响只能是一次性的,不能重复处理。如何保证其幂等性,通常有以下手段: 1、数据库... ...查看全部
    0
    评论

    技术总结 | 前端萌新现在上车Docker,还来得及么? 前端面试 Docker

    Web开发马师傅 发表了文章 • 1480 次浏览 • 2021-10-14 22:48 • 来自相关话题

    序言 作为一名爱学习的前端攻城狮,在当下疯狂内卷的大环境🐱, 不卷一卷Docker是不是有点说不过去,再加上现在我司前端部署项目大部分都是Docker,所以现在赶紧上车, 跟着Up主来look look,欢迎有big old指正 Q:你能说一下你怎么看待Do... ...查看全部
    1
    回复

    关于SQL Server2008安装出现问题希望大家能够帮助解决 谢谢 SQL Server

    技术讨论区fat1 回复了问题 • 2 人关注 • 5381 次浏览 • 2015-08-07 14:06 • 来自相关话题

    0
    评论

    redis replication问题一解 Redis

    技术讨论区admin 发表了文章 • 5651 次浏览 • 2015-07-27 15:20 • 来自相关话题

    公司有个redis比较大,同时又是跨IDC同步,但是最近发现一旦连接断了之后,好久都不能完全同步。 查看了一下log。[12826] 01 Apr 16:54:37.675 # I/O error trying to sync with MASTER: co... ...查看全部
    0
    评论

    Docker五大优势:持续集成、版本控制、可移植性、隔离性和安全性 Docker

    技术讨论区oscar1212 发表了文章 • 5315 次浏览 • 2015-06-23 16:26 • 来自相关话题

    对于Docker,应该不需要进行详细的介绍了。它是最火热的开源项目之一,通过在容器中增加一个抽象层(a layer of abstraction),就可以将应用程序部署到容器中。在看似稳定而成熟的场景下,使用Docker的好处越来越多。在这篇文章中,我不谈论D... ...查看全部
    0
    评论

    闲谈集群管理模式 Docker

    技术讨论区oscar1212 发表了文章 • 3798 次浏览 • 2015-06-23 15:49 • 来自相关话题

    Docker很火很红,简直到了没有道理的地步了。Docker为什么这么红?因为它是一种可以用来掀桌子的技术。在部署自动化这条产业上的工人和机床制造商们,看家护院的 cmdb,分布式脚本执行等所谓核心技术即便不会变成明日黄花,也会沦为二流技术。仅仅把 Docke... ...查看全部
    0
    评论

    回顾:电商抢滩618,Docker帮大忙!7个你不可错过的Docker分享! Docker

    技术讨论区邂逅潇湘 发表了文章 • 5143 次浏览 • 2015-06-19 11:40 • 来自相关话题

    618电商大战由来已久,巨大的数据和流量对于各电商平台来说,无疑是一项巨大挑战。如何在挑战中保证服务器的流畅和稳定,是这场大战胜负的关键性因素。Docker的出现正好能缓解这些因素,下边就盘点下几位全国顶级专家的Docker演讲,帮助你更全面系统的了解和学习D... ...查看全部
    0
    评论

    传微软要收购Docker了,真的假的? Docker

    技术讨论区oscar 发表了文章 • 3632 次浏览 • 2015-06-18 16:15 • 来自相关话题

    传微软要收购Docker!以目前Docker的市值来看,微软收购Docker绝对是绰绰有余。但微软收购Docker之后的意义是什么了?对于Docker而言又意味着什么了? 如果微软能成功收购Docker对于微软的Azure服务来说会是一个很好的举措,可以同时提... ...查看全部
    0
    评论

    基于Mesos和Docker的分布式计算平台 Docker

    技术讨论区oscar 发表了文章 • 6295 次浏览 • 2015-06-17 15:20 • 来自相关话题

    Docker及其相关技术的出现和发展,给大规模集群管理带来了新的想象空间。如何将二者进行有效地结合?本文将介绍数人科技基于Mesos和Docker的分布式计算平台的实践。 针对“互联网+”时代的业务增长、变化速度及大规模计算的需求,廉价的、高可扩展的分布式x... ...查看全部
    0
    回复

    SM Meetup第二讲:互联网+时代下的数据处理技巧 meetup 环信技术支持 高并发 Redis MySQL MongoDB Docker

    回复

    开发者活动Jeanc 发起了问题 • 2 人关注 • 7992 次浏览 • 2015-05-29 15:47 • 来自相关话题

    9
    回复

    SM Meetup--第二讲:互联网+时代下的数据处理技巧 MySQL Docker MongoDB meetup 互联网+

    开发者活动h建非凡 回复了问题 • 7 人关注 • 7271 次浏览 • 2015-05-19 20:07 • 来自相关话题

    0
    回复

    【文档】redis从入门到精通(含视频) Redis

    回复

    插件/文档antinomia 发起了问题 • 0 人关注 • 9210 次浏览 • 2015-03-20 13:43 • 来自相关话题

    1
    回复

    使用Docker部署Python应用的一些最佳实践 Docker Python

    回复

    Pythonkaifu 回复了问题 • 0 人关注 • 7577 次浏览 • 2015-02-21 14:27 • 来自相关话题