互联网共167篇 第12页
互联网(Internet)是一个由全球计算机网络互联而成的庞大系统,基于‌TCP/IP协议‌实现数据交换,提供万维网(WWW)、电子邮件等服务。

Hadoop MapReduce简介

Hadoop MapReduce简介-华尔子博-奥夏网
本节首先简单介绍大数据批处理概念,然后介绍典型的批处理模式 MapReduce,最后对 Map 函数和 Reduce 函数进行描述。 批处理模式 批处理模式是一种最早进行大规模数据处理的模式。批处理主要操...
王麻子的头像-华尔子博-奥夏网王麻子2年前
0795

大数据处理技术有哪些?大数据处理系统核心技术

大数据技术的基本概念进行简单介绍,包括分布式计算、服务器集群和 Google 的 3 个大数据技术。 分布式计算 对于如何处理大数据,计算机科学界有两大方向。 第一个方向是集中式计算,就是通过不...
子博兄的头像-华尔子博-奥夏网5年前
01840

通过网络爬虫采集大数据的方法

通过网络爬虫采集大数据的方法-华尔子博-奥夏网
网络数据采集是指通过网络爬虫或网站公开 API 等方式从网站上获取数据信息。该方法可以将非结构化数据从网页中抽取出来,将其存储为统一的本地数据文件,并以结构化的方式存储。它支持图片、音...
子博网的头像-华尔子博-奥夏网子博网5年前
02160

大数据采集方法,大数据采集技术概述

大数据采集方法,大数据采集技术概述-华尔子博-奥夏网
大数据采集是指从传感器和智能设备、企业在线系统、企业离线系统、社交网络和互联网平台等获取数据的过程。 数据包括 RFID 数据、传感器数据、用户行为数据、社交网络交互数据及移动互联网数据...
南宫世家的头像-华尔子博-奥夏网南宫世家5年前
03330

大数据开发涉及到的关键技术及开发流程有哪些?

大数据开发涉及到的关键技术及开发流程有哪些?-华尔子博-奥夏网
大数据本身是一种现象而不是一种技术。大数据技术是一系列使用非传统的工具来对大量的结构化、半结构化和非结构化数据进行处理,从而获得分析和预测结果的数据处理技术。 大数据价值的完整体现...
子博兄的头像-华尔子博-奥夏网子博兄5年前
03250

Redis悲观锁、乐观锁和调用Lua脚本三种方式的优缺点

教程前面主要讨论了 Java 互联网的高并发应用,先谈及了一些常用的系统设计理念,用以搭建高可用的互联网应用系统,着重介绍了抢红包的高并发应用,还讨论了数据不一致的超发问题。 并且还论述...
子博网的头像-华尔子博-奥夏网子博网2年前
06912

高并发系统的分析和设计

高并发系统的分析和设计-华尔子博-奥夏网
任何系统都不是独立于业务进行开发的,真正的系统是为了实现业务而开发的,所以开发高并发网站抢购时,都应该先分析业务需求和实际的场景,在完善这些需求之后才能进入系统开发阶段。 没有对业...
子博网的头像-华尔子博-奥夏网子博网2年前
0678

互联网系统应用架构基础分析

互联网系统应用架构基础分析-华尔子博-奥夏网
在互联网系统中包含许多的工具,每个企业都有自己的架构,正如没有完美的程序一样,也不会有完美的架构。本节分析的架构严格来说并不严谨,但是却包含了互联网的思想,互联网架构如图 1 所示。 ...
天山雪莲的头像-华尔子博-奥夏网天山雪莲2年前
0837

Redis和数据库的结合使用示例及代码

Redis和数据库的结合使用示例及代码-华尔子博-奥夏网
使用 Redis 可以优化性能,但是存在 Redis 的数据和数据库同步的问题,这是我们需要关注的问题。假设两个业务逻辑都是在操作数据库的同一条记录,而 Redis 和数据库不一致,如图 1 的场景。 图 ...
天山雪莲的头像-华尔子博-奥夏网天山雪莲4年前
010313

Redis主从复制的配置方法和执行过程 Redis主从同步配置

Redis主从复制的配置方法和执行过程 Redis主从同步配置-华尔子博-奥夏网
尽管 Redis 的性能很好,但是有时候依旧满足不了应用的需要,比如过多的用户进入主页,导致 Redis 被频繁访问,此时就存在大量的读操作。 对于一些热门网站的某个时刻(比如促销商品的时候)每...
子博兄的头像-华尔子博-奥夏网子博兄4年前
015115