🏠 首页 › 📖 技术阅读

📖 技术阅读

工程师原创文章 · 技术经验分享 · 项目案例解析

📊 共 19889 篇文章 ✍️ 原创分享 📚 持续更新

利用Kafka和Cassandra构建实时异常检测实验

导言异常检测是一种跨行业的方法，用于发现事件流中的异常事件 - 它适用于物联网传感器，财务欺诈检测，安全性，威胁检测，数字广告欺诈以及许多其他应用程序。此类系统检查流数据以检查异常或不规则，并在检测时发送警报以处理这些异常并确定它们是否确实代表安全威胁或其他问题。检测系统通过将事件与历史模式进行比较来查找流数据中的异常，识别先前分类的异常和与预期显着不同的新...
📅 2023-10-07 阅读全文 →

Kafka原理和实践--云平台技术栈13

导读：之前发布了云平台技术栈(ps:点击可查看)，本文主要说一下其中的Kafka！作者：阿龙cnblogs.com/along21/p/10278100.htm1、认识 Kafka1.1 Kafka 简介Kafka 是一个分布式流媒体平台kafka 官网：http://kafka.apache.org/（1）流媒体平台有三个关键功能：&n...
📅 2023-10-07 阅读全文 →

一线大厂的分布式唯一ID生成方案是什么样的？

作者：老顾聊技术toutiao.com/i6682672464708764174一、前言分布式系统中我们会对一些数据量大的业务进行分拆，如：用户表，订单表。因为数据量巨大一张表无法承接，就会对其进行分库分表。但一旦涉及到分库分表，就会引申出分布式系统中唯一主键ID的生成问题，永不迁移数据和避免热点的文章中要求需要唯一ID的特性：整个系统ID唯一ID是数字类型...
📅 2023-10-07 阅读全文 →

如何设计一款电商产品？

作者：大大大表哥，来自：人人都是产品经理全文共 4968 字，阅读需要 10 分钟—— BEGIN ——本人非常喜欢电商行业，渴望在电商领域有大的发展，虽然说电商产品经理所处的位置比起其他领域的产品经理会稍显尴尬，当然那都是后话了，现在步入正题。首先，电商？相信大家都有在电商平台上购物的经验——我们通过电商的网站或者App直接进行下单购买后在家等着收快递，就...
📅 2023-10-07 阅读全文 →

Flink在美团的实践与应用--大数据技术栈15

回顾：大数据平台技术栈 (ps:可点击查看)，今天就来说说其中的Flink！来自：云栖社区本文整理自在北京举行的Flink Meetup，分享嘉宾刘迪珊（2015年加入美团数据平台。致力于打造高效、易用的实时计算平台，探索不同场景下实时应用的企业级解决方案及统⼀化服务）。美团实时计算平台现状和背景实时平台架构上图呈现的是当前美团实时计算平台的简要架...
📅 2023-10-07 阅读全文 →

网恋背后的骗局：那些被宰杀掉的猪！必看！

作者：凌云，来自：我会永远在你身后前言：几乎没让大家帮我转发东西，但这次如果觉得写的还行，真心希望你们能够发到朋友圈，让更多的人看到。2019年6月15号，一次无意间的扫描，我入侵了一台来自东南亚地区的电脑，随后查找了该电脑所有文件。在电脑的C盘中发现了一个让我心惊胆战的文件夹——杀猪盘详细话术。从对方电脑拷贝来的文件不知道是巧合还是其他原因，在随后的一个月...
📅 2023-10-07 阅读全文 →

医疗数据自动化

导言大数据是指难以被传统数据管理系统有效且经济地存储、管理、处理的复杂数据集。大数据一般以PB为单位计量，并包含结构化、半结构化、无结构化的数据，大数据给数据的采集、运输、加密、存储、分析和可视化带来了严峻的挑战。与传统数据相比，大数据包含5个V特性：Volume（数据规模巨大）、Variety（数据类型繁多）、Velocity（数据产生的数据非常快）、Ve...
📅 2023-10-07 阅读全文 →

外企员工吐槽华为前员工带坏风气，加班已经深入骨髓

不同性质的企业，职场文化有所差异。如果要论国内企业与外资企业最大的差别，很多人脑海中第一回想的便是加班二字。在外资企业，加班是效率低下的表现，而在国内大部分企业，加班却是奋斗的表现。无独有偶，一名微软的员工在论坛上发出了牢骚，称部门新来了一个华为的前员工，每天都在加班，每天干到晚上十点才回家，就连周末也都在加班，也许997已经深入华为员工的骨髓？其还进一步补...
📅 2023-10-07 阅读全文 →

图解负载均衡 LVS、Nginx及HAProxy--云平台技术栈14

导读：之前发布了云平台技术栈(ps:点击可查看)，本文主要说一下其中的负载均衡！作者：张松然sohu.com/a/233936157_262549当前大多数的互联网系统都使用了服务器集群技术，集群是将相同服务部署在多台服务器上构成一个集群整体对外提供服务，这些集群可以是 Web 应用服务器集群，也可以是数据库服务器集群，还可以是分布式缓存服务器集群等等。在实...
📅 2023-10-07 阅读全文 →

图解TensorFlow--大数据平台技术栈16

回顾：大数据平台技术栈 (ps:可点击查看)，今天就来说说其中的TensorFlow！来源：知乎，作者：何之源在学习TensorFlow的过程中，有很多小伙伴反映读取数据这一块很难理解。确实这一块官方的教程比较简略，网上也找不到什么合适的学习材料。今天这篇文章就以图片的形式，用最简单的语言，为大家详细解释一下TensorFlow的数据读取机制，文章...
📅 2023-10-07 阅读全文 →

MySQL 导致 CPU 消耗过大，如何优化

作者：jiaxinhttp://www.cnblogs.com/YangJiaXin谁在消耗cpu?用户+系统+IO等待+软硬中断+空闲祸首是谁？用户用户空间CPU消耗，各种逻辑运算正在进行大量tps函数/排序/类型转化/逻辑IO访问…IO等待等待IO请求的完成此时CPU实际上空闲如vmstat中的wa 很高。但IO等待增加，wa也不一定会上升（请求I/O后...
📅 2023-10-07 阅读全文 →

做了这么多年的研发，其实你一点也不懂购物车的设计思路！

作者：我真是青柠https://www.jianshu.com/p/b029c71ebd80本姑娘小产品一枚，突发奇想，想在网上分享下这几年电商工作的一些所得所想，让我们先从购物车开始吧：购物车一、购物车的由来以淘宝为例，淘宝在06年年底之前是没有购物车的，而且亚马逊、当当一开始就是有购物车的，因为它们的模式不同，一开始网上商城的模式更多的是模仿线下商城的购...
📅 2023-10-07 阅读全文 →

我暗访了一家PUA培训机构，他们教我怎么骗女孩，还教我下迷药！男生勿点，女生必看！

作者：小凌云，来自：我会永远在你身后大家好，我是凌云。上个星期人民日报的一篇文章把快要从大众视野里淡忘出去的PUA群体再次拉回高潮，我和大家一样，起初对于这种骗术是嗤之以鼻的，后来当我深入暗访一家PUA的培训机构，发现事情远远不是我们想象的那样简单——当融入社会心理学等专业知识的PUA可不是几句情话就能代替的。本来我想在这篇文章骂人的，倒不如深入跟大家拆分这...
📅 2023-10-07 阅读全文 →

京东某员工离职，领导威胁其告知下家，做同样方向会追究责任！

在行业里，有一种协议叫做竞业协议 此协议是针对离职员工的，比如你在A企业做了某方向的岗位，离职时签署了竞业协议，如果再去B企业做同样方向的岗位，就会被追究相应的法律赔偿责任。当然这里有两个前提，一是A企业把B企业纳入了竞业协议名单中，二是A企业在该员工离职后的对应时间内（协议约定期限），每月按时支付对应敬业协议补偿。如果不满足这两点，竞业协议也是无效的。也正...
📅 2023-10-07 阅读全文 →

Redis详解和实战--云平台技术栈16

导读：之前发布了云平台技术栈(ps:点击可查看)，本文主要说一下其中的Redis！http://wdxtub.com/2016/07/05/redis-guide/Redis 是 C 实现的基于内存并可持久的键值对数据库，在分布式服务中常常被用作缓存。除此之外还可以利用其特点做许多有趣的应用，所以我们不仅需要会用，更需要理解其工作机制。Redis 的具体介绍...
📅 2023-10-07 阅读全文 →

62岁程序员的骚操作：埋个代码炸弹赚修理费，事发被判十年监禁

来自：网络一位西门子公司的合同工十年前在给西门子写的电子表格中植入了逻辑炸弹，它会在特定日期之后导致电子表格崩溃，于是西门子就必须再次雇佣该名合同工进行修复，每次都需要重新支付修复费用，持续时间近 3 年。最近他被抓包了，面临最高十年监禁和 25 万美元（约合人民币 172 万）的指控。1、大龄程序员的“生财之道”现年 62 岁的大卫·廷利 (David T...
📅 2023-10-07 阅读全文 →

图解YARN--大数据平台技术栈17

回顾：大数据平台技术栈 (ps:可点击查看)，今天就来说说其中的YARN！为什么会产生YRAN？这个与MapReduce1.x的架构有关，正是因为MapReduce1.x存在许多的问题，才会产生 YARN。MapReduce1.x的架构如下：MapReduce1.x的架构Hadoop1.x时，MapReduce的架构仍然是主从架构。一个JobTra...
📅 2023-10-07 阅读全文 →

数据分析原理

导言数据分析是一个巨大的项目，有时过于抽象，依赖于经验。本文是作者对学习和实践数据科学的分析的总结。我希望提供一般的数据分析思路，并在分析的每个步骤中介绍相关的分析算法及其应用场景。对于算法，仅使用浅层。本文面向不熟悉数据分析或不知道如何开始使用大量数据的读者。同时，由于作者的经验和知识，本文介绍的分析思路也存在一定的局限性。希望读者能够在分析中做出合理的参...
📅 2023-10-07 阅读全文 →

关于中台，你可能不知道的那些事

导读：之前整理了一篇《全面解读数据中台，让企业实现数字化转型》，阐述了什么是数据中台、建立的原因和原则。今天让我们全面解读中台，包括企业为什么要平台化，目前中台都有哪些形式，实施中台系统的优势、面临的问题以及建议都有哪些？ 中台这个概念早期是由美军的作战体系演化而来的，技术上所说的“中台”主要是指学习这种高效、灵活和强大的指挥作战体系。电商经过十几...
📅 2023-10-07 阅读全文 →

马云第一次创业翻译社，差点倒闭，兼卖鲜花和礼物维持终翻身

马云毕业于英语专业，因此毕业后在学校当了英语老师。当然，马云不是一个安于现状的人，会有自己的想法并付诸实施，凭借着自己的英语水平，其在早期曾经举办过英语补习班，英语学习角等等来拓展自身的实力与影响。但这依旧满足不了马云的“野心”。于是乎在1994年初，马云开始了人生的第一次创业，做英语翻译社。对于这家翻译社，马云给予了厚望，取名海博翻译社，海博是英语希望的音...
📅 2023-10-07 阅读全文 →

基于RESTful API 怎么设计用户权限控制？

作者：JC_Huanghttp://www.jianshu.com/p/db65cf48c111  1   前言有人说，每个人都是平等的；也有人说，人生来就是不平等的；在人类社会中，并没有绝对的公平，一件事，并不是所有人都能去做；一样物，并不是所有人都能够拥有。每个人都有自己的角色，每种角色都有对某种资源的一定权利，或许是拥有，或许只能是...
📅 2023-10-07 阅读全文 →

秒懂QPS、TPS、PV、UV、GMV、IP、RPS！

QPS、TPS、PV、UV、GMV、IP、RPS等各种名词，外行看起来很牛X，实际上每个程序员都是必懂知识点。下面我来一一解释一下。QPSQueries Per Second，每秒查询数。每秒能够响应的查询次数。QPS是对一个特定的查询服务器在规定时间内所处理流量多少的衡量标准，在因特网上，作为域名系统服务器的机器的性能经常用每秒查询率来衡量。每秒的响应请求...
📅 2023-10-07 阅读全文 →

记一次内存溢出的分析经历

作者：Jantihttps://www.cnblogs.com/superfj/p/8474288.html说在前面的话朋友，你经历过部署好的服务突然内存溢出吗？你经历过没有看过Java虚拟机，来解决内存溢出的痛苦吗？你经历过一个BUG，百思不得其解，头发一根一根脱落的烦恼吗？我知道，你有过！但是我还是要来说说我的故事..................&n...
📅 2023-10-07 阅读全文 →

K8S 从懵圈到熟练--大数据平台技术栈18

回顾：大数据平台技术栈 (ps:可点击查看)，今天就来说说其中的K8S！来自：阿里技术公众号阿里妹导读：排查完全陌生的问题、不熟悉的系统组件，对许多工程师来说是无与伦比的工作乐趣，当然也是一大挑战。今天，阿里巴巴售后技术专家声东跟大家分享一例 Kubernetes 集群上的问题。这个问题影响范围较广，或许某天你也会遇到。更重要的是，作者在问题排查过...
📅 2023-10-07 阅读全文 →

当你 ping 的时候，你知道背后发生了什么吗？

阅读本文大概需要 4.5 分钟。来源：木木匠 my.oschina.net/luozhou/blog/299213701 概览对于 ping命令，想必只要是程序员都知道吧？当我们检查网络情况的时候，最先使用的命令肯定是 ping命令吧？一般我们用 ping查看网络情况，主要是检查两个指标：第一个是看看是不是超时第二个看...
📅 2023-10-07 阅读全文 →

Spring Cloud剖析--云平台技术栈17

导读：之前发布了云平台技术栈(ps:点击可查看)，本文主要说一下其中的Spring cloud！Spring Cloud 是一个基于 Spring Boot 实现的微服务框架，它包含了实现微服务架构所需的各种组件。注：Spring Boot 简单理解就是简化 Spring 项目的搭建、配置、组合的框架。因为与构建微服务本身没有直接关系，所以本文不对 Spri...
📅 2023-10-07 阅读全文 →

图解ZooKeeper！小学生也能看懂！

一、什么是ZooKeeper从上面我们也可以发现，好像哪都有ZooKeeper的身影，那什么是ZooKeeper呢？我们先去官网看看介绍：官网对ZooKeeper的介绍官网还有另一段话：ZooKeeper: A Distributed Coordination Service for Distrib...
📅 2023-10-07 阅读全文 →

愤怒！GitHub开始限制“受美国制裁”国家账号！

程序员也有国界了，而且是被逼的！最近GitHub开始按照国籍对账号进行限制，理由是这些国家违反了美国的贸易控制法律。被限制的账号所有人的国籍包括俄罗斯、伊朗、叙利亚、古巴等“受美国制裁”国家。被禁的伊朗开发者愤而发帖控诉，GitHub是以为我在造原子弹吗？本周，居住在克里米亚的21岁俄罗斯公民Anatoliy Kashkin，由于美国的贸易管制，“限制”了他...
📅 2023-10-07 阅读全文 →

如何在一家内容公司，从零搭建起一支技术团队

导读：这三年来，我就做了一个产品，那就是得到 App。也搭建起了一支有战斗力的产品技术团队，到今天为止，这个团队一共有 187 人。2019 年 5 月 26 日，是得到 App 的三周年生日。我做了一个 18 分钟的分享，题目就叫做《如何在一家内容公司，从零搭建起一支技术团队》。在这里，把分享实录发给大家。哪怕只有1位朋友觉得有点儿用，就心满意足了。友情提...
📅 2023-10-07 阅读全文 →

暴风前员工替冯鑫惋惜，是公司的老白兔员工害了他

眼看他起高楼，眼看他楼塌了，这句话用来形容暴风冯鑫再恰当不过。曾经市值高达400亿，如今缩水不足20亿，这其中到底发生了什么？有暴风前员工在职场社区揭露了鲜为人知的一幕。该员工直言是公司的老白兔害了冯鑫：曾经400亿元的市值到现在不到20亿元的市值，真的好惨，冯鑫本人还算是比较随意的那种，没什么领导的架子，挺亲民，但也是因为太过亲民，导致整个公司都很松散，没...
📅 2023-10-07 阅读全文 →