a9OQ_DBDevs的个人主页_电子工程师 - 电子技术论坛

a9OQ_DBDevs

经验：积分：2

查看完整档案 >>

+关注发私信

他的动态

发布了文章 2021-10-15 09:50

MySQL缓冲区设计介绍

1. Buffer 与 cache 的区别？ Bbuffer 与 Cache 非常类似，因为它们都用于存储数据数据，被应用层读取字节数据。在很多场合它们有着相同的概念，但是特定场合也有一定的区别［1］。 Buffer 与 Cache 的用途...

0

1638次阅读

0条评论
发布了文章 2021-10-15 09:46

pandasgui安装与简单使用

pandasgui安装与简单使用根据作者的介绍，pandasgui是用于分析 Pandas DataFrames的GUI。这个属于第三方库，使用之前需要安装。 pip install -i https://pypi.tuna.tsingh...

0

3126次阅读

0条评论
发布了文章 2021-10-15 09:32

采集与分析用户行为数据的意义

本文属于用户行为数据领域入门级别文章，适合对用户行为数据略知一二但是对这个主题非常感兴趣的同学。 1 什么是用户行为数据？ “用户行为数据”，顾名思义就是用户在 APP、小程序、WEB 端等平台所做的行为（浏览、点击、滑动、长按等），通过数...

0

5237次阅读

0条评论
发布了文章 2021-10-13 17:25

TableSQL API和Pyhton上相关的性能优化

一、简介 1.14 新版本原本规划有 35 个比较重要的新特性以及优化工作，目前已经有 26 个工作完成；5 个任务不确定是否能准时完成；另外 4 个特性由于时间或者本身设计上的原因，会放到后续版本完成。［1］ 1.14 相对于历届版本来说...

0

1663次阅读

0条评论
发布了文章 2021-10-13 17:12

10种减少数据库误操作的方法

无论是开发、测试，还是DBA，都难免会涉及到数据库的操作，比如：创建某张表，添加某个字段、添加数据、更新数据、删除数据、查询数据等等。正常情况下还好，但如果操作数据库时出现失误，比如：删除订单数据时where条件写错了，导致多删了很多用...

0

3107次阅读

0条评论
发布了文章 2021-10-12 14:32

全方位解析FlinkSQL的实现原理

主要内容本篇主要从FlinkSQL实现的内核与原理，工作流等的视角带大家构建一幅FlinkSQL全景图（以Blink为主介绍），探知背后支撑的“男人们”（组件）。建议收藏，仅此一份。主要内容： 1. Table API 与 SQL 2. ...

0

5856次阅读

0条评论
发布了文章 2021-10-12 09:41

如何把Python和Excel两大数据工具进行集成

这次我们会介绍如何使用xlwings将Python和Excel两大数据工具进行集成，更便捷地处理日常工作。说起Excel，那绝对是数据处理领域王者般的存在，尽管已经诞生三十多年了，现在全球仍有7.5亿忠实用户，而作为网红语言的Pyth...

0

2865次阅读

0条评论
发布了文章 2021-10-11 11:21

缺失值处理你确定你真的会了吗

缺失值处理是一个数据分析工作者永远避不开的话题，如何认识与理解缺失值，运用合适的方式处理缺失值，对模型的结果有很大的影响。本期Python数据分析实战学习中，我们将详细讨论数据缺失值分析与处理等相关的一系列问题。作为数据清洗的一个重要环...

0

5404次阅读

0条评论
发布了文章 2021-10-11 11:15

剖析Spark的两种核心Shuffle

在 MapReduce 框架中， Shuffle 阶段是连接 Map 与 Reduce 之间的桥梁， Map 阶段通过 Shuffle 过程将数据输出到 Reduce 阶段中。由于 Shuffle 涉及磁盘的读写和网络 I/O，因此 Shu...

0

2425次阅读

0条评论
发布了文章 2021-10-9 15:41

innodb究竟是如何存数据的

前言如果你使用过mysql数据库，对它的存储引擎：innodb，一定不会感到陌生。众所周知，在mysql5以前，默认的存储引擎是：myslam。但mysql5之后，默认的存储引擎已经变成了：innodb，它是我们建表的首选存储引擎。那么...

0

1690次阅读

0条评论
发布了文章 2021-10-8 16:21

数据分析中数据分析方法介绍

有小伙伴问：能不能系统介绍下数据分析方法。今天它来啦！数据分析常用的方法有九种，今天先介绍第一种，操作上最简单的：周期性分析法。它是新人们避免犯小白错误的最好方法。做数据的新人最容易犯啥错？当然是一张嘴就被大家笑话：连这个常识都没有！所...

0

1932次阅读

0条评论
发布了文章 2021-10-8 16:19

Linkis成为做数据平台的利器

微众银行开源项目Linkis正式通过Apache软件基金会（ASF）的投票表决，全票通过进入ASF孵化器！ Linkis简介 Linkis 在上层应用程序和底层引擎之间构建了一层计算中间件。通过使用Linkis 提供的REST/WebSoc...

0

2269次阅读

0条评论
发布了文章 2021-10-8 14:24

互联网常见数据分析的作用

我们上篇内容，梳理和分享一些数据分析领域的岗位详解，让大家清晰地了解一些“数据分析”岗位中偏业务和偏技术的职责的不同之处以及发展方向。（详情请看：数据分析是行业，还是技能？（上））在5G以及大数据的时代发展下，互联网将作为底层的基础建筑，各...

0

4231次阅读

0条评论
发布了文章 2021-10-8 14:23

数据规模下使用Spark时遇到的挑战

在 LinkedIn，我们非常依赖离线数据分析来进行数据驱动的决策。多年来，Apache Spark 已经成为 LinkedIn 的主要计算引擎，以满足这些数据需求。凭借其独特的功能，Spark 为 LinkedIn 的许多关键业务提供支持...

0

1627次阅读

0条评论
发布了文章 2021-10-8 09:10

简述Hive 数据倾斜问题定位排查及解决

多数介绍数据倾斜的文章都是以大篇幅的理论为主，并没有给出具体的数据倾斜案例。当工作中遇到了倾斜问题，这些理论很难直接应用，导致我们面对倾斜时还是不知所措。今天我们不扯大篇理论，直接以例子来实践，排查是否出现了数据倾斜，具体是哪段代码导致的...

0

2126次阅读

0条评论