发简信
IP属地：上海
本文从概念和理论上进行整理学习 数据中台是什么 主流概念上讲 数据中台是指通过数据技术，对海量数据进行采集、计算、存储、加工，同时统一标准和口径。数据中台把数据统一之后，会形...
Mybatis批量插入时会遇到丢失Decimal小数位的问题，在一个插入批次中，Decimal字段的精度是由第一条插入数据的精度决定的，如果后面的数据精度大于第一条的精度，就...
一行拆多行结合使用了lateral view和explode。多行拼一行结合使用了concat_ws与collect_set，某些hive版本支持group_concat可以...
算法的时间复杂度和空间复杂度 一、算法效率的度量方法 1.事后统计方法 这种方法主要是通过设计好的测试程序和数据，利用计算机计时器对不同算法编制的程序的运行时间进行比较，从而...
什么是DynamoDB Amazon DynamoDB 是一种完全托管的 NoSQL 数据库服务，提供快速而可预测的性能，能够实现无缝扩展。DynamoDB 可以从表中自动删...
hive性能优化 一、Map阶段的优化： （控制hive任务中的map数，确定合适的map数，以及每个map处理合适的数据量）。 map个数影响因子： input目录中文件总...
一、总述 1.1 对大数据的理解 大、快、多样性只是表象，大数据的真正价值在于生命性和生态性。阿里巴巴称之为“活数据”。活数据是全本记录、实时驱动决策和迭代，其价值是随着使用...
