#数据工程#

爱可可-爱生活　139天前　北京

【Koheesio数据管道框架：构建高效数据管道的Python框架，促进模块化和协作，能够使用简单、可重用的组件创建复杂的数据管道】'Nike-Inc/koheesio - Python framework for building efficient data pipelines' GitHub: github.com/Nike-Inc/koheesio #数据工程# #PySpark# #模块化# #协作#

爱可可-爱生活　126天前　北京

【BigFunctions：增强BigQuery功能的开源框架，提供100+可直接调用或重新部署的BigQuery函数，支持构建公司治理目录】 'BigFunctions - Supercharge BigQuery with BigFunctions' GitHub: github.com/unytics/bigfunctions #BigQuery# #数据工程# #数据可视化# #数据仓库# #数据分析#

51CTO技术栈　839天前　北京

【T·Talk】直播预告：7月7日 周四20:00 随着大规模数据分析与开发地实施，如何高效完成数据开发；有效维护大量ETL；实现快速交付变更成为了企业及大数据从业者需要重点关注的问题。 本次T·Talk直播邀请到Thoughtworks首席咨询师廖光明 ，从多个实际项目经验来谈论数据技术与数据工程。扫图中 ...全文

爱可可-爱生活　307天前　北京

【(部分)免费书稿《数据工程设计模式》】 - 该书采用增量式写作方式，作者会持续添加新内容并根据反馈进行修改。 - 作者受启发于数据领域中经常出现的“趋同进化”现象，旨在深入剖析数据工程中的设计模式。 - 书中包含数据工程的历史、概念解析、类别讨论以及设计模式指导等内容。 - 目标读 ...全文

玄姐谈AGI　134天前　秦皇岛

数据工程中为什么需要区分非结构化？ #大模型# #非结构化数据# #数据工程# #Embedding# #向量化# #AI\ 你将学到： 1、向量无法提供精准查询如何解决？ 2、向量无法解决多样化需求如何解决？ 3、Garbage in，Garbage Out 如何解决？ 玄姐谈AGI的🎞︎微博视频

薛薇老师数据分析资料　216天前　北京

【#数据工程# 】数据工程综合指南。🔗

中国联通　38天前　北京

【#2024全球工业互联网大会# ：中国联通荣获“中国工业数据治理‘领跑者’企业”】2024全球工业互联网大会于9月11日至14日在沈阳举办，在9月11日下午举办的第二届中国工业高质量发展论坛上，中国联通荣获“中国工业数据治理‘领跑者’企业”。中国联通贯彻落实国家战略，强网络之基、固服务之本，通过顶 ...全文

Thoughtworks　573天前　北京

#TW洞见# #技术雷达# #数据工程# ELT非常适合为数据湖仓或数据集市提供数据管道，并且可以用更低的成本，根据需求，随时对大量数据进行分析。本文主要介绍如何使用Airflow和dbt实现ELT流程，并与snowflake集成的方法。👉🔗

互联网搬砖小能手777　914天前　

有一个很烂的数仓团队意味着什么 意味着你自己也得变成半个DE 互联网技术#大数据# #数据科学家# #大数据分析# #数据工程#

WendyFu_seeunexttime　972天前　

咱们就是说自己建数仓，咱们就是从申请数据源到申请服务器自己来，测试调通自己干，咱们就是…DE DS都是我一个人 各位老板，以后任何大数据需要都可承包给我，谢谢🙏 #求职# #数据工程# #数据分析#

爱可可-爱生活　1015天前　

'data-services - a curated list of docker-compose files prepared for testing data engineering tools, databases and open source libraries.' by irbigdata GitHub: github.com/irbigdata/data-dockerfiles #开源# #数据工程# #Docker#

爱可可-爱生活　1508天前　

【2020数据工程师成长路线图】’data-engineer-roadmap - Roadmap to becoming a data engineer in 2020' by datastack.tv GitHub: 🔗 #开源# #数据工程#