书城首页 › 当代 › 工业 › 大数据采集技术
当代·工业

大数据采集技术

正版保障多仓发货48小时内发货2-3天送达可开发票
¥40.91 定价 ¥49.80 8.2折 立省 ¥8.89
仅剩 4 件 全新
商品参数
书名
大数据采集技术
作者
王俊杰,陈果,林琳 主编
出版社
中国铁道出版社有限公司
出版时间
2026-09-01
ISBN
9787113336363
货号
1204662050
品相
全新
分类
当代·工业
购物车(0)
商品参数
书名
大数据采集技术
作者
王俊杰,陈果,林琳 主编
出版社
中国铁道出版社有限公司
出版时间
2026-09-01
ISBN
9787113336363
货号
1204662050
品相
全新
分类
当代·工业
作者简介▼

王俊杰,四川城市职业学院大数据技术专业负责人,高级工程师,天津大学硕士学历,曾就职于一汽大众和三六零数字安全科技集团有限公司,主要做大数据开发工作。获得实用新型专利1项,发明专利1项,软件著作权2个。

陈果,四川城市职业学院信息技术学院副院长,副教授。有实用新型专利12项,发明专利6项,软件著作权7个,发表sci论文1篇,核心2篇,普刊12篇。

林琳,教授,四川城市职业学院教师发展中心主任、信息技术学院副院长。一级注册消防工程师,中国电子学会专家库专家、四川省职业指导专家、川渝人才库专家。四川省德技双馨之星,四川省高校优秀共产党员,成都市优秀青年教师、技术能手。带领团队获得全国教师教学能力大赛二等奖,5次获得四川省教师教学能力大赛一等奖,主持建设国家级、省级在线精品课程和课程思政示范课程5门,主持省部级等课题14项,主编国、省级规划教材等17部,发表SCI、中文核心等论文26篇,取得发明专利7项,其他专利22项;指导学生获得国、省级竞赛奖项40余项;担任世界全国职业院校技能竞赛国赛裁判7次。

目录▼

项目一大数据采集技术基础

任务大数据采集基础认知与环境搭建

子任务1基于VMware的Ubuntu操作系统安装与初始化配置

子任务2JDK与Hadoop基础环境安装配置

项目二离线数据采集

任务一DataX离线数据采集

子任务1全量同步MySQL订单表到MySQL

子任务2全量同步MySQL订单表到HDFS

任务二DataX离线数据采集进阶

子任务1DataX数据过滤实战(筛选特定条件订单)

子任务2DataX增量同步实战(基于时间戳)

子任务3DataX增量同步实战(基于主键自增)

项目三Flume实时数据采集

任务一Flume基础配置与单源数据采集

子任务1本地日志到Kafka的实时采集

子任务2Flume自定义拦截器实战

任务二Flume多源整合与Agent串联采集

子任务1多Source本地整合采集

子任务2Agent串联跨服务器采集

项目四SeaTunnel实时数据采集

任务一SeaTunnel实时采集入门

子任务1实时同步用户点击流数据到Doris

子任务2实时数据转换与过滤

任务二SeaTunnel实时采集进阶

……

文摘▼

本书为“十五五”高等职业教育计算机类专业系列教材之一,紧扣国家数据战略与智能时代发展大势,聚焦大数据采集这一数据要素价值化的“第一公里”关键环节,以“数据为基、AI为翼、岗位导向、理实一体”为核心理念,遵循“基础认知→环境搭建→工具实操→进阶应用→智能升级”的技术成长逻辑,将大数据采集全流程技术与AI赋能理念深度融合。

本书共设计六个项目:大数据采集技术基础、离线数据采集、Flume实时数据采集、SeaTunnel实时数据采集、AI爬虫采集、扣子智能体数据采集,涵盖数据要素、大数据采集全流程、离线与实时采集架构、Hadoop、DataX、Flume、SeaTunnel、AI爬虫、智能体采集等核心知识点,融入数据安全法治意识、精益求精的工匠精神与服务数字强国的使命担当,紧密贴合各行业真实应用场景。

本书适合作为高等职业院校大数据技术、软件技术、人工智能技术应用等专业的教材,也可作为数据工程师、数据分析师、人工智能训练师、运维开发人员的实操手册与培训参考用书。

¥40.91
🛒购物车