
不太了解,对大数据方向挺感兴趣的,
求各位在大数据领域进行讨生活的各位大佬给解解惑
1 dif 2018 年 6 月 26 日 刷 v2ex,看知乎,出去吹牛皮。。 |
2 sunzhenyucn OP @dif lol,不会吧,这么闲的吗?? |
3 loryyang 2018 年 6 月 26 日 工程方向就是维护下一些框架,做些升级,然后偏业务的就是开发业务相关逻辑,出个报表,出个数据什么的 或者给机器学习跑点数据和特征 |
4 sunzhenyucn OP @loryyang 万分感谢 |
5 tingyunsay 2018 年 6 月 26 日 写他么的 hql(;Д`) |
6 mkstring 2018 年 6 月 26 日 写大量的 SQL,偶尔写 MR |
7 VoidChen 2018 年 6 月 26 日 我只说我做的。。。搞下集群,部署搭建和问题检查什么的,然后跟某重本合作拿来一些业务类型的算法去做实现,优化校准,还有就是偶尔遇到一些问题(内存不够或者计算不够快或者统计数量大),去看开源拆算法搞来用,杂七杂八的。其实跟写 java 差不多啦,可能是因为毕业半年多,学的用的还比较浅(不过用的全,常用的基本都用过了) |
8 wwek 2018 年 6 月 26 日 数据清洗 结构化 ETL 写 HQL |
9 sunzhenyucn OP |
10 liyer 2018 年 6 月 26 日 爬数据,入库,去噪,打标签,分析 |
11 deepreader 2018 年 6 月 26 日 数据清理,做 PPT。 |
12 wtf94666 2018 年 6 月 26 日 via Android 我是设计 我感觉我公司的工程师们都在刷蔚蓝航线 |
13 sudoz 2018 年 6 月 26 日 总而言之就是没什么意思 |
15 SuperMild 2018 年 6 月 26 日 据说就是洗数据……不管哪个领域,都是站在高位置的人才有差别,底下全是搬砖,体力活。 |
16 zynlp 2018 年 6 月 26 日 via iPhone 纳尼?只有我这么忙吗,只能蹲坑的时候刷下 v2 搞了一个礼拜的 cuda 了,整个人都粗大了 |
19 VoidChen 2018 年 6 月 26 日 回复的时候看了下,怎么好像基本都是数据清洗?我主要做的是 storm 流处理,基础的数据清洗就只是在源头那里架一个 bolt 过滤掉就好了(包括一些修正),怎么好像不太一样?朋友里面没有做大数据的,所以不是很清楚情况,借个楼问下。。。万一以后跳槽别人一问不知道就不好了 |
21 chi1st 2018 年 6 月 26 日 写后端。。。 |
22 lastpass 2018 年 6 月 26 日 via Android 清洗数据,造轮子。 |
23 ren2881971 2018 年 6 月 26 日 坐我旁边的就是搞数据的,各种 ETL 抽取、清洗 、转换 出报表。 自从有了他,报表错误的锅再也不是我背了。。。 |
24 jasonchen168 2018 年 6 月 26 日 怎么转的啊?必备基本技能是什么 |
25 applehater 2018 年 6 月 26 日 via iPhone 比一般业务少了“改”只有“增删查”。 |
26 zhusimaji 2018 年 6 月 26 日 sql 清洗数据---构造模型---spark 计算 |
27 lius931115 2018 年 6 月 26 日 写 spark SQL 和 spark Streaming 的多吗? 各位大佬们! |
28 hackpro 2018 年 6 月 26 日 60%以上的时间在 Data Cleaning 俗称 Data Augument |
29 bk201 2018 年 6 月 26 日 @applehater 你这理解有问题,和 CURD 无关,大多数都是统计计算,非要关联的话就是查 |
30 superbiger 2018 年 6 月 26 日 大量 sql,很多正则,说是计算全是过滤 |
31 arctanx 2018 年 6 月 26 日 爬虫->mongodb->elasticsearch->网站后端 ...我都不知道我算不算大数据码农 |
32 defunct9 2018 年 6 月 26 日 吃饭,睡觉,打豆豆 |
34 WinMain 2018 年 6 月 26 日 我们组那位大数据童鞋用 spark 等工具处理 kafka 等地方的数据,出报表,比如 app 相关的点击率,转化率,时常统计等,还有给推荐算法搜索算法童鞋做点数据前期处理的工作。 |
35 renzongxian 2018 年 6 月 26 日 via iPhone 用 HQL、MR 处理数据,ETL,找 bug,改 bug |
36 fuyufjh 2018 年 6 月 26 日 via Android 大部分是 ETL 工程师,少部分是写框架的 |
37 z3jjlzt 2018 年 6 月 27 日 sql curd 只有 r。 |