V2EX = way to explore
V2EX 是一个关于分享和探索的地方
Sign Up Now
For Existing Member  Sign In
V2EX  ›  SlipStupig  ›  全部回复第 12 页 / 共 90 页
回复总数  1793
1 ... 8  9  10  11  12  13  14  15  16  17 ... 90  
❮ ❯
首先你要问自己几个问题:

- 你是真的喜欢这行吗?还是是羡慕高工资,坐办公室?
- 你能坚持学习下去吗?

如果你能回答上以上两个问题,你就已经做出了选择
2019 年 12 月 30 日
回复了 puzzle9 创建的主题 › 互联网 › 我收到了一份来自无名黑客的邮件
@sx90 英语不好,看不懂,23333
2019 年 12 月 29 日
回复了 puzzle9 创建的主题 › 互联网 › 我收到了一份来自无名黑客的邮件
今年我司一个女同事,被这个邮件被诈骗了 5 千💰美金,像我这种小学毕业绝对不会被骗,被骗的都是高学历的白富美😄
2019 年 12 月 27 日
回复了 sazima 创建的主题 › 程序员 › 有无靠谱的开发团队 KPI 标准
这种团队 KPI 本身就不靠谱,团队 loader 应该像教练一样提高队员水平,激励和鼓舞士气,确立明确的目标。而不是想着去惩罚,你越惩罚越逆反,正确的方式应该对整个团队进行激励,比如每次按时完成一个大版本发布,给所有开发团队发一点小纪念品(比如:2.0 上线纪念章,这种需要花点小心思),这一切前提是团队靠谱,不靠谱的团队,用任何方式都无法进行推进!
2019 年 12 月 25 日
回复了 feifei003 创建的主题 › 随想 › 觉得人生没有意义怎么办
我曾经也想过这个问题,我们国家有 4 千年的文明而这四千年里面只有极少数被历史所铭记,大部分芸芸众生都埋在了历史的尘埃里,哪怕你是伟人也会死去,我陷入过一种深深的虚无,我会担心我家人会在一天会离开我,我担心我会一天睡着了醒不来,而这些问题是没有人能给答案的,这个是属于下一个时代来回答。
我后来读了一些哲学和政治类书籍,我理解到了,虽然我们只是历史的尘埃无足轻重,但是我们就是这个时代啊,如果 V 站能在百年后还能运营,我们想在所有的思考和问题都成为了时代的记忆,而社会可以认为是一个分布式生命体,而人是“社会”的基础细胞一个细胞除了问题,其它细胞也会出问题,整个体系就会触发免疫机制,这个就变成了社会性问题。所以个人对所处时代社会肯定是有意义的,只是影响力大小问题,所以才需要神秘主义这种“精神鸦片”来满足个人内心的空虚,所以我的结论就是自己需要审视自己,找到自己的成就感和所珍视事物并在短短的一生去奋斗和守护
2019 年 12 月 21 日
回复了 la2la 创建的主题 › 程序员 › 如果你来设计 12306,怎么杜绝或者抑制黄牛?
@kaedea 贩毒依然有人干啊。。我觉得倒卖火车票的风险和利润比,比贩毒不会差。
2019 年 12 月 17 日
回复了 SlipStupig 创建的主题 › 奇思妙想 › 国内似乎尅有旧物交换网站?开发一个有前途吗?
@timedivision 这个不是问题,明确定义换什么就行

@Unclev21x 这个说到点上上了
2019 年 12 月 16 日
回复了 SlipStupig 创建的主题 › 奇思妙想 › 国内似乎尅有旧物交换网站?开发一个有前途吗?
@designer 以物换物啊
@imn1 并没有
2019 年 12 月 16 日
回复了 SlipStupig 创建的主题 › 奇思妙想 › 国内似乎尅有旧物交换网站?开发一个有前途吗?
@gebishushu 租赁有风险,如果被恶意掉包或者被弄坏,会搞得平台里里外外不是人
@watzds 你管她是做啥的,没事多围着妹子去打转去,连跟人处对象的勇气都没有,怎么证明你真的喜欢人家啊。你说工作上没有交集这个,完全是给自己找借口(不是“我”不行,是人家跟“我”没交集),谈恋爱这种事,有机会就上,没机会也要床罩机会上,你要这么怂就别谈了,有真心浪费,别耽误人家姑娘了好不
这个根本不是问题,你就跟她说想学一些前端的问题,要不周末出来一起见一下,同意就有戏
一尘科技,取自 "众里嫣然通一顾,人间颜色如尘土。 ——王国维 《人间词》"
2019 年 12 月 8 日
回复了 ManjusakaL 创建的主题 › 程序员 › Jetbrains 2019.3 全家桶真的是奇坑啊
调整一下 JVM 配置,给更多的内存,我 MBP 给了 4G 内存,稳定的很
@yellowmarlboro

公司项目千万别给自己团队增加学习,稳定快速构建压倒一切。架构可以迭代的,这个不是问题。

ETL 部分是最复杂的,也是最繁琐的,由于我不知道你这边实际情况怎么样,所以我只能从最坏的场景假设,我推荐使用两段式 ETL,具体做法如下:
第一阶段:日志收集和清洗,将日志一些无效、异常和缺失的数据要么过滤,要么基于算法补全。这个可以用 filebeat+ELK 架构( ES 可以设置 TTL,TTL 值可以设置一周),这个数据丢失其实并不影响,大不了重跑(这里有个风险点,有数据泄露风险,所以传输过程一定要强加密,这个一定要重视,数据安全无小事)

第二阶段阶段,可以基于定时任务每天定时处理前一天任务,这个时候业务会特别复杂,所以可以使用 celery 或者 airflow 进行定制化开发 pipelines,主要工作有:数据富化、字段对齐、字段标准化、字段含义统一(sip 和 source_ip 可能是同一个意思,这个时候需要用 tdidf 等相似度算法来计算字段,还有一些“无头数据”,通过正文内容预测字段含义)、数据格式统一(例如:日期到底是时间戳还是 UTC 时间),数据格式输出格式标准化(是用 JSON 还是 YAML 或 XML 等),建立 index_id 这个是一条数据的唯一标识,用于跟踪数据流转过程

切记一定要有日志,所有的数据生命周期内必须要能完整跟踪到一条数据整个流转过程,如果在发现无法跟踪的数据进入了系统,一定要删除掉!
@levelworm 留个联系方式,可以一起聊一下😊
2019 年 12 月 4 日
回复了 shazh520 创建的主题 › 程序员 › 关于代码的病 有解吗?
TDD 能治好你的病
@levelworm 并不是 BI,数据勤杂工。。
1 ... 8  9  10  11  12  13  14  15  16  17 ... 90  
❮ ❯
About   ·   Help   ·   Advertise   ·   Blog   ·   API   ·   FAQ   ·   Privacy   ·   Solana   ·   971 Online   Highest 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 94ms · UTC 22:14 · PVG 06:14 · LAX 14:14 · JFK 17:14
♥ Do have faith in what you're doing.