Flink Kafka Connector与Exactly Once剖析

Flink Kafa Connector是Flink内置的Kafka连接器,它包含了从Kafka Topic读入数据的Flink Kafka Consumer以及向Kafka Topic写出数据的Flink Kafka Producer,除此之外Flink Kafa Connector基于Flink Checkpoint机制提供了完善的容错能力。本文从Flink Kafka Connector的基本使用到Kafka在Flink中端到端的容错原理展开讨论。

科大讯飞成为北京2022年冬奥会和冬残奥会官方自动语音转换与翻译独家供应商

InfoQ 9月16日消息,北京2022年冬奥会和冬残奥会官方自动语音转换与翻译独家供应商发布会在北京冬奥组委园区举行。科大讯飞正式成为北京2022年冬奥会和冬残奥会官方自动语音转换与翻译独家供应商。发布会上,北京冬奥组委专职副主席、秘书长韩子荣向科大讯飞颁发北京2022年冬奥会和冬残奥会官方自动语音转换与翻译独家供应商铭牌。“科大讯飞将为北京2022年冬奥会和冬残奥会提供强有力的自动语音转换与翻译技术,保障语言交流的无障碍“ ,科大讯飞董事长刘庆峰在致辞中表示。

波音事故半年祭:调整架构,或成立新的安全部门

据纽约时报报道,过去五个月里,波音董事会的一个小型委员会一直在采访公司员工,安全专家和其他工业组织的高管,试图了解这家航空巨头如何设计和制造更安全的飞机。该委员会本周将向波音全体董事会提交调查结果,并呼吁对公司的组织架构方式进行一些有意义的改变。这些建议将包括改变波音组织结构的各个方面,呼吁建立以安全为重点的新部门,鼓励公司考虑改变未来飞机的驾驶舱,以适应新一代飞行员。距离2019年3月的埃航空难已经过去了整整半年时间,涉事机型波音737 Max系列无限期停飞仍在继续。波音公司在过去的半年时间里,因为进展迟缓、处理不及时而备受批评。

图灵奖得主Edsger W. Dijkstra:谦卑的程序员(1972年)(上)

本文是图灵奖得主Edsger W. Dijkstra发表的演讲,他结合自己的早年求学经历,阐明了软件行业如何一步步发展至今,以及我们可以从中学到的发展规律;他列举了对软件领域有重大影响的编程语言,并展望未来,告诉我们如何更好地应对软件危机。Edsger W. Dijkstra(1930-2002)(图源:Hamilton Richards)机缘巧合,1952年春的第一个早晨,我正式进入了软件编程行业。据我所知,我是荷兰的第一个程序员。回想起来,最令人惊讶的,是编程行业发展的速度之慢,至少在我的那部分世界里,这简直令人难以置信。

腾讯开源万亿级分布式消息中间件TubeMQ

TubeMQ是腾讯在2013年自研的分布式消息中间件系统,专注服务大数据场景下海量数据的高性能存储和传输,经过近7年上万亿的海量数据沉淀,目前日均接入量超过25万亿条。较之其它开源MQ组件,TubeMQ的优势在海量实践(稳定性+性能)和低成本方面。9月12日,腾讯在ApacheCon宣布TubeMQ 开源。

微软的薪资泄露表明,员工为更高的薪酬所做的抗争

这些数字从4万美元到32万美元不等,揭示了大型科技公司薪酬运作的关键细节。图片:Stephen Brashear/Getty近400名微软员工正在互相分享工资,以更好地确定他们是否得到了公平的报酬。这一努力源于Facebook上一个名为“年轻的微软FTE”(Young Microsoft FTE)的私人群组,全职员工(Full Time Employees,FTEs)聚集在这里讨论公司。他们有一个共享的谷歌电子表格中收集工资情况。“分享你的匿名信息,这样我们就都能一起得到更多的报酬。”表格开头的一个标题这样写道。这份电子表格详细分析了微软部分员工的薪酬分配情况。

一名成功开发者所需的5项软技能

硬技能的高度决定一个人能否完成某项任务,而软技能则会决定一个人成就某项事业的潜力。软技能一词通常难以理解。软技能又称非技术技能,指沟通能力、倾听能力、说服能力、自我激励能力、影响力、团队建设的能力等等。软技能是各种行为的组合。衡量信念的方法是判断它对态度和行为的影响。硬技能以及少许的智力因素都属于附加的软技能。软技能并不像其他技能那样扎实和清晰。那么作为软件开发者,有哪些必知的软技能呢?软件开发是一项团队运动,但软技能确实也很重要。什么是软技能?如果我们去查阅《牛津词典》,将会得到如下定义:“个人属性,使某人能够有效地与他人进行和谐的互动。

A13芯片很牛,但是这款神秘的U1芯片才是苹果的野心

北京时间2019年9月11日凌晨,苹果公司公布了iPhone 11与iPhone 11 Pro系列手机。虽然在舞台上没有直接提到,但Phil Schiller在演讲期间使用的Apple Pay演示文稿中,赫然出现了全新的苹果U1芯片。而且相信绝大多数朋友,实际是在后来的回放中注意到这一点的。这个似乎是“技术失误”的小细节引起了本文作者的关注,他以此为线索进行了一番挖掘,结果竟然发现了苹果在超宽带无线电技术领域的野心。

InfoQ访谈:Render新应用托管云供应商

Render是一个新的Web和App托管供应商,按照Render的CEO所述,在全面的云供应商(如AWS)和PaaS供应商(如Heroku)之间,Render做到了“完美的平衡”。Render仍在致力于构建它的服务套件,但是已经具备了运行基础应用的基本要求。通过dashboard,开发人员可以决定创建哪种类型的服务,也就是公开的还是私有的。这会连接到一个GitHub仓库,每当将代码更新推送到该仓库的时候,都会向服务部署更新。这样的话,没有必要创建单独的构建和部署管道。目前,它所支持的是脚本语言,如Node和Python。对于想要使用不同技术(如Java或.

独家解读!京东高可用分布式流数据存储的架构设计

京东于2018年对其自研的消息队列中间件JMQ进行了一次彻底的重构,升级为JournalQ。相比上一代产品,JournalQ大幅提升了性能,功能上增加了Kafka、MQTT等协议的支持,提供更加完善的事务机制;设计上采用了存储与计算分离的模式,数据存储层从JournalQ中分离出来作为一个独立的中间件产品,高可用分布式的流数据存储:JournalKeeper。基于这种存储计算分离的设计,JournalQ在产品的定位上从单纯的消息数据管道升级为流数据的存储分发平台。笔者作为架构师,全程参与了JournalQ和JournalKeeper的设计和开发。

编译速度提升700%,字节跳动中台技术揭秘

在当今世界互联网时代下,平台化正兴起,从基础设施到人工智能等各个领域不断涌现的各类平台,对于软件开发人员及企业带来了深远的影响。在国内提“数字化平台战略”大家可能会觉得比较抽象,比较远大空;我们更喜欢用”中台战略“这个词来描述,这样显得更接地气一些。从BAT到美团、京东、华为都在调整组织架构,建立自己的中台部门,一时间”中台战略“仿佛成了那把角逐互联网下半场的取胜之匙。聊了这么多,到底什么是”中台“呢?

New York's Metropolitan Transit Authority puts its faith in Office 365

自古英雄出少年:15岁发明 iPhone 听诊器

威锋网讯,这看起来酷极了!一位来自西雅图年仅15岁的发明家发明了一款由 iPhone 驱动的听诊器。

Google Science Fair Winners Take on World Hunger, Other Global Problems

The answer to world hunger could lie in a single naturally-occurring bacteria.That was the finding of this year's winning project at the Google Science Fair.

Ambi Climate Gives Any Air Conditioner Nest-Like Powers

Ambi Climate wants to democratize smart home climate control, with a device that brings learning climate management even to standalone window air conditioner units, in addition to central air systems, freestanding systems or the single room machines more common in Europe and Asia,

A survival guide for battling network zombies this Halloween

Network zombies are an all too real menace for the modern-day IT administrator. They are smarter than the average zombie, harder to predict and leave no trail - but here's our guide to beating them.Read more: http://www.itproportal.

汤森路透:2014年美国风投共融资298亿美元

汤森路透和美国风险投资协会联合发布的最新报告显示,美国风险投资公司2014年第四季度通过75只基金融资56亿美元,融资的基金总数环比增长14%,但融资额却环比减少9%。

Initial Apple Watch Orders Pegged At Between 5 And 6 Million

The Apple Watch is coming very soon, with a launch date of April offered by none other than Apple CEO Tim Cook, so understandably, the supply chain is moving to meet initial demand. Apple has ordered between five and six million devices to be produced in preparation for the kick-off of sales,

4英寸iPhone 6c会出现?这样是打了谁的脸

阅读全文

7 brilliant tips for managing stress in the C-suite

Every founder dreams of the day his or her startup experiences runaway success, but the reality of massive growth can be terrifying. Recently, my company experienced four of the best sales months we’ve ever had, and it seemed like we were hiring a new employee every week.

谷歌发布了一款新应用,帮助发朋友圈都没人点赞的你

不知道你是否有这种情况,无论在什么社交平台,说什么,想发起什么活动,都没多少人回复,大部分时间都是自说自话,即使发消息给朋友也多以太忙为由不想参加,没人在乎。谷歌刚刚发布的这款新应用或许可以帮到你。

© 云聚网互联网资讯 我要投稿 云聚网博客 7秒MCN大数据平台 悠闲吧