應(yīng)用

技術(shù)

物聯(lián)網(wǎng)世界 >> 物聯(lián)網(wǎng)新聞 >> 物聯(lián)網(wǎng)熱點(diǎn)新聞
企業(yè)注冊(cè)個(gè)人注冊(cè)登錄

大數(shù)據(jù)生死時(shí)刻:七成數(shù)據(jù)接口被切斷,數(shù)萬(wàn)員工離開(kāi)行業(yè)

2019-12-02 09:46 一本財(cái)經(jīng)

導(dǎo)讀:一個(gè)行業(yè)從草莽到合規(guī),也許不得不經(jīng)歷幾個(gè)周期。

iot-technology-concept-city-transport-smart-1575603-pxhere.com.jpg

最近三個(gè)月,多家數(shù)據(jù)公司被調(diào)查,數(shù)據(jù)行業(yè)動(dòng)蕩不斷。

行業(yè)持續(xù)收緊,七成數(shù)據(jù)接口被切斷。

一些大數(shù)據(jù)公司的爬蟲(chóng)團(tuán)隊(duì)被全部裁員,大量人員主動(dòng)離職。據(jù)統(tǒng)計(jì),最近起碼有數(shù)萬(wàn)員工流出,行業(yè)人員流失率在50%以上。

各家大數(shù)據(jù)公司的CEO每天都在朋友圈“打卡”,證明“我沒(méi)被抓,我的公司也還在”。

而另一邊,合規(guī)的、有國(guó)資背景的大數(shù)據(jù)公司,卻迎來(lái)了好時(shí)候。有的公司在短短三個(gè)月內(nèi),“每個(gè)月業(yè)務(wù)翻一番”。

有人說(shuō),這是行業(yè)面臨的最大“生死劫”:有人死,卻也有人生……

行業(yè)大劫

大數(shù)據(jù)行業(yè),突然間被踩了剎車。

最近三個(gè)月,大數(shù)據(jù)公司人員被抓捕、被調(diào)查的消息不斷傳出,行業(yè)人人自危。

多家金融機(jī)構(gòu)稱,它們合作的數(shù)據(jù)接口,大部分都被切斷,“70%的接口斷了,其他的很多也不穩(wěn)定,一周換了三次”。

首先停掉的,是各種爬蟲(chóng)產(chǎn)品。

一家大數(shù)據(jù)公司的創(chuàng)始人于建瑞,發(fā)現(xiàn)第二家爬蟲(chóng)公司被抓后,在公司召開(kāi)了緊急會(huì)議。

“爬蟲(chóng)部門(mén)業(yè)務(wù)暫停,數(shù)據(jù)庫(kù)和服務(wù)器上所有的爬蟲(chóng)數(shù)據(jù)全部刪除,即便是脫了敏的?!庇诮ㄈ饹Q定“壯士斷臂”。

刪除數(shù)據(jù)的第二天,爬蟲(chóng)部門(mén)馬上“裁員十幾人,轉(zhuǎn)崗十幾人”。

“第三天,整個(gè)爬蟲(chóng)部門(mén)從公司完全消失?!庇诮ㄈ鸹巳鞎r(shí)間,將爬蟲(chóng)業(yè)務(wù)“抹除”。

緊接著切斷的,是“三要素驗(yàn)證”。

在過(guò)去,各大運(yùn)營(yíng)商下面,都接了很多代理商,后者會(huì)提供數(shù)據(jù)接口,進(jìn)行電話、姓名等要素的驗(yàn)證。

“最近電信停了很多代理商,現(xiàn)在基本不接了?!庇诮ㄈ鸱Q,最開(kāi)始暫停的是電信,現(xiàn)在聯(lián)通和移動(dòng)也在“縮減代理商”。

而各種多頭借貸產(chǎn)品,也紛紛下架。

“天創(chuàng)、有盾的多頭借貸產(chǎn)品都停了,市面上基本找不到多頭借貸的產(chǎn)品了?!庇诮ㄈ鸱Q。

金融監(jiān)管則開(kāi)始要求自查。

11月6日,中國(guó)互聯(lián)網(wǎng)金融協(xié)會(huì)向會(huì)員機(jī)構(gòu)發(fā)布《關(guān)于增強(qiáng)個(gè)人信息保護(hù)意識(shí)依法開(kāi)展業(yè)務(wù)的通知》,要求會(huì)員機(jī)構(gòu)對(duì)數(shù)據(jù)合作方進(jìn)行排查。

“很多被調(diào)查的或者有風(fēng)險(xiǎn)業(yè)務(wù)的公司,都被直接點(diǎn)名,監(jiān)管要求自查是否和它們有過(guò)合作?!庇诮ㄈ鸱Q,“這其中包括公信寶、白騎士、天機(jī)數(shù)據(jù)、木立征信等多家公司”。

數(shù)據(jù)公司

10月24日,一張截圖在網(wǎng)上流傳。截圖顯示,人行要求各地銀行排查與第三方數(shù)據(jù)公司的合作情況

多家金融機(jī)構(gòu)的工作人員也證實(shí)了這一點(diǎn):“盡管不同區(qū)域的要求,可能略有不同,但都是要求停掉和風(fēng)險(xiǎn)公司的合作。”

業(yè)務(wù)停滯的同時(shí),行業(yè)也彌漫著驚恐的氣息。

于建瑞身邊每天都有人失聯(lián),“出國(guó)的出國(guó),被抓的被抓”。

“最近,各家大數(shù)據(jù)公司的CEO每天都在朋友圈打卡,比運(yùn)動(dòng)打卡都勤奮?!庇诮ㄈ鸱Q,這里頭的潛臺(tái)詞,無(wú)非是“我沒(méi)事,我們公司也還好著呢”。

一家場(chǎng)景分期平臺(tái)的HR前兩天約好了一個(gè)面試,結(jié)果求職者沒(méi)有出現(xiàn),“后來(lái)聽(tīng)說(shuō),他被抓了”。

大數(shù)據(jù)突然成為高風(fēng)險(xiǎn)行業(yè),行業(yè)掀起了一波離職潮。

“這段時(shí)間,我們收到了大量來(lái)自數(shù)據(jù)行業(yè)的人員簡(jiǎn)歷。”上述HR表示。

而各大數(shù)據(jù)公司,也開(kāi)始裁員。

“榜上有名的數(shù)據(jù)公司幾乎都在裁員。”一家金融機(jī)構(gòu)的風(fēng)控總監(jiān)稱,被裁的員工中,基本有一半都是技術(shù)人員。

“這些公司的裁員率和離職率起碼有50%,技術(shù)部門(mén)甚至達(dá)到了70%?!?/p>

成本激增

實(shí)際上,金融科技發(fā)展的基礎(chǔ)和養(yǎng)料,就是大數(shù)據(jù)。

整個(gè)數(shù)據(jù)行業(yè)的停滯,導(dǎo)致金融業(yè)務(wù)受到巨大影響。

“80%的金融公司都收縮了?!庇诮ㄈ鸱Q。

一些平臺(tái),只能針對(duì)老客戶放款,不再新增;稍微激進(jìn)一點(diǎn)的平臺(tái),就開(kāi)始憑感覺(jué)放款。

“較為資深的從業(yè)者,都會(huì)對(duì)自己用戶的畫(huà)像有概念,大概知道哪些人是優(yōu)質(zhì)人群?!币患覉?chǎng)景分期平臺(tái)的風(fēng)控總監(jiān)李揚(yáng)稱。

他們比對(duì)著過(guò)往的好客戶畫(huà)像和逾期客戶畫(huà)像來(lái)放款,“逾期率也還可控”。

但如果想維持以前的業(yè)務(wù)量,就意味著各項(xiàng)成本的增加。

costs

首先,是數(shù)據(jù)成本的增加。

“正規(guī)的數(shù)據(jù)公司和央行征信,其實(shí)可以覆蓋行業(yè)70%到80%的數(shù)據(jù)需求?!币患业谌秸餍艡C(jī)構(gòu)的創(chuàng)始人王海峰表示。

只是,金融行業(yè)需要付出更高的合規(guī)成本——合規(guī)的數(shù)據(jù),價(jià)格自然要貴一些。

“它們的成本高了約60%?!睌?shù)據(jù)寶CEO湯寒林稱。

其次,是核驗(yàn)成本和人力成本的增加。

摩托車分期服務(wù)商騎唄科技的風(fēng)控專家姚奕稱,受爬蟲(chóng)風(fēng)波的影響,他們獲取第三方數(shù)據(jù)的渠道減少了50%至70%。

為了維持業(yè)務(wù)運(yùn)轉(zhuǎn),他們只能要求用戶提交更多的紙質(zhì)資料,并增加人手,用人工的方式核實(shí)用戶信息。

“之前查詢一條信息,只需要一兩秒,成本在幾毛錢(qián)到幾塊錢(qián)之間?,F(xiàn)在靠人工核實(shí),可能需要幾分鐘甚至十來(lái)分鐘。”

之前審核只要約10分鐘,現(xiàn)在為30分鐘?!按送?,人力成本也增加了30%至50%?!?/p>

面對(duì)現(xiàn)在的數(shù)據(jù)困境,有一些平臺(tái)嘗試自建風(fēng)控和爬蟲(chóng)。

“搭建一套爬蟲(chóng)系統(tǒng),保守估計(jì)需要6個(gè)人,至少三個(gè)月,開(kāi)發(fā)成本就得200萬(wàn)?!庇诮ㄈ鸱Q。而后期的維護(hù)成本更高。

“比如說(shuō),為了反爬蟲(chóng),運(yùn)營(yíng)商的官網(wǎng)動(dòng)不動(dòng)就會(huì)來(lái)個(gè)頁(yè)面調(diào)整,爬蟲(chóng)系統(tǒng)就得跟著改?!庇诮ㄈ鸱Q,后期每個(gè)月的維護(hù)成本,還得50萬(wàn)。

而自建風(fēng)控系統(tǒng)的難度,同樣意味著人力成本的高昂。

“整個(gè)金融體系的成本,保守估計(jì)增加了50%左右,人力、數(shù)據(jù)的成本大幅度增加,效率也會(huì)下降很多?!庇诮ㄈ鸱Q。

未來(lái)如何

這不是數(shù)據(jù)行業(yè)的第一次大洗牌。

數(shù)據(jù)行業(yè)最早的一批從業(yè)者都記得,早在2012年前后,中國(guó)的數(shù)據(jù)行業(yè)就曾經(jīng)遭遇過(guò)一次大洗牌。

2012年,央視“3·15”晚會(huì)曝光羅維鄧白氏非法獲取、買(mǎi)賣(mài)公民個(gè)人信息。羅維鄧百氏全員被上海警方帶走。

羅維鄧白氏

2012年,央視“3·15”晚會(huì)對(duì)羅維鄧白氏的曝光截圖

那一次之后,數(shù)據(jù)行業(yè)的暴利鏈條被打斷,絕大部分從業(yè)者離開(kāi)。

留下來(lái)的人,也心懷敬畏,不敢越界。

“上一次實(shí)際上是為了捍衛(wèi)數(shù)據(jù)主權(quán),而這一次和上一次有本質(zhì)的區(qū)別,是為了維護(hù)穩(wěn)定——金融和數(shù)據(jù)結(jié)合得太深,暴力催收和套路貸引發(fā)了很多極端案件?!痹跀?shù)據(jù)行業(yè)有15年工作經(jīng)驗(yàn)的資深從業(yè)者丁一稱。

但現(xiàn)在市面上這些主流的大數(shù)據(jù)公司,大部分都是在2012年之后創(chuàng)立的。它們沒(méi)有經(jīng)歷過(guò)上一次洗牌,也沒(méi)有感受過(guò)歷史的教訓(xùn)。

“數(shù)據(jù)行業(yè)是一個(gè)什么樣的行業(yè),底線在哪里,他們中,大部分人并不知道?!倍∫环Q。

而這一次和上次一樣,大量人員離開(kāi),暴利鏈條被打斷。

歷史如此相似,數(shù)據(jù)行業(yè)仿佛又走完了一個(gè)輪回。

丁一認(rèn)為,這次洗牌也許并非壞事——行業(yè)重新回到一個(gè)新的起點(diǎn),新的底線也被劃好。

而在腥風(fēng)血雨中存活下來(lái)的合規(guī)公司,也漸漸熬出了頭。

“在過(guò)去,合規(guī)的數(shù)據(jù)公司根本活不下去,因?yàn)槲覀円冻龈叩暮弦?guī)成本。”湯寒林稱。

他舉例稱,他們并不緩存任何一條數(shù)據(jù)。

而行業(yè)大部分的玩家,都是將調(diào)取的數(shù)據(jù)偷偷存起來(lái),當(dāng)數(shù)據(jù)越積越多之時(shí),數(shù)據(jù)公司就可以直接用緩存庫(kù)里的數(shù)據(jù),不再需要從接口調(diào)取。

于是它們的銷售價(jià)格就可以壓到極低,“多賣(mài)一單就是賺”。

“它們價(jià)格便宜,而且因?yàn)橐呀?jīng)緩存下來(lái)了,所以響應(yīng)時(shí)間也會(huì)比我們快。” 湯寒林說(shuō)。

在慘烈的市場(chǎng)競(jìng)爭(zhēng)中,劣幣將驅(qū)逐良幣。

而如今,合規(guī)的數(shù)據(jù)公司成為了“香餑餑”。

一家有國(guó)企背景的數(shù)據(jù)公司創(chuàng)始人透露:“最近三個(gè)月,我們每個(gè)月的業(yè)務(wù)量都翻一番?!?/p>

而一些巨頭旗下的大數(shù)據(jù)平臺(tái),也突然間變得門(mén)庭若市。

“排隊(duì)等著接我們的服務(wù),咨詢量也暴增?!币患揖揞^旗下的云平臺(tái)銷售稱,他們最近正準(zhǔn)備擴(kuò)充團(tuán)隊(duì)。

關(guān)于大數(shù)據(jù)行業(yè)的未來(lái),從業(yè)者認(rèn)為,“持牌”將是一個(gè)關(guān)鍵詞。

“或許,第三方大數(shù)據(jù)公司將會(huì)持牌經(jīng)營(yíng)?!币患覕?shù)據(jù)公司的負(fù)責(zé)人夏睿預(yù)測(cè),到那時(shí),行業(yè)內(nèi)應(yīng)該只剩下幾家頭部公司,小公司存活的可能性不大。

合規(guī)、持牌,可能會(huì)成為未來(lái)大數(shù)據(jù)行業(yè)的主旋律。

丁一認(rèn)為,一個(gè)行業(yè)從草莽到合規(guī),確實(shí)要經(jīng)歷幾個(gè)周期,“只有暴利鏈條被打斷,這些守規(guī)矩的人,才可以重新奔跑”。

“你還準(zhǔn)備留在大數(shù)據(jù)行業(yè)嗎?”最近,很多人問(wèn)于建瑞。

“市場(chǎng)和需求還在,只是劃了新的跑道,我還是會(huì)在?!彼f(shuō)。

只是這一次,他會(huì)更加心懷敬畏。