檔案分類和檔案檢索已顯示出廣泛的應用。 檔案分類的重要部分是正確生成檔案表示。 馬特·庫斯納(Matt J. Kusner)等人在2015年提出了Word Mover’s Distance(WMD)[1],其中將詞嵌入技術用于計算兩個檔案之間的距離。 使用給定的預訓練單詞嵌入,可以通過計算“一個檔案的嵌入單詞需要“移動”以到達另一檔案的嵌入單詞所需的最小距離”來用語意含義來度量檔案之間的差異。在以下各節中,我們將討論WMD的原理,WMD的約束和近似,預取和修剪,WMD的性能。WMD原理如前所述,WM....
2020-09-29 more最近好多人私信問我,該怎樣才能成為高薪架構師,還有一個就對當前的狀態感到迷茫。我在此做一個簡單的說明,或者對迷茫中的你來說有些許幫助。當前你感到迷茫嗎?有很多人對現在的作業感到很沒意思,因為當前的作業,完全是實作業務,技術上沒有任何提高。在這種狀態下就會感到迷茫,特別是一想到將來這種迷茫感就更強烈了。與其說迷茫還不如說是擔憂,隨著時間的推移,自己的技術又沒有長進,所以感覺憂心忡忡。這里分為二種人:1.混日子,過一天算一天:這一種的我就不過多討論了,沒有意義。我也碰到過很多這....
2020-09-29 moreSurface-Defect-Detection???????? collect Surface-Defect-Detection paper and dataset ????原文鏈接,參看我的Github:https://github.com/Charmve/Surface-Defect-Detection目前, 基于機器視覺的表面缺陷裝備已經在各工業領域廣泛替代人工肉眼檢測,包括3C、汽車、家電、機械制造、半導體及電子、化工、醫藥、航空航天、輕工等行業。傳統的基于機器 視覺的表面缺陷檢測方法...
2020-09-29 moreMyBatis中一級快取和二級快取分析前言總結前言MyBatis中一級快取和二級快取分析總結MyBatis中一級快取和二級快取分析請關注我,和孤狼一起學習進步。...
2020-09-29 more硬體設計篇1:初識STM32MP1系列微處理器一、與一只蝴蝶的邂逅時間退回至2007年9月,對于剛步入大學的筆者而言,微控制器的含義僅僅局限于文字。而在同年的6月意法半導體(以下簡稱ST)在北京首發全球首款采用ARM Cortex-M3內核的處理器STM32F3,并選用一只蝴蝶作為產品的logo,在此后的十幾年,STM32這只“蝴蝶”成功的飛過千山萬水,不僅震動了整個MCU市場,也成功培育出了千萬工程師。然而當年ST在中國通用MCU市場占有率僅為2%左右,排10名以外。筆者接觸到微控制是在2008年...
2020-09-29 more最近因為學校事情比較多,也開始準備研究出一些深度學習方面的教程,但總被一些大大小小的原因在往后拖進度,這期用Python寫一篇從零到一的手寫體識別演算法實戰課來教各位如何入門深度學習。準備資料集首先準備一個 mnist 資料集。這是下載地址四個資料集分別是訓練圖集、訓練結果、測驗圖集、測驗結果。下載后存到一個檔案夾中備用。Tensorflow 資料流圖框架首先先呼叫Python第三方庫,將資料集全部呼叫行程式(在這里使用 Tensorflow2.3.0 以及 scipy==1.2.1)...
2020-09-29 more廢話不多說,直接開干!首先安裝庫pip install pytesseractpip install PILLOW然后按照tesseract程式下載安裝tessercat下載地址:https://digi.bib.uni-mannheim.de/tesseract/ //請依據自己的作業系統下載exe檔案安裝用戶變數,系統變數都添加:PATH C:\Program Files (x86)\Tesseract-OCR; //這是tesseract的安裝目錄系統...
2020-09-29 more簡單理解Embedding技術在推薦系統中的應用 在之前的學習階段做過一些實驗,很多時候在構建model時候不管三七二十一上來就先來上一層Embedding,只知道加上Embedding層后會得到更好的結果卻未曾深究其作用,經過閱讀《深度學習推薦系統》一書,才明白了個大概,拿來分享給大家也方便日后自己理解。本文結合推薦系統來闡述Embedding的作用和原理。但這里沒有涉及具體代碼實作,只做簡單的概念的闡述。Embedding概述 Embedding操作經常出現在我們設計的模型里,我們稱其為...
2020-09-29 more背景在日常生活中,常常會遇到因平臺優惠最低價比較高,所以需要和朋友拼單購買的情況,如買外賣時的滿減優惠、天貓雙十一“滿400減xxx”等活動。在計算費用時,需要計算各自需要支付給買單人的價格。我本人就是常常和單位同事一起拼單點漢堡王外賣,享受55-20、120-55等優惠。所以通過這個場景可以練習部分GUI及其他python技巧,并增加。效果圖剛打開時的頁面計算后的頁面,頁面也根據賬單結果的長度,做了自適應賬單結果頁面適合截圖發到群里python代碼# -*- codin...
2020-09-29 more天池&DataWhale:Task05:模型融合專案地址:https://github.com/datawhalechina/team-learning-data-mining/tree/master/FinancialRiskControl比賽地址:https://tianchi.aliyun.com/competition/entrance/531830/introduction模型融合目標 對于多種調參完成的模型進行模型融合。 完成對于多種模型的融合,提交融合結果并...
2020-09-29 more**?桔妹導讀:**GPU虛擬機實體創建速度慢是公有云面臨的普遍問題,由于通常情況下創建虛擬機屬于低頻操作而未引起業界的重視,實際生產中還是存在對GPU實體創建時間有苛刻要求的業務場景。本文將介紹滴滴云在解決該問題時的思路、方法、并展示最終的優化成果。 從公有云服務商那里購買過虛擬主機的資深用戶,一 ......
uj5u.com 2020-09-10 06:09:13 more**?桔妹導讀:**隨著云規模不斷擴大以及業務層面對延遲、帶寬的要求越來越高,采用DPDK 加速網路報文處理的方式在橫向縱向擴展都出現了局限性。可編程芯片成為業界熱點。本文主要講述了可編程網卡芯片在滴滴云網路中的應用實踐,遇到的問題、帶來的收益以及開源社區貢獻。 #1. 資料中心面臨的問題 隨著滴滴 ......
uj5u.com 2020-09-10 06:10:21 more**?桔妹導讀:**滴滴資料通道引擎承載著全公司的資料同步,為下游實時和離線場景提供了必不可少的源資料。隨著任務量的不斷增加,資料通道的整體架構也隨之發生改變。本文介紹了滴滴資料通道的發展歷程,遇到的問題以及今后的規劃。 #1. 背景 資料,對于任何一家互聯網公司來說都是非常重要的資產,公司的大資料 ......
uj5u.com 2020-09-10 06:11:05 more**桔妹導讀:**深耕人工智能領域,致力于探索AI讓出行更美好的滴滴AI Labs再次斬獲國際大獎,這次獲獎的專案是什么呢?一起來看看詳細報道吧! 近日,由國際計算語言學協會ACL(The Association for Computational Linguistics)舉辦的世界最具影響力的機器 ......
uj5u.com 2020-09-10 06:11:29 more1、什么是mpp? MPP (Massively Parallel Processing),即大規模并行處理,在資料庫非共享集群中,每個節點都有獨立的磁盤存盤系統和記憶體系統,業務資料根據資料庫模型和應用特點劃分到各個節點上,每臺資料節點通過專用網路或者商業通用網路互相連接,彼此協同計算,作為整體提供 ......
uj5u.com 2020-09-10 06:11:41 more**桔妹導讀:**指標體系是什么?如何使用OSM模型和AARRR模型搭建指標體系?如何統一流程、規范化、工具化管理指標體系?本文會對建設的方法論結合滴滴資料指標體系建設實踐進行解答分析。 #1. 什么是指標體系 ##1.1 指標體系定義 指標體系是將零散單點的具有相互聯系的指標,系統化的組織起來,通 ......
uj5u.com 2020-09-10 06:12:52 more我們經常在資料庫中使用 LIKE 運算子來完成對資料的模糊搜索,LIKE 運算子用于在 WHERE 子句中搜索列中的指定模式。 如果需要查找客戶表中所有姓氏是“張”的資料,可以使用下面的 SQL 陳述句: SELECT * FROM Customer WHERE Name LIKE '張%' 如果需要 ......
uj5u.com 2020-09-10 06:13:25 more**桔妹導讀:**Ceph是國際知名的開源分布式存盤系統,在工業界和學術界都有著重要的影響。Ceph的架構和演算法設計發表在國際系統領域頂級會議OSDI、SOSP、SC等上。Ceph社區得到Red Hat、SUSE、Intel等大公司的大力支持。Ceph是國際云計算領域應用最廣泛的開源分布式存盤系統, ......
uj5u.com 2020-09-10 06:14:51 more之前寫過《es~通過ElasticsearchTemplate進行聚合操作》的文章,這一次主要寫一個嵌套的聚合,例如先對sex集合,再對desc聚合,最后再對age求和,共三層嵌套。 Aggregations的部分特性類似于SQL語言中的group by,avg,sum等函式,Aggregation ......
uj5u.com 2020-09-10 06:14:59 more傻瓜式部署,只需替換IP與用戶 導讀: 現ELK四大組件分別為:Elasticsearch(核心)、logstash(處理)、filebeat(采集)、kibana(可視化) 下載均在https://www.elastic.co/cn/downloads/下tar包,各組件版本最好一致,配合fdm會 ......
uj5u.com 2020-09-10 06:15:05 moreMysql復習的一個小總結,用xmind寫的。(字數沒有都不給我發博客😹) 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢,而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用,并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:13:07 more?大資料概述 在大資料這個概念興起之前,資訊系統存盤資料的方法主要是我們熟知的關系型資料庫,關系型資料庫,關系型模型之父 Edgar F. Codd,在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文,從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:13:01 more一、下載安裝IDEA IDEA2020.2.3版本:https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考:https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境(window10) 可 ......
uj5u.com 2022-05-09 07:12:17 moreMySQL8新增降序索引 桃花塢里桃花庵,桃花庵里桃花仙。桃花仙人種桃樹,又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引,但實際上創建的卻仍然是升序索引,如下MySQL 5.7 所示,row2欄位降序,但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:11:36 moreLinux環境下,MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:11:28 moreMysql復習的一個小總結,用xmind寫的。(字數沒有都不給我發博客😹) 下面是一些備注 子查詢 MySQL子查詢稱為內部查詢,而包含子查詢的查詢稱為外部查詢。 子查詢可以在使用運算式的任何地方使用,并且必須在括號中關閉。 視圖 基本語法可以使用 CREATE VIEW 陳述句來創建視圖。 語法格 ......
uj5u.com 2022-05-09 07:10:34 moreMySQL8新增降序索引 桃花塢里桃花庵,桃花庵里桃花仙。桃花仙人種桃樹,又摘桃花賣酒錢。 一、MySQL5.7 降序索引 MySQL在語法上很早就已經支持降序索引,但實際上創建的卻仍然是升序索引,如下MySQL 5.7 所示,row2欄位降序,但是從show create table看 row2 ......
uj5u.com 2022-05-09 07:10:25 moreLinux環境下,MySQL的主要目錄及其作用、資料庫和資料表在檔案系統上的存盤結構。 ......
uj5u.com 2022-05-09 07:10:19 more?大資料概述 在大資料這個概念興起之前,資訊系統存盤資料的方法主要是我們熟知的關系型資料庫,關系型資料庫,關系型模型之父 Edgar F. Codd,在 1970 年 Communications of ACM 上發表了《大型共享資料庫資料的關系模型》的經典論文,從此之后關系模型的語意設計達到了 4 ......
uj5u.com 2022-05-09 07:10:05 more一、下載安裝IDEA IDEA2020.2.3版本:https://www.cnblogs.com/liugp/p/13868346.html 最新版本安裝詳情請參考:https://www.jb51.net/article/196349.htm 二、搭建本地hadoop環境(window10) 可 ......
uj5u.com 2022-05-09 07:09:25 more