天給大家帶來【爬蟲實戰100例】之41篇,爬蟲之路永無止境。
網址:尺度有點大,遭不住...
開發工具:pycharm 開發環境:python3.7, Windows11 使用工具包:requests
獲取當當前網頁的跳轉地址,當前頁面為主頁面數據,我們需要的數據別有一番天地,獲取到網頁信息提取出所有的跳轉地址,獲取到源碼里的a標簽就行當前網頁的加載方式為靜態數據,直接請求網頁地址;
url='https://www.xxxx.com/
從源代碼里提取到所有的跳轉地址
提取的方式可自行選擇,小編這里使用正則的方式提取數據,提取詳情頁面的地址以及標題,用來保存圖片起名字,獲取到進入詳情頁面的地址后對地址發送請求,詳情頁面的數據也分為很多的頁面,每個頁面有好幾張圖片,需要對網址進行拼接,構造出新的地址信息,
for i in range(1, int(page_num[0]) + 1): new_url=info_url.replace('.html', f'_{i}.html') jpg_data=requests.get(new_url, headers=headers).content.decode('gbk')
請求之后提取出所有的圖片地址再對圖片地址發送請求,保存數據大功告成!!
'user-agent': 'Mozilla/5.0 (Windows NT 10.0; Win64; x64) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/95.0.4638.69 Safari/537.36' url='https://www.xxxx.com/guoneimeinv/list_5_{}.html'.format(i) response=requests.get(url, headers=headers) data_list=re.findall('</a> </li><li><a href="(.*?)" class="pic" target="_Blank" alt="(.*?)">', response.content.decode('gbk'))for info_url, title in data_list: res=requests.get(info_url, headers=headers).content.decode('gbk') page_num=re.findall('<li><a>共(.*?)頁: </a></li><li>', res)for i in range(1, int(page_num[0]) + 1): new_url=info_url.replace('.html', f'_{i}.html') jpg_data=requests.get(new_url, headers=headers).content.decode('gbk') jpg_url_list=re.findall('<p align="center"><img src="(.*?)" /></p><br/>', jpg_data)for jgp_url in jpg_url_list: result=requests.get(jgp_url, headers=headers).content f=open('1000圖庫/' + title + "-" + str(num) + ".jpg", 'wb')print(f"正在下載{title}第{num}張")
天給大家分享一款超全功能的跨瀏覽器平臺甘特圖表庫DHTMLXGantt。
dhtmlx-gantt DHTMLX公司開源的 JavaScript 甘特圖/橫道圖/條狀圖類庫。用來快速構建顯示項目、進度,和隨著時間關聯的相關進展情況。
dhtmlx-Gantt 由位于俄羅斯圣彼得堡的DHTMLX公司開發的甘特圖組件,適用于B/S模式的Web應用開發。被廣泛應用于項目管理、建筑、IT軟件、汽車等領域。
<!DOCTYPE html>
<html>
<head>
<meta http-equiv="Content-type" content="text/html; charset=utf-8">
<title>gantt demo</title>
<script src="dhtmlxgantt.js?v=6.0.0"></script>
<link rel="stylesheet" href="dhtmlxgantt.css?v=6.0.0">
<style>
html, body {
height: 100%;
padding: 0px;
margin: 0px;
overflow: hidden;
}
</style>
</head>
<body>
<div id="gantt_here" style='width:100%; height:100%;'></div>
<script>
var taskList={
data: [
{
id: 1, text: "Project #2", start_date: "01-04-2018", duration: 18, order: 10,
progress: 0.4, open: true
},
{
id: 2, text: "Task #1", start_date: "02-04-2018", duration: 8, order: 10,
progress: 0.6, parent: 1
},
{
id: 3, text: "Task #2", start_date: "11-04-2018", duration: 8, order: 20,
progress: 0.6, parent: 1
}
],
links: [
{id: 1, source: 1, target: 2, type: "1"},
{id: 2, source: 2, target: 3, type: "0"}
]
};
gantt.config.date_format="%Y-%m-%d %H:%i";
gantt.init("gantt_here");
gantt.parse(taskList);
</script>
</body>
</html>
為了配置甘特圖所需外觀,dhtmlxGantt提供了2個對象 config和templates。
gantt.config //日期,比例,控件等的配置選項。
gantt.templates //格式化甘特圖中使用的日期和標簽的模板。
gantt.config.scale_unit="year"; //按年顯示
gantt.config.step=1.5; //設置時間刻度的步長(X軸)
gantt.config.date_scale="%Y"; //日期尺度按年
gantt.init("gantt_here");
gantt.config.scale_unit="month"; //按月顯示
gantt.config.date_scale="%F, %Y"; //設置時間刻度的格式(X軸) 多個尺度
gantt.config.scale_height=50; //設置時間刻度的高度和網格的標題
gantt.config.subscales=[
{unit: "day", step: 1, date: "%j, %D"}
]; //指定第二個時間刻度
gantt.init("gantt_here");
gantt.templates.task_text=function(start,end,task){
return "<b>Text:</b> "+task.text+",<b> Holders:</b> "+task.username;
};
gantt.init("gantt_here");
官網提供了豐富的文檔示例。
非常棒的一款開源甘特圖庫,可以讓你預測時間、成本、數量及質量上的關聯并回溯結果。也能幫助你考慮人力、資源、日期、項目中重復的要素和關鍵部分,讓你更加直觀的看到任務進展及資源的利用率等。
# 官網地址
https://dhtmlx.com/docs/products/dhtmlxGantt/
# 倉庫地址
https://github.com/DHTMLX/gantt
好了,今天就介紹到這里。大家如果有其它不錯的甘特圖庫,歡迎一起交流討論!
答案很粗暴,一般分為兩種方式,一種是付費,一種是免費!
付費的路子那就多得去了,付費的圖紙完整、高清、無水印,怎么適合使用來。
那免費的圖紙呢?有可能模糊、標注不明、甚至是覆蓋有大量水印。
其實是你沒找對地方,今天我要分享的這三個網站,免費的圖紙也跟付費的一樣優秀!
http://www.xunjiecad.com/dailypic.html
CAD每日一圖是一個專注于CAD資源分享的網頁,在這里你能找到海量的免費圖紙,無論是圖塊庫還是施工圖紙,甚至學習教程這里也應有盡有。
下載步驟:在首頁搜索圖紙關鍵字- -選擇合適的圖紙- -點擊下載
迅捷CAD每日一圖支持免費免注冊下載,迅捷CAD專注CAD各類軟件,每一款都很適合新手和自學者使用,感興趣可以多了解。
http://www.cadzxw.com/
說到自學,自然是不能少了CAD自學網。CAD自學網專注于CAD教學,從軟件教程到繪圖教程,從常用問題解答到圖紙素材資源,CAD自學網都給你準備好。
除了找資源,CAD自學網更是非常專業的CAD自學網站,初學者都應該看看。
下載步驟:在首頁找到菜單欄中找到CAD版本- -素材- -選擇需要的圖紙點擊下載
很多人都知道千圖網可以找到Excel、Word、PPT等模板,卻不知道其實它還有CAD資源。如果以上兩個網站找不到的資源,你還能試試千圖網。(千圖網一天可以免費下載一次)
下載操作:在首頁搜索:CAD- -選擇你需要的素材下載
*請認真填寫需求信息,我們會在24小時內與您取得聯系。