主頁 > 作業系統 > 使用beautifulsoup找到帶有部分字串的ap標簽，并提取后面的p標簽的字串中的整數

使用beautifulsoup找到帶有部分字串的ap標簽，并提取后面的p標簽的字串中的整數

2021-12-16 23:04:21 作業系統

嘗試構建一個遍歷網路鏈接的迭代，以提取 p 標簽中的整數，該整數位于 p 標簽之后，該 p 標簽包含“AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON”字樣。目標頁面具有足夠接近的圖案但不相同。該 AGGREGATE AMOUNT 句子的格式不同（有時大寫，有時不大寫，間距可能不相同）。我在下面嘗試從中提取整數值的部分包含了 3 個示例。

以下是我試圖實作的步驟：

1-通過鏈接迭代一些鏈接：https : //www.sec.gov/Archives//edgar/data/29669/000119312521353247/d228949dsc13da.htm https://www.sec.gov/Archives//edgar/data/1482018 /000119312521353071/d258656dsc13d.htm https://www.sec.gov/Archives//edgar/data/1590854/000119312521353064/d210475dsc13d.htm https://www.sec.gov/Archives//edgar/data/1021944/000119312521353050 /d243715dsc13g.htm https://www.sec.gov/Archives//edgar/data/1609492/000119312521353003/d251372dsc13da.htm ...

2-查找包含部分單詞“AGGREGATE AMOUNT BENEFICIALLY”的 p 標簽，可以是 small caps 、 titled 或全部大寫

<p style="margin-top:0pt; margin-bottom:0pt; font-size:10pt; font-family:Times New Roman">  Aggregate Amount Beneficially Owned by Each Reporting Person:</p>

3-一旦找到 p 標簽，繼續查看后面的 p 標簽，直到我們找到第一個 p 標簽，其中字串（如果存在），去掉逗號后是一個整數（非空）。這可以是直接的 p后面的標記，或后面的標記，如下面的代碼所示。

<p style="font-size:12pt; margin-top:0pt; margin-bottom:0pt"> </p><p style="margin-top:0pt; margin-bottom:1pt; font-size:10pt; font-family:Times New Roman"> 10,927,100*</p>

10,927,100 是我需要的數字，雖然它需要從逗號中去除（我知道我們可以使用下面的代碼），但是字串也需要從不是數字的任何其他字符中去除...... int(shares.replace(',', '')

示例1：

<table border="0" cellpadding="0" cellspacing="0" style="BORDER-COLLAPSE:COLLAPSE; font-family:Times New Roman; font-size:10pt" width="98%">
<tr>
<td width="3%"></td>
<td valign="bottom" width="1%"></td>
<td width="6%"></td>
<td valign="bottom" width="1%"></td>
<td></td>
<td valign="bottom" width="1%"></td>
<td width="88%"></td></tr>
<tr style="page-break-inside:avoid ; font-family:Times New Roman; font-size:10pt">
<td style="BORDER-LEFT:1px solid #000000; BORDER-TOP:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-left:8pt" valign="top">11.  </td>
<td style=" BORDER-LEFT:1px solid #000000; BORDER-TOP:1px solid #000000; BORDER-BOTTOM:1px solid #000000" valign="bottom"> </td>
<td colspan="5" style="BORDER-TOP:1px solid #000000; BORDER-RIGHT:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-right:2pt" valign="top">
<p style="margin-top:0pt; margin-bottom:0pt; font-size:10pt; font-family:Times New Roman">  Aggregate Amount Beneficially Owned by Each Reporting Person:</p> <p style="font-size:12pt; margin-top:0pt; margin-bottom:0pt"> </p>
<p style="margin-top:0pt; margin-bottom:1pt; font-size:10pt; font-family:Times New Roman">  10,927,100*</p></td></tr>
<tr style="page-break-inside:avoid ; font-family:Times New Roman; font-size:10pt">
<td style="BORDER-LEFT:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-left:8pt" valign="top">12.</td>
<td style=" BORDER-LEFT:1px solid #000000; BORDER-BOTTOM:1px solid #000000" valign="bottom"> </td>
<td colspan="5" style="BORDER-RIGHT:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-right:2pt" valign="top"> <p style="margin-top:0pt; margin-bottom:0pt; font-size:10pt; font-family:Times New Roman">  Check if the Aggregate
Amount in Row (11) Excludes Certain Shares (See Instructions):</p> <p style="font-size:12pt;margin-top:0pt;margin-bottom:0pt"> </p>

例子2：

<p style="font-size:12pt; margin-top:0pt; margin-bottom:0pt"> </p> <p style="margin-top:0pt; margin-bottom:1pt; font-size:12pt; font-family:Times New Roman">28,911,268(1)</p></td></tr>
<tr style="page-break-inside:avoid ; font-family:Times New Roman; font-size:12pt">
<td style="BORDER-LEFT:1px solid #000000; BORDER-TOP:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-left:8pt" valign="top"><font style="font-size:10pt">11</font></td>
<td style=" BORDER-LEFT:1px solid #000000; BORDER-TOP:1px solid #000000; BORDER-BOTTOM:1px solid #000000" valign="bottom"> </td>
<td colspan="5" style="BORDER-TOP:1px solid #000000; BORDER-RIGHT:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-right:2pt" valign="top">
<p style="margin-top:0pt; margin-bottom:0pt; font-size:10pt; font-family:Times New Roman">AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON</p> <p style="font-size:12pt; margin-top:0pt; margin-bottom:0pt"> </p>
<p style="margin-top:0pt; margin-bottom:1pt; font-size:12pt; font-family:Times New Roman">28,911,268</p></td></tr>
<tr style="page-break-inside:avoid ; font-family:Times New Roman; font-size:12pt">

例子3：

<table border="0" cellpadding="0" cellspacing="0" style="BORDER-COLLAPSE:COLLAPSE; font-family:Times New Roman; font-size:10pt" width="100%">
<tr>
<td width="3%"></td>
<td valign="bottom" width="1%"></td>
<td width="6%"></td>
<td valign="bottom" width="1%"></td>
<td></td>
<td valign="bottom" width="1%"></td>
<td width="88%"></td></tr>
<tr style="page-break-inside:avoid ; font-family:Times New Roman; font-size:10pt">
<td style="BORDER-LEFT:1px solid #000000; BORDER-TOP:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-left:8pt" valign="top">11  </td>
<td style=" BORDER-LEFT:1px solid #000000; BORDER-TOP:1px solid #000000; BORDER-BOTTOM:1px solid #000000" valign="bottom"> </td>
<td colspan="5" style="BORDER-TOP:1px solid #000000; BORDER-RIGHT:1px solid #000000; BORDER-BOTTOM:1px solid #000000; padding-right:2pt" valign="top">
<p style="margin-top:0pt; margin-bottom:0pt; font-size:10pt; font-family:Times New Roman">  AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON</p> <p style="font-size:12pt; margin-top:0pt; margin-bottom:0pt"> </p><p style="margin-top:0pt; margin-bottom:1pt; font-size:10pt; font-family:Times New Roman">  23,866,091</p></td></tr><tr style="page-break-inside:avoid ; font-family:Times New Roman; font-size:10pt">

目前，我正在嘗試收集句子“AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON”的所有可能的字串形式，而不是搜索可以適用于所有人的部分字串。

到目前為止我當前的代碼：

def doGet(url):
    s = requests.Session()
    headers = {
        'user-agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36',
        'Sec-CH-UA': 'Examplary Browser',
        'Sec-CH-UA-Mobile': '?0',
        'Sec-CH-UA-Platform': "Windows",
        "sec-fetch-dest": "document",
        "sec-fetch-mode": "navigate",
        "sec-fetch-site": "none",
        "sec-fetch-user": "?1",
        "upgrade-insecure-requests": "1",
        "authority": "www.sec.gov",
        "method": "GET",
        "path": "/Archives/edgar/data/59478/000120919121046268/0001209191-21-046268-index.htm",
        "scheme": "https",
        "accept": "text/html,application/xhtml xml,application/xml;q=0.9,image/avif,image/webp,image/apng,/;q=0.8,application/signed-exchange;v=b3;q=0.9",
        "accept-encoding": "gzip deflate br",
        "accept-language": "en-US,en;q=0.9,ar-LB;q=0.8,ar;q=0.7",
        "cache-control": "max-age=0"}


    r = None
    proxies = {
        'http': 'socks5://127.0.0.1:9050',
        'https': 'socks5://127.0.0.1:9050'
    }
    try:
        r = s.get(url, headers=headers)

        if r.status_code == 403:
            i = 1
            while r.status_code == 403 and i <= 10:
                print("Status code: "   str(r.status_code)   "  for : "   url)
                time.sleep(1)
                r = s.get(url, headers=headers, proxies = proxies)
                i  = 1
        # print("Status code: "   str(r.status_code)   "  for : "   url)
        # r.raise_for_status()
    except requests.exceptions.HTTPError as errh:
        print("Http Error: "   errh   " for url: "   url)
        if r.get_status_code == 403:
            i = 1
            while r.status_code == 403 and i <= 10:
                time.sleep(i)
                r = s.get(url, headers=headers)
                i  = 1
    except requests.exceptions.ConnectionError as errc:
        print("Error Connecting: "   str(errc)   "  for : "   url)
    except requests.exceptions.Timeout as errt:
        print("Timeout Error: "   str(errt)   "  for : "   url)
    except requests.exceptions.RequestException as err:
        print("OOps: Something Else"   str(err)   "  for : "   url)

    return r


for link in link_list:
    res = doGet(link)
    soup = BeautifulSoup(res.text, 'html.parser')
    # Finding a pattern(certain text)

    try:
        pattern = '9.  AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON' 
        # Anchor tag
        text1 = soup.find('p', text = pattern)
        # print(text1)
        shares = text1.find_next_sibling('p').string
        shares
    except Exception as e:
        print('test1'   str(e))
        pass

    try:
        pattern = "  AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON" 
        # Anchor tag
        text1 = soup.find('p', text = pattern)
        # print(text1)
        shares =text1.find_next_sibling('p').find_next_sibling('p').string
        print(shares)
    except Exception as e:
        print('test2'   str(e))
        pass

    try:
        pattern = "AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON" 
        # Anchor tag
        text1 = soup.find('p', text = pattern)
        # print(text1)
        shares =text1.find_next_sibling('p').find_next_sibling('p').string
        print(shares)
    except Exception as e:
        print('test3'   str(e))
        pass

    try:
        pattern = "  Aggregate Amount Beneficially Owned by Each Reporting Person:" 
        # Anchor tag
        text1 = soup.find('p', text = pattern)
        # print(text1)
        shares =text1.find_next_sibling('p').find_next_sibling('p').string
        print(shares)
    except Exception as e:
        print('test4'   str(e))
        pass

    try:
        pattern = '9.  AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON' 
        # Anchor tag
        text1 = soup.find('p', text = pattern)
        # print(text1)
        shares = text1.find_next_sibling('p').string
        shares
    except Exception as e:
        print('test1'   str(e))
        pass

uj5u.com熱心網友回復：

你應該能夠適應這一點。您正在訪問的頁面是非常簡單的 HTML（沒有 Javascript），因此只需在一個簡單的回圈中處理頁面就非常簡單和高效。

這里發生的事情是我們以不區分大小寫的方式查找文本匹配“AGGREGATE AMOUNT BENEFICIALLY OWNED BY EACH REPORTING PERSON”的p標簽。如果我們發現，我們設定一個標志。然后在BeautifulSoup 找到的p標簽的后續迭代中，我們查找 a) 非空且 b) 包含數字序列（忽略逗號）的文本。

等等...

import requests
from bs4 import BeautifulSoup as BS
import re

URLS = ['https://www.sec.gov/Archives//edgar/data/29669/000119312521353247/d228949dsc13da.htm',
        'https://www.sec.gov/Archives//edgar/data/1482018/000119312521353071/d258656dsc13d.htm',
        'https://www.sec.gov/Archives//edgar/data/1590854/000119312521353064/d210475dsc13d.htm',
        'https://www.sec.gov/Archives//edgar/data/1021944/000119312521353050/d243715dsc13g.htm',
        'https://www.sec.gov/Archives//edgar/data/1609492/000119312521353003/d251372dsc13da.htm']


HEADERS = {
    'User-Agent': 'Mozilla/5.0 (Macintosh; Intel Mac OS X 10_11_6) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/56.0.2924.87 Safari/537.36',
    "Accept-Language": "en-US,en;q=0.5"
}

AGG = 'AGGREGATE AMOUNT BENEFICIALLY'

with requests.Session() as session:
    for url in URLS:
        try:
            (r := session.get(url, headers=HEADERS)).raise_for_status()
            print(url)
            soup = BS(r.text, 'lxml')
            np = False
            for p in soup.find_all('p'):
                if np:
                    if (t := p.text.strip()):
                        if (m := re.search(r'(\d )', t.replace(',', ''))):
                            print(f'\t{m[1]}')
                            np = False
                else:
                    if AGG in p.text.upper():
                        np = True
        except Exception as e:
            print(f'Error while processing {url} -> {e}')

uj5u.com熱心網友回復：

帶有 css 選擇器的版本，我也會讓您處理格式。如果遇到不同的大小寫，則必須更新選擇器，但語法非常簡單

import requests
from bs4 import BeautifulSoup

links=[
    'https://www.sec.gov/Archives//edgar/data/29669/000119312521353247/d228949dsc13da.htm',
    'https://www.sec.gov/Archives//edgar/data/1482018/000119312521353071/d258656dsc13d.htm',
    'https://www.sec.gov/Archives//edgar/data/1590854/000119312521353064/d210475dsc13d.htm',
    'https://www.sec.gov/Archives//edgar/data/1021944/000119312521353050/d243715dsc13g.htm',
    'https://www.sec.gov/Archives//edgar/data/1609492/000119312521353003/d251372dsc13da.htm']

ua={"User-Agent": "Mozilla/5.0 (iPhone; CPU iPhone OS 9_3_6 like Mac OS X) AppleWebKit/535.2 (KHTML, like Gecko) FxiOS/9.5o4548.0 Mobile/38G031 Safari/535.2"}
with requests.session() as s:
    s.headers.update(ua)
    for link in links:
        r=s.get(link)
        print(r.status_code, r.reason, link)
        soup=BeautifulSoup(r.text, 'lxml')
        ps=soup.select('''td[colspan="5"]:has(p:-soup-contains(
                "Aggregate Amount Beneficially",
                "AGGREGATE AMOUNT BENEFICIALLY"     
            )) p:last-of-type''')
        for p in ps:
            print(p.text)

uj5u.com熱心網友回復：

關閉diggusbickus approache這個答案將采用css selectors與requests和BeautifulSoup唯一，所以你不需要進口re library

它通過pattern使用 python搜索while 來跟蹤該程序，f-string我們也可以使用它.upper()來修改pattern. 我的選擇集中在<p>包含pattern及其最后一個兄弟的<p>

soup.select(f'''p:-soup-contains("{pattern}","{pattern.upper()}") ~ p:last-of-type''')

要僅提取數字并獲得一個int()我使用的.filter()方法：

int("".join(filter(str.isdigit, p.text.split("(")[0])))

注意 為了處理 () 中的數字，我們必須在過濾之前拆分字串

例子

import requests
from bs4 import BeautifulSoup

links=[
    'https://www.sec.gov/Archives//edgar/data/29669/000119312521353247/d228949dsc13da.htm',
    'https://www.sec.gov/Archives//edgar/data/1482018/000119312521353071/d258656dsc13d.htm',
    'https://www.sec.gov/Archives//edgar/data/1590854/000119312521353064/d210475dsc13d.htm',
    'https://www.sec.gov/Archives//edgar/data/1021944/000119312521353050/d243715dsc13g.htm',
    'https://www.sec.gov/Archives//edgar/data/1609492/000119312521353003/d251372dsc13da.htm'
]

headers={"User-Agent": "Mozilla/5.0"}
pattern = 'Aggregate Amount Beneficially'

for link in links:
    r=requests.get(link,headers=headers)
    soup=BeautifulSoup(r.text, 'lxml')
    for p in soup.select(f'''p:-soup-contains("{pattern}","{pattern.upper()}") ~ p:last-of-type'''):
        text = p.text.strip().split("(")[0]
        if any(char.isdigit() for char in text):
            print(f'{link}\n{p.text}\n{int("".join(filter(str.isdigit, text)))}')

輸出

輸出應顯示從stringto的轉換int- url 僅用于控制結果：...

https://www.sec.gov/Archives//edgar/data/1609492/000119312521353003/d251372dsc13da.htm
1,100,037(2)
1100037

...

轉載請註明出處，本文鏈接：https://www.uj5u.com/caozuo/382742.html

標籤：Python 网页抓取 美汤

上一篇：從網址未更改的站點中抓取回應表

下一篇：從容器中抓取資料

標籤雲
其他(157675) Python(38076) JavaScript(25376) Java(17977) C(15215) 區塊鏈(8255) C＃(7972) AI(7469) 爪哇(7425) MySQL(7132) html(6777) 基礎類(6313) sql(6102) 熊猫(6058) PHP(5869) 数组(5741) R(5409) Linux(5327) 反应(5209) 腳本語言(PerlPython)(5129) 非技術區(4971) Android(4554) 数据框(4311) css(4259) 节点.js(4032) C語言(3288) json(3245) 列表(3129) 扑(3119) C++語言(3117) 安卓(2998) 打字稿(2995) VBA(2789) Java相關(2746) 疑難問題(2699) 细绳(2522) 單片機工控(2479) iOS(2429) ASP.NET(2402) MongoDB(2323) 麻木的(2285) 正则表达式(2254) 字典(2211) 循环(2198) 迅速(2185) 擅长(2169) 镖(2155) 功能(1967) .NET技术(1958) Web開發(1951) python-3.x(1918) HtmlCss(1915) 弹簧靴(1913) C++(1909) xml(1889) PostgreSQL(1872) .NETCore(1853) 谷歌表格(1846) Unity3D(1843) for循环(1842)

熱門瀏覽
  • CA和證書

    1、在 CentOS7 中使用 gpg 創建 RSA 非對稱密鑰對 gpg --gen-key #Centos上生成公鑰/密鑰對（存放在家目錄.gnupg/） 2、將 CentOS7 匯出的公鑰，拷貝到 CentOS8 中，在 CentOS8 中使用 CentOS7 的公鑰加密一個檔案 gpg -a ......

    uj5u.com 2020-09-10 00:09:53 more
  • Kubernetes K8S之資源控制器Job和CronJob詳解

    Kubernetes的資源控制器Job和CronJob詳解與示例 ......

    uj5u.com 2020-09-10 00:10:45 more
  • VMware下安裝CentOS

    VMware下安裝CentOS 一、軟硬體準備 1 Centos鏡像準備 1.1 CentOS鏡像下載地址 下載地址 1.2 CentOS鏡像下載程序 點擊下載地址進入如下圖的網站，選擇需要下載的版本，這里選擇的是Centos8，點擊如圖所示。 決定選擇Centos8后，選擇想要的鏡像源進行下載，此 ......

    uj5u.com 2020-09-10 00:12:10 more
  • 如何使用Grep命令查找多個字串

    如何使用Grep 命令查找多個字串 大家好，我是良許！ 今天向大家介紹一個非常有用的技巧，那就是使用 grep 命令查找多個字串。 簡單介紹一下，grep 命令可以理解為是一個功能強大的命令列工具，可以用它在一個或多個輸入檔案中搜索與正則運算式相匹配的文本，然后再將每個匹配的文本用標準輸出的格式 ......

    uj5u.com 2020-09-10 00:12:28 more
  • git配置http代理

    git配置http代理 經常遇到克隆 github 慢的問題，這里記錄一下幾種配置 git 代理的方法，解決 clone github 過慢。 目錄 git配置代理 git單獨配置github代理 git配置全域代理 配置終端環境變數 git配置代理 主要使用 git config 命令 git單獨 ......

    uj5u.com 2020-09-10 00:12:33 more
  • Linux npm install 裝包時提示Error EACCES permission denied解

    npm install 裝包時提示Error EACCES permission denied解決辦法 ......

    uj5u.com 2020-09-10 00:12:53 more
  • Centos 7下安裝nginx，使用yum install nginx，提示沒有可用的軟體包

    Centos 7下安裝nginx，使用yum install nginx，提示沒有可用的軟體包。 18 (flaskApi) [root@67 flaskDemo]# yum -y install nginx 19 已加載插件：fastestmirror, langpacks 20 Loading ......

    uj5u.com 2020-09-10 00:13:13 more
  • Linux查看服務器暴力破解ssh IP

    在公網的服務器上經常遇到別人爆破你服務器的22埠，用來挖礦或者干其他嘿嘿嘿的事情~ 這種情況下正確的做法是： 修改默認ssh的22埠 使用設定密鑰登錄或者白名單ip登錄 建議服務器密碼為復雜密碼 創建普通用戶登錄服務器（root權限過大） 建立堡壘機，實作統一管理服務器 統計爆破IP [root ......

    uj5u.com 2020-09-10 00:13:17 more
  • CentOS 7系統常見快捷鍵操作方式

    Linux系統中一些常見的快捷方式，可有效提高操作效率，在某些時刻也能避免操作失誤帶來的問題。 ......

    uj5u.com 2020-09-10 00:13:31 more
  • CentOS 7作業系統目錄結構介紹

    作業系統存在著大量的資料檔案資訊，相應檔案資訊會存在于系統相應目錄中，為了更好的管理資料資訊，會將系統進行一些目錄規劃，不同目錄存放不同的資源。 ......

    uj5u.com 2020-09-10 00:13:35 more
最新发布
  • vim的常用命令

    Vim的6種基本模式 1. 普通模式在普通模式中，用的編輯器命令，比如移動游標，洗掉文本等等。這也是Vim啟動后的默認模式。這正好和許多新用戶期待的操作方式相反（大多數編輯器默認模式為插入模式）。 2. 插入模式在這個模式中，大多數按鍵都會向文本緩沖中插入文本。大多數新用戶希望文本編輯器編輯程序中一 ......

    uj5u.com 2023-04-20 08:43:21 more
  • vim的常用命令

    Vim的6種基本模式 1. 普通模式在普通模式中，用的編輯器命令，比如移動游標，洗掉文本等等。這也是Vim啟動后的默認模式。這正好和許多新用戶期待的操作方式相反（大多數編輯器默認模式為插入模式）。 2. 插入模式在這個模式中，大多數按鍵都會向文本緩沖中插入文本。大多數新用戶希望文本編輯器編輯程序中一 ......

    uj5u.com 2023-04-20 08:42:36 more
  • docker學習

    ###Docker概述 真實專案部署環境可能非常復雜，傳統發布專案一個只需要一個jar包，運行環境需要單獨部署。而通過Docker可將jar包和相關環境（如jdk，redis，Hadoop...）等打包到docker鏡像里，將鏡像發布到Docker倉庫，部署時下載發布的鏡像，直接運行發布的鏡像即可。 ......

    uj5u.com 2023-04-19 09:26:53 more
  • 設定Windows主機的瀏覽器為wls2的默認瀏覽器

    這里以Chrome為例。 1. 準備作業 wsl是可以使用Windows主機上安裝的exe程式，出于安全考慮，默認情況下改功能是無法使用。要使用的話，終端需要以管理員權限啟動。 我這里以Windows Terminal為例，介紹如何默認使用管理員權限打開終端，具體操作如下圖所示： 2. 操作 wsl ......

    uj5u.com 2023-04-19 09:25:49 more
  • docker學習

    ###Docker概述 真實專案部署環境可能非常復雜，傳統發布專案一個只需要一個jar包，運行環境需要單獨部署。而通過Docker可將jar包和相關環境（如jdk，redis，Hadoop...）等打包到docker鏡像里，將鏡像發布到Docker倉庫，部署時下載發布的鏡像，直接運行發布的鏡像即可。 ......

    uj5u.com 2023-04-19 09:19:04 more
  • Linux學習筆記

    IP地址和主機名 IP地址 ifconfig可以用來查詢本機的IP地址，如果不能使用，可以通過install net-tools安裝。 Centos系統下ens33表示主網卡；inet后表示IP地址；lo表示本地回環網卡； 127.0.0.1表示代指本機；0.0.0.0可以用于代指本機，同時在放行設 ......

    uj5u.com 2023-04-18 06:52:01 more
  • 解決linux系統的kdump服務無法啟動的問題

    問題：專案麒麟系統服務器的kdump服務無法啟動，沒有相關日志無法定位問題。 1、查看服務狀態是關閉的，重啟系統也無法啟動 systemctl status kdump 2、修改grub引數，修改“crashkernel”為“512M（有的機器數值太大太小都會導致報錯，建議從128M開始試，或者加個 ......

    uj5u.com 2023-04-12 09:59:50 more
  • 解決linux系統的kdump服務無法啟動的問題

    問題：專案麒麟系統服務器的kdump服務無法啟動，沒有相關日志無法定位問題。 1、查看服務狀態是關閉的，重啟系統也無法啟動 systemctl status kdump 2、修改grub引數，修改“crashkernel”為“512M（有的機器數值太大太小都會導致報錯，建議從128M開始試，或者加個 ......

    uj5u.com 2023-04-12 09:59:01 more
  • 你是不是暴露了？

    作者：袁首京 原創文章，轉載時請保留此宣告，并給出原文連接。 如果您是計算機相關從業人員，那么應該經歷不止一次網路安全專項檢查了，你肯定是收到過資訊系統技術檢測報告，要求你加強風險監測，確保你提供的系統服務堅實可靠了。 沒檢測到問題還好，檢測到問題的話，有些處理起來還是挺麻煩的，尤其是線上正在運行的 ......

    uj5u.com 2023-04-05 16:52:56 more
  • 細節拉滿，80 張圖帶你一步一步推演 slab 記憶體池的設計與實作

    1. 前文回顧 在之前的幾篇記憶體管理系列文章中，筆者帶大家從宏觀角度完整地梳理了一遍 Linux 記憶體分配的整個鏈路，本文的主題依然是記憶體分配，這一次我們會從微觀的角度來探秘一下 Linux 內核中用于零散小記憶體塊分配的記憶體池 —— slab 分配器。 在本小節中，筆者還是按照以往的風格先帶大家簡單 ......

    uj5u.com 2023-04-05 16:44:11 more

Copyright © 2010-2020 有解無憂