推薦一款Python開源庫，技術(shù)人必備的造數(shù)據(jù)神器！
1. 背景
在軟件需求、開發(fā)、測試過程中，有時(shí)候需要使用一些測試數(shù)據(jù)，針對這種情況，我們一般要么使用已有的系統(tǒng)數(shù)據(jù)，要么需要手動(dòng)制造一些數(shù)據(jù)。由于現(xiàn)在的業(yè)務(wù)系統(tǒng)數(shù)據(jù)多種多樣，千變?nèi)f化。在手動(dòng)制造數(shù)據(jù)的過程中，可能需要花費(fèi)大量精力和工作量，此項(xiàng)工作既繁復(fù)又容易出錯(cuò)，比如要構(gòu)造一批用戶三要素(姓名、手機(jī)號(hào)、身份證)、構(gòu)造一批銀行卡數(shù)據(jù)、或構(gòu)造一批地址通訊錄等。
這時(shí)候，人們常常為了偷懶快捷，測試數(shù)據(jù)大多數(shù)可能是類似這樣子的:
測試,?1300000?000123456
張三,?1310000?000123456
李四,?1320000?000234567
王五,?1330000?000345678測試數(shù)據(jù)中包括了大量的“測試XX”，要么就是隨手在鍵盤上一頓亂敲，都是些無意義的假數(shù)據(jù)。
你是不是這樣做的呢？坦白的說，有過一段時(shí)間，筆者偶爾也是這么干的。
但是，細(xì)想一下，這樣的測試數(shù)據(jù)，不僅要自己手動(dòng)敲，還假的不能再假，浪費(fèi)時(shí)間、浪費(fèi)人力、數(shù)據(jù)價(jià)值低。
而且，部分?jǐn)?shù)據(jù)的手工制造還無法保障：比如UUID類數(shù)據(jù)、MD5、SHA加密類數(shù)據(jù)等。
為了幫助大家解決這個(gè)問題，更多還是提供種一種解決方案或思路，今天給大家分享一款Python造數(shù)據(jù)利器：Faker庫，利用它可以生成一批各種各樣的看起來“像真的一樣”的假數(shù)據(jù)。
2. Faker介紹 、安裝
2.1 Faker是什么
Faker是一個(gè)Python包，主要用來創(chuàng)建偽數(shù)據(jù)，使用Faker包，無需再手動(dòng)生成或者手寫隨機(jī)數(shù)來生成數(shù)據(jù)，只需要調(diào)用Faker提供的方法，即可完成數(shù)據(jù)的生成。
項(xiàng)目地址：
https://github.com/joke2k/faker
2.2 安裝
安裝 Faker 很簡單，使用 pip 方式安裝：
pip?install?Faker
除了pip 安裝，也可以通過上方提供的github地址，來下載編譯安裝。
(py3_env)????py3_env?pip?show?faker
Name:?Faker
Version:?4.1.1
Summary:?Faker?is?a?Python?package?that?generates?fake?data?for?you.
Home-page:?https://github.com/joke2k/faker
Author:?joke2k
Author-email:[email protected]
License:?MIT?License
Location:?/Users/xxx/work_env/py3_env/lib/python3.7/site-packages
Requires:?python-dateutil,?text-unidecode
Required-by:
3. Faker常用使用
3.1 基本用法
Faker 的使用也是很簡單的，從 faker 模塊中導(dǎo)入類，然后實(shí)例化這個(gè)類，就可以調(diào)用方法使用了：
from?faker?import?Faker
fake?=?Faker()
name?=?fake.name()
address?=?fake.address()
print(name)
print(address)
#?輸出信息
Ashley?Love
074?Lee?Village?Suite?464
Dawnborough,?RI?44234
這里我們造了一個(gè)名字和一個(gè)地址，由于 Faker 默認(rèn)是英文數(shù)據(jù)，所以如果我們需要造其他語言的數(shù)據(jù)，可以使用 locale參數(shù)，例如：
from?faker?import?Faker
fake?=?Faker(locale='zh_CN')
name?=?fake.name()
address?=?fake.address()
print(name)
print(address)
#?輸出信息
張艷
海南省上海市朝陽邱路y座?175208
是不是看起來還不錯(cuò)，但是有一點(diǎn)需要注意，這里的地址并不是真實(shí)的地址，而是隨機(jī)組合出來的，也就是將省、市、道路之類的隨機(jī)組合在一起。
這里介紹幾個(gè)比較常見的語言代號(hào)：
簡體中文：zh_CN 繁體中文：zh_TW 美國英文：en_US 英國英文：en_GB 德文：de_DE 日文：ja_JP 韓文：ko_KR 法文：fr_FR
例如將語言修改為繁體中文fake = Faker(locale='zh_TW')，輸出信息為：
楊志宏
100?中壢博愛街10號(hào)9樓
3.2 常用函數(shù)
除了上述介紹的fake.name和fake.address生成姓名和地址兩個(gè)函數(shù)外，常用的faker函數(shù)按類別劃分有如下一些常用方法。
1、地理信息類
fake.city_suffix()：市，縣 fake.country()：國家 fake.country_code()：國家編碼 fake.district()：區(qū) fake.geo_coordinate()：地理坐標(biāo) fake.latitude()：地理坐標(biāo)(緯度) fake.longitude()：地理坐標(biāo)(經(jīng)度) fake.postcode()：郵編 fake.province()：省份 fake.address()：詳細(xì)地址 fake.street_address()：街道地址 fake.street_name()：街道名 fake.street_suffix()：街、路
2、基礎(chǔ)信息類
ssn()：生成身份證號(hào) bs()：隨機(jī)公司服務(wù)名 company()：隨機(jī)公司名（長） company_prefix()：隨機(jī)公司名（短） company_suffix()：公司性質(zhì) credit_card_expire()：隨機(jī)信用卡到期日 credit_card_full()：生成完整信用卡信息 credit_card_number()：信用卡號(hào) credit_card_provider()：信用卡類型 credit_card_security_code()：信用卡安全碼 job()：隨機(jī)職位 first_name_female()：女性名 first_name_male()：男性名 last_name_female()：女姓 last_name_male()：男姓 name()：隨機(jī)生成全名 name_female()：男性全名 name_male()：女性全名 phone_number()：隨機(jī)生成手機(jī)號(hào) phonenumber_prefix()：隨機(jī)生成手機(jī)號(hào)段
3、計(jì)算機(jī)基礎(chǔ)、Internet信息類
ascii_company_email()：隨機(jī)ASCII公司郵箱名 ascii_email()：隨機(jī)ASCII郵箱： company_email()： email()： safe_email()：安全郵箱
4、網(wǎng)絡(luò)基礎(chǔ)信息類
domain_name()：生成域名 domain_word()：域詞(即，不包含后綴) ipv4()：隨機(jī)IP4地址 ipv6()：隨機(jī)IP6地址 mac_address()：隨機(jī)MAC地址 tld()：網(wǎng)址域名后綴(.com,.net.cn,等等，不包括.) uri()：隨機(jī)URI地址 uri_extension()：網(wǎng)址文件后綴 uri_page()：網(wǎng)址文件（不包含后綴） uri_path()：網(wǎng)址文件路徑（不包含文件名） url()：隨機(jī)URL地址 user_name()：隨機(jī)用戶名 image_url()：隨機(jī)URL地址
5、瀏覽器信息類
chrome()：隨機(jī)生成Chrome的瀏覽器user_agent信息 firefox()：隨機(jī)生成FireFox的瀏覽器user_agent信息 internet_explorer()：隨機(jī)生成IE的瀏覽器user_agent信息 opera()：隨機(jī)生成Opera的瀏覽器user_agent信息 safari()：隨機(jī)生成Safari的瀏覽器user_agent信息 linux_platform_token()：隨機(jī)Linux信息 user_agent()：隨機(jī)user_agent信息
6、數(shù)字類
numerify()：三位隨機(jī)數(shù)字
random_digit()：0~9隨機(jī)數(shù)
random_digit_not_null()：1~9的隨機(jī)數(shù)
random_int()：隨機(jī)數(shù)字，默認(rèn)0~9999，可以通過設(shè)置min,max來設(shè)置
random_number()：隨機(jī)數(shù)字，參數(shù)digits設(shè)置生成的數(shù)字位數(shù)
pyfloat()：
left_digits=5 #生成的整數(shù)位數(shù), right_digits=2 #生成的小數(shù)位數(shù), positive=True #是否只有正數(shù)
pyint()：隨機(jī)Int數(shù)字（參考random_int()參數(shù)）
pydecimal()：隨機(jī)Decimal數(shù)字（參考pyfloat參數(shù)）
7、文本、加密類
pystr()：隨機(jī)字符串
random_element()：隨機(jī)字母
random_letter()：隨機(jī)字母
paragraph()：隨機(jī)生成一個(gè)段落
paragraphs()：隨機(jī)生成多個(gè)段落
sentence()：隨機(jī)生成一句話
sentences()：隨機(jī)生成多句話，與段落類似
text()：隨機(jī)生成一篇文章
word()：隨機(jī)生成詞語
words()：隨機(jī)生成多個(gè)詞語，用法與段落，句子，類似
binary()：隨機(jī)生成二進(jìn)制編碼
boolean()：True/False
language_code()：隨機(jī)生成兩位語言編碼
locale()：隨機(jī)生成語言/國際 信息
md5()：隨機(jī)生成MD5
null_boolean()：NULL/True/False
password()：隨機(jī)生成密碼,可選參數(shù)：length：密碼長度；special_chars：是否能使用特殊字符；digits：是否包含數(shù)字；upper_case：是否包含大寫字母；lower_case：是否包含小寫字母
sha1()：隨機(jī)SHA1
sha256()：隨機(jī)SHA256
uuid4()：隨機(jī)UUID
8、時(shí)間信息類
date()：隨機(jī)日期
date_between()：隨機(jī)生成指定范圍內(nèi)日期，參數(shù)：start_date，end_date
date_between_dates()：隨機(jī)生成指定范圍內(nèi)日期，用法同上
date_object()：隨機(jī)生產(chǎn)從1970-1-1到指定日期的隨機(jī)日期。
date_time()：隨機(jī)生成指定時(shí)間（1970年1月1日至今）
date_time_ad()：生成公元1年到現(xiàn)在的隨機(jī)時(shí)間
date_time_between()：用法同dates
future_date()：未來日期
future_datetime()：未來時(shí)間
month()：隨機(jī)月份
month_name()：隨機(jī)月份（英文）
past_date()：隨機(jī)生成已經(jīng)過去的日期
past_datetime()：隨機(jī)生成已經(jīng)過去的時(shí)間
time()：隨機(jī)24小時(shí)時(shí)間
timedelta()：隨機(jī)獲取時(shí)間差
time_object()：隨機(jī)24小時(shí)時(shí)間，time對象
time_series()：隨機(jī)TimeSeries對象
timezone()：隨機(jī)時(shí)區(qū)
unix_time()：隨機(jī)Unix時(shí)間
year()：隨機(jī)年份
9、python 相關(guān)方法
profile()：隨機(jī)生成檔案信息
simple_profile()：隨機(jī)生成簡單檔案信息
pyiterable()
pylist()
pyset()
pystruct()
pytuple()
pydict()
可以用dir(fake)，看Faker庫都可以fake哪些數(shù)據(jù)，目前Faker支持近300種數(shù)據(jù)，此外還支持自己進(jìn)行擴(kuò)展。
有了這些生成數(shù)據(jù)函數(shù)之后用fake對象就可以調(diào)用不同的方法生成各種數(shù)據(jù)了。
3.3 常用數(shù)據(jù)場景
1、構(gòu)造通訊錄記錄
from?faker?import?Faker
fake?=?Faker(locale='zh_CN')
for?_?in?range(5):
????print('姓名：',?fake.name(),?'?手機(jī)號(hào)：',?fake.phone_number())
????
#?輸出信息：
姓名：?駱柳??手機(jī)號(hào)：?18674751460
姓名：?薛利??手機(jī)號(hào)：?13046558454
姓名：?翟麗麗??手機(jī)號(hào)：?15254904803
姓名：?宋秀珍??手機(jī)號(hào)：?13347585045
姓名：?孔桂珍??手機(jī)號(hào)：?18258911504
2、構(gòu)造信用卡數(shù)據(jù)
from?faker?import?Faker
fake?=?Faker(locale='zh_CN')
print('Card?Number:',?fake.credit_card_number(card_type=None))
print('Card?Provider:',?fake.credit_card_provider(card_type=None))
print('Card?Security?Code:',?fake.credit_card_security_code(card_type=None))
print('Card?Expire:',?fake.credit_card_expire())
#?輸出信息：
Card?Number:?676181530350
Card?Provider:?Diners?Club?/?Carte?Blanche
Card?Security?Code:?615
Card?Expire:?09/21
3、生成個(gè)人檔案信息
from?faker?import?Faker
fake?=?Faker(locale='zh_CN')
print(fake.profile())
#?輸出信息
{'job':?'美術(shù)指導(dǎo)',?'company':?'易動(dòng)力傳媒有限公司',?'ssn':?'370703197807179500',?'residence':?'廣西壯族自治區(qū)旭縣薊州東莞街L座?784064',?'current_location':?(Decimal('78.3608745'),?Decimal('-95.946407')),?'blood_group':?'B+',?'website':?['https://www.jiewang.org/',?'https://www.longsong.cn/',?'https://jingyong.net/',?'https://58.cn/'],?'username':?'qinqiang',?'name':?'唐偉',?'sex':?'F',?'address':?'新疆維吾爾自治區(qū)建華市東麗拉薩街a座?875743',?'mail':?'[email protected]',?'birthdate':?datetime.date(2014,?4,?27)}
4、生成Python相關(guān)結(jié)構(gòu)信息
from?faker?import?Faker
fake?=?Faker(locale='zh_CN')
print('生成Python字典:?{}'.format(fake.pydict(
????nb_elements=10,?variable_nb_elements=True)))??#?Python字典
print('生成Python可迭代對象:{}.'.format(fake.pyiterable(
????nb_elements=10,?variable_nb_elements=True)))???#?Python可迭代對象
print('生成Python結(jié)構(gòu)：{}'.format(fake.pystruct(count=1)))??#?Python結(jié)構(gòu)
#?輸出信息
成Python字典:?{'論壇':?'nVcSbHlrcrhIBtwByVUM',?'直接':?'drkyFUNcNxdbwYKhRLEZ',?'成功':?'https://fang.cn/main/search/blog/search/',?'沒有':?datetime.datetime(2006,?2,?24,?15,?40,?14),?'原因':?404,?'作者':?'OTJjsFHQklpUvTPtLCqP'}
生成Python可迭代對象:{1088,?'ignqbohwYRxqolLEzSti',?'http://gang.cn/main/search.php',?'zRnNYdIpPXUxEVISHbvS',?'ToZxuBetghvlPHUumAvi',?9830,?'OYAjoKeVNGhHMLgnYUAw',?970446.888,?-17681479853.4069,?872236250787063.0,?datetime.datetime(2017,?12,?24,?5,?58,?58),?'aRSfxiUSuMqHXvKCCkMJ'}
生成Python結(jié)構(gòu)：(['cKwOvdCEFOhCERMSMXSf'],?{'只有':?'hhwGCmjkHMOUjBTDztXp'},?{'還有':?{0:?'vjcNqpnRbNUUxXpgVyvh',?1:?[8725,?7125,?'aTSJssAJUKpuRLcbiwyK'],?2:?{0:?'RmWlFQQpVZIQkxZPfJnq',?1:?'efsUVLgeStXbCOJDuJCf',?2:?['FgZQLCRjUTmEbBdDMEPZ',?'https://min.cn/search/faq/']}}})
4. 自定義Faker數(shù)據(jù)類型
如果這些數(shù)據(jù)還不夠生成數(shù)據(jù)使用，F(xiàn)aker還支持創(chuàng)建自定義的Provider生成數(shù)據(jù)。
from?faker?import?Faker
from?faker.providers?import?BaseProvider
#?創(chuàng)建自定義Provider
class?CustomProvider(BaseProvider):
????def?customize_type(self):
????????return?'test_Faker_customize_type'
#?添加Provider
fake?=?Faker()
fake.add_provider(CustomProvider)
print(fake.customize_type())
是不是十分簡單，以后常用的數(shù)據(jù)就可以自己創(chuàng)建Provider用自動(dòng)化的方法生成了，不僅節(jié)省了時(shí)間，復(fù)用性也變高了。
5. 總結(jié)
這些只是其中的一些常見的數(shù)據(jù)，F(xiàn)aker 可以造的數(shù)據(jù)遠(yuǎn)不止這些類型。相信通過本文的介紹，大家應(yīng)該對 Faker 不陌生了吧。
此外，作為一個(gè)開源的庫，F(xiàn)aker的源碼是非常值得研究的，也是Python新手可以用來練開源項(xiàng)目的利器。
python爬蟲人工智能大數(shù)據(jù)公眾號(hào)
